在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

支撐海量數據,分布式存儲該如何應戰

中科曙光 ? 來源:中科曙光 ? 作者:中科曙光 ? 2022-03-25 14:44 ? 次閱讀

在曙光舉辦的技術圓桌派上,來自業內的多位大咖和專家就數字化轉型與分布式存儲發展趨勢展開討論。

支撐海量數據

分布式存儲該如何應戰

伴隨著云計算、大數據、物聯網信息技術的快速發展和傳統產業數字化的轉型,新技術的應用與推廣帶來海量數據的規模化聚集。用戶對存儲系統的穩定性、性能和彈性擴展能力有著更高的期待,而傳統集中式存儲煙囪式的部署模式在擴展性和管理上都遇到非常多的挑戰,主持人黃海峰在圓桌派一開始向嘉賓們提出了這一問題。

“2021年,分布式存儲和云存儲在量和銷售額方面的增速分別達到30%和20%,相較于傳統存儲的20%和8%,分布式存儲遠遠勝于傳統存儲。”賽迪顧問業務總監高丹對2021年的存儲市場格局做出了總結。

“面對海量爆發的數據,以前傳統集中式的存儲已經不是最優選了。”中科曙光存儲事業部副總經理張新鳳表示,“對分布式存儲本身來說,破解海量數據存儲難題,也是有非常多的挑戰。”

首先,就是解決海量數據的存儲。海量不簡簡單單的是設備的堆集,技術難度是指數級的增長。要看廠商是否有豐富的超大部署規模和實施經驗;第二是能對5GAI區塊鏈等新技術有更好的支持。這就需要統一協議的支持,打通從數據的采集、應用、分析到歸檔的鏈路,做到異構數據的融合;第三,針對用戶實際應用,在產品性能和功能上做到深度的定制。

自研優勢盡顯

曙光分布式存儲領跑市場

“存儲的市場,是一個需要很深的技術積累和很大資金投入的市場。曙光推出的產品是自研的。自研的路線,對客戶節約成本角度來說,還是對我們自己安全的角度來說,都是一套比較好的技術路線,我也希望我們自己國家的自研路線走的越來越好。”高丹表示。

“曙光做存儲,一開始就選擇了分布式存儲路線。”張新鳳介紹,2009年,曙光推出第一代全自主研發的分布式存儲系統ParaStor,基于POSIX協議,在做數據處理的時候有很好的性能體驗;2013年,數據中心已經開始比較規模化的部署,這個時候我們完成了對NAS共享的支持;2019年,基本各個行業都在普及云化,我們為了解決業務上云的問題,又推出分布式塊協議。現在, 曙光分布式存儲系統ParaStor完成了對文件、塊、對象和大數據協議的支持,基本覆蓋所有應用場景。

基于自研優勢,曙光可根據不同行業用戶的不同需求,進行代碼級的定制化設計與開發,產品功能和性能指標可大大優于同類產品。“比如我們的分布式對象,單桶就可以實現4K小文件千億級別的存儲,一個系統TPS的聚合性能可以達到百萬級,這種水平是業內一流的。”張新鳳說。

曙光成就產業數字化轉型

最佳實踐

“分布式的應用越來越廣泛,但細化到具體的應用場景里,又會發現應用需求是千差萬別的。”面對當前分布式存儲多樣化的應用需求,張新鳳表示“要快速的響應市場需求,推出合適的產品,首先要有強有力的團隊支撐,其次是對行業的深耕和理解,基于以上兩者的優勢,對用戶推出定制化的產品及運維服務。”

張新鳳介紹,在某科研機構氣候模擬和科學研究項目中,為了幫助用戶解決業務流程時間過長的問題,曙光集結專業研發團隊為客戶定制加速技術。在計算和存儲節點之間,配備了大內存和高速NVMe的性能加速節點,把大量4K非對齊IO在這個節點上先做聚合,再到存儲上面。最后用戶實測使用性能提升8到10倍。“對存儲技術有了一定的積累,對應用有相當的理解,才能迅速抓到用戶需求痛點,快速響應。”

“在石油勘探過程中,數據存儲和分析處理的需求呈幾何倍增長,對存儲容量以及擴展性都提了很高的要求;石油勘探領域對收集上來的數據,需要提供TB級及PB級的讀寫性能,來滿足我們現在前端的密集計算和模擬。”,中石化石油物探技術研究院信息中心技術主管葛鑫提及。

“在輿情數據智能分析時,客戶要求系統架構能融合訓練、分析及推理,傳統存算一體化的模式就不太適用。”中科天璣區域拓展部總經理劉維秦在分布式存儲應用中談到,”曙光原生HDFS協議的支持,在存算分離的基礎上,保證了性能的指數級提升,還可以支持更多大數據高級功能。”

“未來的存儲系統要很好地支撐應用,無論是性能的極致優化,或者是功能的定制”,張新鳳對存儲市場的未來發展演進做出判斷,“沒有一蹴而就的捷徑可以走,更多的是天長日久的積累和演進”,作為國內第一批做自研分布式存儲的廠商,曙光將以更扎實的科研技術、更先進的存儲產品、更優質的存儲服務,助力產業升級和數字化轉型。

原文標題:曙光技術圓桌派——分布式是新存儲時代的破題密鑰

文章出處:【微信公眾號:中科曙光】歡迎添加關注!文章轉載請注明出處。

審核編輯:湯梓紅

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 數據
    +關注

    關注

    8

    文章

    7077

    瀏覽量

    89161
  • 存儲
    +關注

    關注

    13

    文章

    4324

    瀏覽量

    85938
  • 數字化
    +關注

    關注

    8

    文章

    8774

    瀏覽量

    61885

原文標題:曙光技術圓桌派——分布式是新存儲時代的破題密鑰

文章出處:【微信號:sugoncn,微信公眾號:中科曙光】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    HarmonyOS Next 應用元服務開發-分布式數據對象遷移數據文件資產遷移

    提供了async版本供該場景使用。 當前,wantParams中“sessionId”字段在遷移流程中被系統占用,建議開發者在wantParams中定義其他key值存儲分布式數據對象
    發表于 12-24 10:11

    HarmonyOS Next 應用元服務開發-分布式數據對象遷移數據權限與基礎數據

    提供了async版本供該場景使用。 當前,wantParams中“sessionId”字段在遷移流程中被系統占用,建議開發者在wantParams中定義其他key值存儲分布式數據對象
    發表于 12-24 09:40

    WDS分布式存儲系統軟件助力電信工程海量數據存儲項目

    WDS分布式存儲系統軟件助力電信工程海量數據存儲項目
    的頭像 發表于 11-11 09:59 ?202次閱讀
    WDS<b class='flag-5'>分布式</b><b class='flag-5'>存儲</b>系統軟件助力電信工程<b class='flag-5'>海量</b><b class='flag-5'>數據</b><b class='flag-5'>存儲</b>項目

    NetApp與Google Cloud深化合作,強化分布式存儲

    智能數據基礎設施領導者NetApp?宣布,其與Google Cloud的戰略合作再升級。此次合作中,NetApp將統一數據存儲和智能服務融入Google Distributed Cloud架構,為
    的頭像 發表于 10-11 17:21 ?508次閱讀

    分布式存儲費用高嗎?大概需要多少錢

    分布式存儲的費用是否高,取決于多個因素,包括存儲容量、性能要求、服務提供商、計費模式等。因此,無法簡單地給出一個“高”或“不高”的答案。通常分布式
    的頭像 發表于 09-24 10:41 ?278次閱讀

    基于分布式存儲系統醫療影像數據存儲解決方案

    基于分布式存儲系統醫療影像數據存儲解決方案
    的頭像 發表于 09-14 09:53 ?330次閱讀
    基于<b class='flag-5'>分布式</b><b class='flag-5'>存儲</b>系統醫療影像<b class='flag-5'>數據</b><b class='flag-5'>存儲</b>解決方案

    基于分布式對象存儲WDS的信托非結構化數據整合平臺

    基于分布式對象存儲WDS的信托非結構化數據整合平臺
    的頭像 發表于 08-28 09:56 ?359次閱讀
    基于<b class='flag-5'>分布式</b>對象<b class='flag-5'>存儲</b>WDS的信托非結構化<b class='flag-5'>數據</b>整合平臺

    醫療PACS影像數據的極速分布式存儲解決方案

    醫療PACS影像數據的極速分布式存儲解決方案
    的頭像 發表于 08-23 10:13 ?356次閱讀
    醫療PACS影像<b class='flag-5'>數據</b>的極速<b class='flag-5'>分布式</b>塊<b class='flag-5'>存儲</b>解決方案

    基于分布式存儲WDS的金融信創云承載數據庫類關鍵應用

    基于分布式存儲WDS的金融信創云承載數據庫類關鍵應用
    的頭像 發表于 08-16 09:42 ?286次閱讀
    基于<b class='flag-5'>分布式</b><b class='flag-5'>存儲</b>WDS的金融信創云承載<b class='flag-5'>數據</b>庫類關鍵應用

    鴻蒙開發接口數據管理:【@ohos.data.distributedData (分布式數據管理)】

    分布式數據管理為應用程序提供不同設備間數據庫的分布式協同能力。通過調用分布式數據各個接口,應用程
    的頭像 發表于 06-07 09:30 ?1018次閱讀
    鴻蒙開發接口<b class='flag-5'>數據</b>管理:【@ohos.data.distributedData (<b class='flag-5'>分布式</b><b class='flag-5'>數據</b>管理)】

    浪潮信息發布AS13000G7-N系列分布式全閃存儲

    浪潮信息近日推出了專為大型AI模型優化的AS13000G7-N系列分布式全閃存儲。該系列基于浪潮信息自研的分布式文件系統,結合新一代數據加速引擎DataTurbo,為用戶提供卓越的
    的頭像 發表于 05-14 10:03 ?584次閱讀

    為大模型專門優化 浪潮信息發布分布式全閃存儲AS13000G7-N系列

    北京2024年5月10日?/美通社/ -- 近日,浪潮信息發布為大模型專門優化的分布式全閃存儲AS13000G7-N系列。該系列依托浪潮信息自研分布式文件系統,搭載新一代數據加速引擎
    的頭像 發表于 05-10 16:37 ?443次閱讀
    為大模型專門優化 浪潮信息發布<b class='flag-5'>分布式</b>全閃<b class='flag-5'>存儲</b>AS13000G7-N系列

    HarmonyOS開發實例:【分布式數據服務】

    分布式數據服務(Distributed Data Service,DDS)為應用程序提供不同設備間數據分布式的能力。
    的頭像 發表于 04-18 10:18 ?744次閱讀
    HarmonyOS開發實例:【<b class='flag-5'>分布式</b><b class='flag-5'>數據</b>服務】

    數據時代的存儲革命:理解分布式存儲系統

    管理的效率極低。因此,分布式存儲系統應運而生。 分布式存儲就是將數據存儲在眾多的服務器或網絡節點
    的頭像 發表于 03-07 15:40 ?435次閱讀

    分布式存儲與計算:大數據時代的解決方案

    分布式存儲和計算技術應運而生,并迅速成為處理大數據的首選方案。本文將深入探討分布式存儲和計算的概念、優勢及其在各個領域的應用情況。 1.
    的頭像 發表于 03-07 14:42 ?787次閱讀
    主站蜘蛛池模板: 日韩免费精品一级毛片| 天堂伊人| 中文字幕一区二区三| 欧美人交性视频在线香蕉| 四虎网址| 人人狠狠综合88综合久久| 农村妇女高清毛片一级| 亚洲成人资源| 亚洲福利秒拍一区二区| 亚洲男人的天堂久久无| 福利视频一区二区三区| 午夜肉伦伦影院| 在线播放色| 国语一区| 性欧美成人免费观看视| 色综合 成人| 免费人成激情视频在线观看冫| 日本黄色免费在线| 毛片网在线| 免费在线观看一级毛片| 久久成人网18网站| 久久精品5| 超级狂色而且免费又超好看| 国产在线观看色| 黄色欧美视频| 久久精品久噜噜噜久久| 国产女人18毛片水真多18精品| 极品啪啪| 又粗又硬又大久久久| 成人在线观看网站| 国产美女一区二区三区| 亚洲久久在线| 天天干夜夜爽天天操夜夜爽视频| 一级网站片| 久久人人爽爽爽人久久久| 日本精品视频一视频高清| 天天干夜夜看| 夜性影院| 亚洲一区三区| 日本一区二区三区欧美在线观看| 亚洲欧美日本综合|