在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
电子发烧友
开通电子发烧友VIP会员 尊享10大特权
海量资料免费下载
精品直播免费看
优质内容免费畅学
课程9折专享价
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

大數(shù)據(jù)時代數(shù)據(jù)存儲技術(shù)的發(fā)展

我快閉嘴 ? 來源:大數(shù)據(jù)講壇 ? 作者:時文 ? 2020-09-10 16:34 ? 次閱讀

數(shù)字經(jīng)濟(jì)時代,數(shù)據(jù)成為新的生產(chǎn)資料,數(shù)據(jù)驅(qū)動體驗、數(shù)據(jù)驅(qū)動決策、數(shù)據(jù)驅(qū)動流程的各種應(yīng)用正不斷上演。5G、云、AI加速行業(yè)數(shù)字化轉(zhuǎn)型,海量數(shù)據(jù)時代已經(jīng)到來。海量數(shù)據(jù)促使企業(yè)從數(shù)據(jù)管理走向數(shù)據(jù)運營,目前,正面臨三大挑戰(zhàn):一是成本高、存不下;二是效率低、流不動;三是自動化差、管不好。

Hadoop1.0時代,計算和存儲是高度融合,僅能處理單一的MapReduce分析業(yè)務(wù);Hadoop2.0時代,計算層與數(shù)據(jù)開始解耦,通過Yarn實現(xiàn)了獨立的資源管理,并開始支持Spark等更多的計算引擎;而如今來到Hadoop3.0時代,計算存儲已分開演進(jìn),通過Hadoop EC來支持冷數(shù)據(jù)的存儲,同時引入外置存儲,如S3,增強(qiáng)其存儲底座能力,逐步向數(shù)據(jù)湖架構(gòu)演進(jìn)。Hadoop3.0時代,計算正向輕量化和容器化方向發(fā)展,計算存儲分離演進(jìn)已成為事實。計算存儲分離后,我們用企業(yè)級的存儲基座替代原來的原生大數(shù)據(jù)存儲基座,好處是可以把當(dāng)前企業(yè)級存儲的先進(jìn)技術(shù)帶入到大數(shù)據(jù)里面來,如高可靠、高利用率、多協(xié)議融合等,更好地釋放數(shù)據(jù)的價值。

舉個例子來說,2018年,華為創(chuàng)新性推出基于OceanStor Pacific系列的大數(shù)據(jù)存算分離方案。在成本方面,華為大數(shù)據(jù)存算分離方案實現(xiàn)存算分離,資源按需獨立擴(kuò)展,彈性EC、冷熱數(shù)據(jù)分級,存儲成本大幅降低。在數(shù)據(jù)應(yīng)用效率方面,華為OceanStor Pacific系列采用全對稱分布式NameNode,集群性能和支持文件數(shù)隨節(jié)點數(shù)目增加線性提升,單一命名空間支持文件數(shù)達(dá)百億級。在實際操作運維方面,華為OceanStor Pacific系列提供的原生HDFS接口提供了更佳性能和使用體驗。通過ViewFS或Hbase元數(shù)據(jù)網(wǎng)關(guān)方式可實現(xiàn)新老共存,實現(xiàn)存算一體向存算分離的平滑演進(jìn),保護(hù)用戶已有投資。
責(zé)任編輯:tzh

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    31490

    瀏覽量

    269907
  • 5G
    5G
    +關(guān)注

    關(guān)注

    1356

    文章

    48503

    瀏覽量

    565515
  • 大數(shù)據(jù)
    +關(guān)注

    關(guān)注

    64

    文章

    8908

    瀏覽量

    137653
收藏 0人收藏

    評論

    相關(guān)推薦

    QLC存儲新里程:德明利探索高效存儲之路,賦能數(shù)據(jù)時代新需求

    大數(shù)據(jù)和人工智能時代數(shù)據(jù)存儲需求呈指數(shù)級增長,市場對存儲媒介的性能、容量和能效提出了更高要求。隨著閃存
    的頭像 發(fā)表于 01-21 16:00 ?212次閱讀
    QLC<b class='flag-5'>存儲</b>新里程:德明利探索高效<b class='flag-5'>存儲</b>之路,賦能<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>時代</b>新需求

    浪潮信息剖析智能時代數(shù)據(jù)存儲領(lǐng)域面臨的挑戰(zhàn)與機(jī)遇

    在當(dāng)今數(shù)字化時代,算力與存力的協(xié)同增長已成為驅(qū)動各行各業(yè)發(fā)展的關(guān)鍵力量。特別是在人工智能(AI)這一前沿領(lǐng)域,隨著數(shù)據(jù)量的爆炸式增長,對存儲系統(tǒng)的需求日益復(fù)雜和多樣。近期,在首屆CCF
    的頭像 發(fā)表于 12-30 09:43 ?272次閱讀

    緩存對大數(shù)據(jù)處理的影響分析

    緩存對大數(shù)據(jù)處理的影響顯著且重要,主要體現(xiàn)在以下幾個方面: 一、提高數(shù)據(jù)訪問速度 在大數(shù)據(jù)環(huán)境中,數(shù)據(jù)存儲通常采用分布式
    的頭像 發(fā)表于 12-18 09:45 ?225次閱讀

    bds 行業(yè)發(fā)展趨勢分析 bds在大數(shù)據(jù)中的應(yīng)用

    BDS(大數(shù)據(jù)分析技術(shù))作為一種通過收集、處理和分析大量數(shù)據(jù)以提取有價值信息和洞察力的技術(shù),在當(dāng)前數(shù)字化時代發(fā)揮著至關(guān)重要的作用。 一、BD
    的頭像 發(fā)表于 11-22 15:47 ?570次閱讀

    SD NAND在大數(shù)據(jù)時代的應(yīng)用場景

    SD NAND是一種結(jié)合了SD卡接口和NAND閃存技術(shù)存儲解決方案。它通常指的是使用NAND閃存芯片并通過SD卡標(biāo)準(zhǔn)接口進(jìn)行數(shù)據(jù)傳輸?shù)?b class='flag-5'>存儲設(shè)備。在
    的頭像 發(fā)表于 10-29 15:49 ?307次閱讀
    SD NAND在<b class='flag-5'>大數(shù)據(jù)</b><b class='flag-5'>時代</b>的應(yīng)用場景

    智慧城市與大數(shù)據(jù)的關(guān)系

    的建設(shè)需要對海量的數(shù)據(jù)資源進(jìn)行收集、整合、存儲與分析。大數(shù)據(jù)技術(shù)的應(yīng)用,如智能感知、分布式存儲等,使得這些
    的頭像 發(fā)表于 10-24 15:27 ?825次閱讀

    云計算在大數(shù)據(jù)分析中的應(yīng)用

    云計算在大數(shù)據(jù)分析中的應(yīng)用廣泛且深入,它為用戶提供了存儲、計算、分析和預(yù)測的強(qiáng)大能力。以下是對云計算在大數(shù)據(jù)分析中應(yīng)用的介紹: 一、存儲和處理海量數(shù)
    的頭像 發(fā)表于 10-24 09:18 ?572次閱讀

    大數(shù)據(jù)采集系統(tǒng)分為幾類

    和應(yīng)用場景. 1. 概述 大數(shù)據(jù)采集系統(tǒng)是實現(xiàn)數(shù)據(jù)收集、處理和存儲的關(guān)鍵環(huán)節(jié)。隨著大數(shù)據(jù)技術(shù)的快速發(fā)展
    的頭像 發(fā)表于 07-01 15:44 ?1671次閱讀

    英特爾攜手騰訊云用CPU打造LLM時代數(shù)據(jù)中樞,共筑AGI基建

    英特爾攜手騰訊云用CPU打造LLM時代數(shù)據(jù)中樞,共筑AGI基建
    的頭像 發(fā)表于 05-27 11:53 ?552次閱讀
    英特爾攜手騰訊云用CPU打造LLM<b class='flag-5'>時代數(shù)據(jù)</b>中樞,共筑AGI基建

    大數(shù)據(jù)時代存儲革命:理解分布式存儲系統(tǒng)

    在如今的大數(shù)據(jù)時代,全球數(shù)據(jù)量正在以指數(shù)型增長。據(jù)國際數(shù)據(jù)公司(IDC)預(yù)測,到2025年,全球數(shù)據(jù)量將增至175 ZB。這種海量的
    的頭像 發(fā)表于 03-07 15:40 ?461次閱讀

    分布式存儲與計算:大數(shù)據(jù)時代的解決方案

    分布式存儲和計算技術(shù)應(yīng)運而生,并迅速成為處理大數(shù)據(jù)的首選方案。本文將深入探討分布式存儲和計算的概念、優(yōu)勢及其在各個領(lǐng)域的應(yīng)用情況。 1.分布式存儲
    的頭像 發(fā)表于 03-07 14:42 ?842次閱讀

    數(shù)據(jù)存儲技術(shù)未來發(fā)展趨勢與前景展望

    數(shù)據(jù)存儲對于數(shù)據(jù)挖掘與分析、數(shù)據(jù)整合與共享、智能決策支持、業(yè)務(wù)模式創(chuàng)新以及優(yōu)化資源配置等方面具有重要作用。按照存儲介質(zhì)不同,
    發(fā)表于 02-27 09:29 ?3613次閱讀
    <b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>存儲</b><b class='flag-5'>技術(shù)</b>未來<b class='flag-5'>發(fā)展</b>趨勢與前景展望

    簡析大數(shù)據(jù)技術(shù)下智能充電樁在網(wǎng)絡(luò)系統(tǒng)中的應(yīng)用

    ,科學(xué)技術(shù)水平的提高為我國進(jìn)入大數(shù)據(jù)時代提供了很大的推動力,這篇文章所要講的就是在新時期大數(shù)據(jù)技術(shù)在智能充電樁網(wǎng)絡(luò)系統(tǒng)中發(fā)揮著什么樣的作用,
    的頭像 發(fā)表于 02-26 10:57 ?481次閱讀
    簡析<b class='flag-5'>大數(shù)據(jù)</b><b class='flag-5'>技術(shù)</b>下智能充電樁在網(wǎng)絡(luò)系統(tǒng)中的應(yīng)用

    淺析大數(shù)據(jù)時代下的數(shù)據(jù)中心運維管理

    數(shù)據(jù)中心運維治理的整體質(zhì)量。這樣,才能充分發(fā)揮大數(shù)據(jù)的價值,并推動企業(yè)加速發(fā)展。 關(guān)鍵詞:大數(shù)據(jù)數(shù)據(jù)中心;遠(yuǎn)維管理;策略 0引言 目前,我
    的頭像 發(fā)表于 02-22 14:40 ?420次閱讀
    淺析<b class='flag-5'>大數(shù)據(jù)</b><b class='flag-5'>時代</b>下的<b class='flag-5'>數(shù)據(jù)</b>中心運維管理

    大數(shù)據(jù)技術(shù)是干嘛的 大數(shù)據(jù)核心技術(shù)有哪些

    大數(shù)據(jù)技術(shù)是指用來處理和存儲海量、多類型、高速的數(shù)據(jù)的一系列技術(shù)和工具。現(xiàn)如今,大數(shù)據(jù)已經(jīng)滲透到
    的頭像 發(fā)表于 01-31 11:07 ?3763次閱讀
    主站蜘蛛池模板: 欧美一级色 | 色综合视频 | 久久狠狠第一麻豆婷婷天天 | 天天草天天爽 | 欧美午夜视频一区二区三区 | 操狠狠| 色5566| 亚洲国产成人在人网站天堂 | 快乐你懂的在线视频免费观看 | 最近2018中文字幕免费看手机 | 天天干天天操天天 | 国产裸体美女视频全黄 | 亚洲一区二区三区中文字幕 | 中文字幕视频二区 | 伊人久久大香线蕉观看 | 免费精品美女久久久久久久久 | 一级毛片一级毛片 | 91中文字幕视频 | 么公的好大好硬好深好爽在线视频 | 第四色亚洲色图 | 天天干狠狠干 | 天天干天天爽 | 欧美一级免费观看 | 亚洲伊人久久大香线蕉结合 | 来吧成人综合网 | 色网站在线观看 | 四虎影视永久地址 | 操操操干干 | 1024你懂的国产欧美日韩在 | 波多野结衣在线网站 | 在线小视频你懂的 | bt天堂新版中文在线地址 | 久久综合九色综合97婷婷群聊 | 男男h啪肉np文总受 男男h全肉耽污 | 日本三级带日本三级带黄首页 | 精品新一区二区三区四区 | 亚洲精品久久久久影 | 天堂中文字幕在线观看 | 窝窝午夜在线观看免费观看 | 精品国产乱子伦一区 | 欧美性xxxx极品高清 |

    電子發(fā)燒友

    中國電子工程師最喜歡的網(wǎng)站

    • 2931785位工程師會員交流學(xué)習(xí)
    • 獲取您個性化的科技前沿技術(shù)信息
    • 參加活動獲取豐厚的禮品