在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

冰上的大數據

星星科技指導員 ? 來源:嵌入式計算設計 ? 作者:Brandon Lewis ? 2022-08-17 09:40 ? 次閱讀

波音噴氣發動機每運行 30 分鐘,就會產生 10 TB 的數據。那是 1 萬億字節,或相當于美國國會圖書館整個印刷館藏的數字化等價物。將其乘以每天在美國上空推動超過 87,000 次航班的噴氣發動機數量,您就會獲得大量數據。

盡管一些人猜測大數據不會轉化為分析療法,但它仍然與物聯網IoT) 密不可分。如果思科等公司的預測是正確的,那么到 2020 年,我們將有大約 500 億個支持互聯網的“事物”不斷地啁啾,雖然它們可能不會都在噴氣發動機剪輯上生成數據,但這絕對構成了數據海嘯。

那么,我們將如何處理所有這些數據?收獲的信息必須在某種程度上具有價值,否則它一開始就不會被收獲。另一方面,并??非所有數據都是平等的。收集到的絕大多數數據可能會被存檔和遺忘,直到偶爾報告需要它,訪問一次或兩次,然后再次被遺忘。根據 Enterprise Strategy Group 的研究,這種“不經常訪問”的信息(也稱為第 3 層或“冷”數據)占記錄數據的 80%。而且,盡管這些年來內存的平均成本急劇下降,但在大數據規模上,每 GB 幾美分的成本可以很快加起來。

這種信息過載的明顯答案是冷數據存儲替代方案,它們比用于定期訪問的數據更便宜且容量更大。因此,公司通常選擇以下兩種解決方案之一:歷史悠久的磁帶庫,或者最近的云。

磁帶庫已經使用了幾十年,非常適合以極低的成本存儲大量數據。它們也可以被認為是“綠色的”,因為磁帶驅動器僅在使用時旋轉(這可以節省電力),并且位于內部可以相對快速地訪問冷數據。然而,磁帶庫也有一些缺點,包括大中型存儲系統的前期費用高昂、遠程訪問困難、磁帶退化的可能性以及在單個現場位置維護檔案的漏洞。而不是“數據海嘯”想想“數據”和“海嘯”)。

公司探索云存儲的可能性,通過提供無限的存儲空間、低成本以及防止盜竊、自然災害等的遠程容量,彌補了磁帶庫的一些疑慮。然而,云解決方案的主要特點是檢索數據通常非常耗時,并且可能會變得昂貴,具體取決于檢索的數據量。例如,Amazon Glacier 之類的服務至少需要 3-5 小時來檢索數據集(可在 24 小時內下載),如果在給定的數據中檢索到超過 5% 的數據,則按千兆字節收費月。

兩者的交叉點似乎會有所改進,并包含優化訪問的硬件和軟件元素,同時確保每 GB 存儲的成本盡可能低。

冷藏:冰上的大數據

軟件定義存儲 (SDS) 是一個新術語,但從技術角度來看,它類似于軟件定義網絡 (SDN),因為硬件邏輯被抽象為管理存儲基礎設施的軟件層。從本質上講,這意味著可以虛擬化存儲功能或服務(如重復數據刪除、復制、快照和精簡配置),從而實現在商用硬件上運行的融合存儲架構。因此,可以實施具有成本效益的存儲策略,將磁帶庫的可訪問性和效率與云的可擴展性和遠程功能相結合。

例如,由 Storiant 提供支持的 RGS Cold Storage 是針對第 3 層數據的本地存儲解決方案,它基于 Avnet, Inc. 的業務部門 RGS 的現成硬件。機柜級設備與 60 個提供 PB 級容量的 HDD 托架完全集成,并利用基于 OpenZFS 的 Storiant 軟件(以前稱為 SageCloud)與私有云接口。Storiant 數據管理軟件還提高了訪問性能,將處于停滯狀態的數據的檢索時間縮短至 30 秒,同時允許 HDD 在不使用時減速以顯著降低功耗。可擴展的 RGS 冷存儲架構每月每 GB 存儲 0.01 美元,針對大多數大數據部署進行了成本優化。

雖然 SDS 等存儲管理技術有助于為有價值的業務分析奠定基礎,但它們還確保財務和計算資源可用于定期執行的“第 1 層”數據。在一個過多的信息實際上會變成一件壞事的環境中,將其中的一些信息保持在深度凍結狀態是很重要的。

審核編輯:郭婷

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 發動機
    +關注

    關注

    33

    文章

    2497

    瀏覽量

    69624
  • 物聯網
    +關注

    關注

    2913

    文章

    44915

    瀏覽量

    376354
  • SDS
    SDS
    +關注

    關注

    0

    文章

    48

    瀏覽量

    15798
收藏 人收藏

    評論

    相關推薦

    工程大數據平臺

    由于無人駕駛系統開發需要長期迭代優化,其過程需要大量的路試數據支撐,經緯恒潤針對無人駕駛系統持續運營和持續迭代的需求,開發并在云端部署了車路云工程大數據平臺,依托5G網絡,具有遠程數據采集、壓縮、傳輸、解析、回放與算法無縫銜接等
    的頭像 發表于 01-10 17:00 ?131次閱讀
    工程<b class='flag-5'>大數據</b>平臺

    緩存對大數據處理的影響分析

    緩存對大數據處理的影響顯著且重要,主要體現在以下幾個方面: 一、提高數據訪問速度 在大數據環境中,數據存儲通常采用分布式存儲系統,數據量龐大
    的頭像 發表于 12-18 09:45 ?231次閱讀

    ADS1675最大數據吞吐率是是多少?

    ADS1675 24bit的ADC的采樣率最大是4Msps,請問這款adc的最大數據吞吐率是是多少?怎么算的,在datasheet中有明確寫出來嗎
    發表于 11-28 07:56

    raid 在大數據分析中的應用

    RAID(Redundant Array of Independent Disks,獨立磁盤冗余陣列)在大數據分析中的應用主要體現在提高存儲系統的性能、可靠性和容量上。以下是RAID在大數據分析中
    的頭像 發表于 11-12 09:44 ?300次閱讀

    智慧城市與大數據的關系

    智慧城市與大數據之間存在著密切的關系,這種關系體現在大數據對智慧城市建設的支撐和推動作用,以及智慧城市產生的大量數據大數據技術的應用需求。 大數據
    的頭像 發表于 10-24 15:27 ?829次閱讀

    云計算在大數據分析中的應用

    云計算在大數據分析中的應用廣泛且深入,它為用戶提供了存儲、計算、分析和預測的強大能力。以下是對云計算在大數據分析中應用的介紹: 一、存儲和處理海量數據 云計算提供了強大的存儲和計算能力,可以存儲
    的頭像 發表于 10-24 09:18 ?588次閱讀

    IP 地址大數據分析如何進行網絡優化?

    一、大數據分析在網絡優化中的作用 1.流量分析 大數據分析可以對網絡中的流量進行實時監測和分析,了解網絡的使用情況和流量趨勢。通過對流量數據的分析,可以發現網絡中的瓶頸和問題,為網絡優化提供依據
    的頭像 發表于 10-09 15:32 ?291次閱讀
    IP 地址<b class='flag-5'>大數據</b>分析如何進行網絡優化?

    使用CYW20829的BLE進行最大數據發送應用,BLE丟失數據如何解決?

    我目前正在使用 CYW20829 的 BLE 進行最大數據發送應用,我使用的是 FREERTOS(例程 Bluetooth_LE_GATT_Throughput_Server 是我的參考),藍牙被
    發表于 07-23 07:56

    大數據在軍事方面的應用

    智慧華盛恒輝大數據在軍事方面的應用廣泛且深入,涵蓋了戰爭決策、情報分析、裝備研發、后勤保障、科研方法、管理水平、作戰能力和信息化建設等多個方面。以下是對這些應用的詳細歸納: 智慧華盛恒輝一、戰爭決策
    的頭像 發表于 07-16 09:44 ?1200次閱讀

    大數據采集系統分為幾類

    大數據采集系統是大數據生態系統中的重要組成部分,它負責從各種數據源收集、整合和存儲數據。根據不同的數據源、采集方法和應用場景,
    的頭像 發表于 07-01 15:44 ?1687次閱讀

    大數據在軍事方面的應用有哪些

    智慧華盛恒輝大數據在軍事方面的應用涵蓋了多個方面,這些應用不僅提高了軍事管理的效率和水平,也極大地提升了軍隊的作戰能力和情報獲取能力。以下是大數據在軍事方面的主要應用: 智慧華盛恒輝戰爭決策輔助
    的頭像 發表于 06-23 10:34 ?1166次閱讀

    大數據在部隊管理中的運用有哪些

    智慧華盛恒輝大數據在部隊管理中的運用主要體現在以下幾個方面: 決策支持: 智慧華盛恒輝部隊管理可以利用大數據技術,對海量的數據進行分析,為決策提供有力的數據支撐。這有助于實現用
    的頭像 發表于 06-23 09:53 ?1254次閱讀

    CYBT-343026傳輸大數據時會丟數據的原因?

    我正在使用 CYBT-343026 (CYW-20706 Silicon) 模塊。 我根據 SPP 樣本制作了一個操作 SPP 的應用程序。 但是,傳輸大數據時有時會丟失數據。 它從
    發表于 03-01 15:04

    通過CY7C68013A想實現一個generic HID設備,如何修改描述符及端點最大數據包的大小?

    通過CY7C68013A想實現一個generic HID設備,使用一個中斷型輸入端點和一個中斷型輸出端點,最大數據包長度均為1024(或512?)字節,請問基于CY3684開發套件提供的固件模板,該如何修改描述符及端點最大數據包的大小? 謝謝!
    發表于 02-28 06:37

    大數據技術是干嘛的 大數據核心技術有哪些

    大數據技術是指用來處理和存儲海量、多類型、高速的數據的一系列技術和工具。現如今,大數據已經滲透到各個行業和領域,對企業決策和業務發展起到了重要作用。本文將詳細介紹大數據技術的概念、發展
    的頭像 發表于 01-31 11:07 ?3793次閱讀
    主站蜘蛛池模板: 欧美精品一级 | 日本黄在线 | 人人乳乳香蕉大免费 | 午夜高清在线观看免费6 | 亚洲欧美日韩国产一区二区三区精品 | 久久精品免看国产 | 美女扒开尿口给男人看的让 | 四月婷婷七月婷婷综合 | 亚洲一区二区三区免费在线观看 | 欧美成人一区二区三区在线视频 | 久久精品99| 国产18到20岁美女毛片 | 国产最好的精华液网站 | 亚洲一级特黄 | 国产永久免费爽视频在线 | 乱妇伦小说 | 国产精品一区在线观看你懂的 | 80s国产成年女人毛片 | 我爱操| 久久精品国产99国产精品澳门 | 丰满寡妇一级毛片 | 国产成人啪精品午夜在线播放 | 噜噜色综合 | 午夜精品久久久久久久 | 亚洲产国偷v产偷v自拍色戒 | 男女一进一出无遮挡黄 | 欧美三级在线观看黄 | 日本一区二区在线免费观看 | 成人黄色免费看 | 亚洲天天看 | 久久久免费的精品 | 午夜精品久久久久久毛片 | 亚洲黄色网址在线观看 | 边做饭边被躁欧美三级小说 | 中国成熟xxx视频 | 亚洲一区小说区中文字幕 | 日本黄色免费电影 | 四虎在线免费播放 | 视频在线色| 特黄级| 亚洲swag精品自拍一区 |