在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

有效解決內存墻問題 存算一體正處在快速發展階段

Carol Li ? 來源:電子發燒友網 ? 作者:李彎彎 ? 2021-10-26 07:45 ? 次閱讀

電子發燒友網報道(文/李彎彎)隨著技術的發展,現在計算的任務越來越復雜,需要的數據也越來越多,而在馮諾依曼架構中,數據需要在存儲、內存、緩存、計算單元中不斷搬運,造成大部分時間、帶寬、緩存、功耗都消耗在數據搬運上,而不是計算上,因此內存墻都成了一個越來越嚴重的問題。

這種問題在人工智能計算中尤為明顯,知存科技創始人兼CEO王紹迪近日在某論壇分享到:“這種數據搬運消耗的功耗超過95%以上,帶寬也會達到80%以上,比如片上緩存,1MB的SRAM和8KB的SRAM在數據搬運上消耗的功耗相差10倍。”因此業界都在思考減少內存墻問題。

存算一體有效解決內存墻問題

存算一體主要有近存計算和存內計算。近存計算可以理解為通過先進封裝拉近存儲、內存和計算單元的距離,比如SRAM,在馮諾依曼架構中,很多時候SRAM用作緩存,多核共同使用,這樣緩存到每個核都有一定距離,數據搬運、訪問時間、功耗都會增加,王紹迪介紹:“近緩存計算把SRAM與計算單元合在一起,這個SRAM只供本地計算單元使用,數據訪問時間和帶寬都有很大提升。”

存內計算比近存計算更高效,同時也更難以實現,存內計算一般是使用存儲的參數去完成計算,比如SRAM存內計算,Flash存內計算、以及RRAM存內計算。存內計算實際上是一個計算的模塊,而不再是存儲的模塊,實踐的方式是用存儲的參數去完成運算,從存儲器中讀出的數據是運算的結果,而不是存儲的數據。

在馮諾依曼架構中,不管是做加法運算還是乘法運算,都需要把數據從存儲架構中讀出來,包括緩存、內存、以及片外的存儲,最終將數據讀到計算單元中完成運算。從緩存中讀取數據,要消耗運算幾倍、幾十倍、甚至幾百倍的功耗,從內存讀取數據,搬運功耗是運算的近千倍,從外部的存儲讀取,達到上萬倍。

因此在數據量很大的計算中,馮諾依曼架構的效率就會非常低,而存內計算,存儲器中存儲了參數,被處理的數據作為輸入信號,被處理的信號流過存儲器中所有的參數,從存儲器中輸出的數據就是運算的結果。王紹迪表示,“存內計算的優勢在于,能夠將存儲器中眾多的存儲單元轉化為運算單元,這樣能計算的并行度就會大幅提高,從原來幾十、幾百個并行,到存內計算幾百萬、幾千萬、甚至幾億個乘加法的并行度,運算效率很高。”

除了可以大規模并行運算,還可以很大程度節省數據帶寬。簡單來說,一個傳統的存儲器,多行多列,一次至多激活一行,讀取出一行的數據,而要把多行數據讀取出來,需要進行多個存儲器周期,分別激活每一行,讀出每一行的數據。而存內計算可以同時把輸入數據給多行,同時多行的輸入數據與每一行的參數做乘法運算,在列的方向直接把運算的結果讀取出來,它是同時多行多列并行激活的方法。


現在的存內計算可以做到千行千列同時開啟,使用效率比傳統存儲器提高近千倍,王紹迪談到:“整體來看,包括輸入輸出,存內計算運算效率一般會有幾十倍的提升,而且提升倍數還一直在增加,存內計算的發展速度很快,最近處于早期的快速發展階段,每年都有數倍性能的提升。”

知存科技WTM2101智能解決方案

知存科技目前在存內計算領域較為領先,公司成立于2017年底,目前已經推出兩款存算一體芯片,其中WTM1001已經批量量產,WTM2101處于小批量階段,知存科技目前已經完成五輪融資。


WTM2101是一款尺寸很小的SOC芯片,包括一個1.8MB存內計算的Flash,該存儲模塊除了用于存內計算,也可以用于普通的存儲。王紹迪介紹:“這款芯片的封裝很小,可以用在可穿戴設備中,目前計算的功耗非常低,比如如果做連續100個詞到300個詞的識別,功耗可以控制在1mA以內,其中100個詞可以功耗可以到60微安。該芯片在運行語音識別、語音增強、物體識別、智能健康,以及其他的一些AI算法上,可以把算力和效率提升20倍到50倍。”

另外WTM2101首次用了獨有的專利HPU,它是一個混合計算單元,實際上是把數字計算和模擬計算結合在一起,因為模擬計算有精度上限,為了提高精度,加了一個稀疏的計算單元,可以把存內計算的精度進一步提高,最高提高4比特。


存內計算未來的發展趨勢

隨著存內計算的發展,未來的應用場景也會越來越廣,當前存內計算主要應用在端側,一是受精度的限制,8比特,二是受容量,在幾兆的級別,三是算力,基本在0.1T到1T的范圍。

不過未來一兩年將會發展到邊側,精度會提高到12比特,容量會達到16兆到64兆,算力也可以提升到最大32T,這樣可以覆蓋很多邊緣側的應用需求。未來還會向云端發展,存內計算精度會達到到16比特,容量會超過1000M,算力會達到256T到1024T。

存內計算在云側、邊側、端側,存內計算的優勢各不相同,在端側,存內計算在功耗的限制下可以提供大的算力,在邊緣側,在功耗、體積限制下也有很強的算力,在云端,可以提供更低成本的解決方案。

存內計算現在處于一個很快的發展階段,未來幾年,每年都會有很快的迭代速度。早期,產業界對存內計算的關注不多,投入也很少,最近存內計算逐漸得到越來越多的關注,王紹迪認為,未來五年存內計算都會在處在非常快速的發展階段,在各種各樣的場景中,進行規模化的落地應用。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 存儲
    +關注

    關注

    13

    文章

    4337

    瀏覽量

    85992
  • 內存
    +關注

    關注

    8

    文章

    3040

    瀏覽量

    74171
  • AI
    AI
    +關注

    關注

    87

    文章

    31262

    瀏覽量

    269619
  • 人工智能
    +關注

    關注

    1792

    文章

    47497

    瀏覽量

    239194
  • 知存科技
    +關注

    關注

    0

    文章

    59

    瀏覽量

    4062
  • 存算一體
    +關注

    關注

    0

    文章

    102

    瀏覽量

    4312
收藏 人收藏

    評論

    相關推薦

    開源芯片系列講座第24期:基于SRAM的高效計算架構

    種先進的計算架構技術,以克服傳統馮諾依曼架構中計算單元與存儲單元分離導致的“內存”問題。基于SRAM的一體技術在智能計算中具有高能效、
    的頭像 發表于 11-27 01:05 ?278次閱讀
    開源芯片系列講座第24期:基于SRAM<b class='flag-5'>存</b><b class='flag-5'>算</b>的高效計算架構

    科技啟動首屆內計算創新大賽

    內計算作為項打破“內存”“功耗”的顛覆性技術,消除了
    的頭像 發表于 11-21 10:44 ?271次閱讀

    直播預約 |開源芯片系列講座第24期:SRAM一體:賦能高能效RISC-V計算

    RISC-V計算報告簡介一體種先進的計算架構技術,以克服傳統馮諾依曼架構中計算單元與存儲單元分離導致的“內存
    的頭像 發表于 11-16 01:10 ?240次閱讀
    直播預約 |開源芯片系列講座第24期:SRAM<b class='flag-5'>存</b><b class='flag-5'>算</b><b class='flag-5'>一體</b>:賦能高能效RISC-V計算

    一體化與邊緣計算:重新定義智能計算的未來

    隨著數據量爆炸式增長和智能化應用的普及,計算與存儲的高效整合逐漸成為科技行業關注的重點。數據存儲和處理需求的快速增長推動了對計算架構的重新設計,“一體化”技術應運而生。同時,隨著物
    的頭像 發表于 11-12 01:05 ?284次閱讀
    <b class='flag-5'>存</b><b class='flag-5'>算</b><b class='flag-5'>一體</b>化與邊緣計算:重新定義智能計算的未來

    一體架構創新助力國產大力AI芯片騰飛

    在灣芯展SEMiBAY2024《AI芯片與高性能計算(HPC)應用論壇》上,億鑄科技高級副總裁徐芳發表了題為《一體架構創新助力國產大力AI芯片騰飛》的演講。
    的頭像 發表于 10-23 14:48 ?365次閱讀

    科技新突破:首款支持多模態一體AI芯片成功問世

    一體介質,通過存儲單元和計算單元的深度融合,采用22nm成熟工藝制程,有效把控制造成本。與傳統架構下的AI芯片相比,該款芯片在力、能效
    發表于 09-26 13:51 ?428次閱讀
    科技新突破:首款支持多模態<b class='flag-5'>存</b><b class='flag-5'>算</b><b class='flag-5'>一體</b>AI芯片成功問世

    后摩智能首款一體智駕芯片獲評突出創新產品獎

    近日,2024年6月29日,由深圳市汽車電子行業協會主辦的「第十三屆國際汽車電子產業峰會暨2023年度汽車電子科學技術獎頒獎典禮」在深圳寶安隆重舉行。后摩智能首款一體智駕芯片——后摩鴻途??H30 獲評「突出創新產品獎」。
    的頭像 發表于 09-24 16:51 ?530次閱讀

    蘋芯科技引領存一體技術革新 PIMCHIP系列芯片重塑AI計算新格局

    智能芯片國產化再傳利好,8月8日,國際領先的一體芯片開拓者——蘋芯科技在北京召開 “于芯 智啟未來——2024 蘋芯科技產品發布會”
    發表于 08-08 17:21 ?271次閱讀
    蘋芯科技引領存<b class='flag-5'>算</b><b class='flag-5'>一體</b>技術革新   PIMCHIP系列芯片重塑AI計算新格局

    后摩智能推出邊端大模型AI芯片M30,展現出一體架構優勢

    電子發燒友網報道(文/李彎彎)近日,后摩智能推出基于一體架構的邊端大模型AI芯片——后摩漫界??M30,最高力100TOPS,典型功耗12W。為了進
    的頭像 發表于 07-03 00:58 ?4282次閱讀

    科技助力AI應用落地:WTMDK2101-ZT1評估板實地評測與性能揭秘

    計算都是一體架構的重要組成部分,目的是在硬件層面上優化數據處理流程,使得計算機系統能夠更快速、更有效地處理大規模數據和計算密集型任務。這
    發表于 05-16 16:38

    探索內計算—基于 SRAM 的內計算與基于 MRAM 的一體的探究

    本文深入探討了基于SRAM和MRAM的一體技術在計算領域的應用和發展。首先,介紹了基于SRAM的內邏輯計算技術,包括其原理、優勢以及在
    的頭像 發表于 05-16 16:10 ?3014次閱讀
    探索<b class='flag-5'>存</b>內計算—基于 SRAM 的<b class='flag-5'>存</b>內計算與基于 MRAM 的<b class='flag-5'>存</b><b class='flag-5'>算</b><b class='flag-5'>一體</b>的探究

    科技攜手北大共建一體化技術實驗室,推動AI創新

    揭牌儀式結束后,王紹迪在北大集成電路學院舉辦的“未名·芯”論壇上做了主題演講,分享了他對于多模態大模型時代內計算發展的見解。他強調了一體
    的頭像 發表于 05-08 17:25 ?1005次閱讀

    北京大學-知科技一體聯合實驗室揭牌,開啟知科技產學研融合戰略新升級

    、知科技首席科學家郭昕婕博士及企業研發相關負責人參加了現場揭牌儀式。面向多模態大模型時代產業發展新需求,雙方將攜手踏上探索一體技術前沿
    的頭像 發表于 05-07 19:31 ?1462次閱讀
    北京大學-知<b class='flag-5'>存</b>科技<b class='flag-5'>存</b><b class='flag-5'>算</b><b class='flag-5'>一體</b>聯合實驗室揭牌,開啟知<b class='flag-5'>存</b>科技產學研融合戰略新升級

    力時代, 如何打破內存

    來源:Ambarella安霸 何小林 近年來,人工智能應用正經歷快速發展與普及,而以ChatGPT等先進的大模型技術在此過程中起到了關鍵作用。這些模型對計算能力的需求不斷攀升,催生了AI芯片
    的頭像 發表于 03-06 19:51 ?338次閱讀
    大<b class='flag-5'>算</b>力時代, 如何打破<b class='flag-5'>內存</b><b class='flag-5'>墻</b>

    什么是通感一體化?通感一體化的應用場景

    通感一體化可廣泛應用于智能家居、智慧城市、智慧交通、醫療健康等方面。文檔君為大家搜集了些典型的應用場景。 智能家居 通感一體化利用基站
    發表于 01-18 16:12 ?1.2w次閱讀
    什么是通感<b class='flag-5'>算</b><b class='flag-5'>一體</b>化?通感<b class='flag-5'>算</b><b class='flag-5'>一體</b>化的應用場景
    主站蜘蛛池模板: 国产亚洲视频在线播放大全| 色视频在线免费看| 国产伦精品一区二区三区免| 成人欧美一区二区三区视频不卡 | 天天综合色天天综合色sb| 激情爱爱的免费视频| 欧美视频精品一区二区三区| 五月情婷婷| 久久久久国产成人精品亚洲午夜| 性欧美丰满xxxx性久久久| 狠狠干夜夜操| 久久免费视频2| 日本天天射| 欧美天天| 九九视频这里只有精品| 免费国产综合视频在线看| 欧美日日日| 69ww免费视频播放器| 午夜看黄网站免费| 亚州一级毛片| 亚洲码在线| 午夜女同影院| 亚洲四虎在线| 五月婷花| 欧美a色爱欧美综合v| 久久艹影院| 国产人成精品香港三级古代| 国产亚洲午夜精品a一区二区| 亚洲精品网站日本xxxxxxx| 夜夜爽天天狠狠九月婷婷| 亚洲午夜久久| 国产伦一区二区三区免费| 亚洲播放| 深爱激情站| 免费在线看a| 久久骚| 国产精品激情综合久久| a免费在线| 手机国产看片| 国产午夜毛片一区二区三区| 在线黄色网|