AI已經(jīng)存在了一段時間,其影響也相當(dāng)巨大。生成式AI剛開始嶄露頭角,對于其如何顛覆世界的種種預(yù)言已經(jīng)迅速成為熱門話題,影響之深廣,令人深思。
這項技術(shù)已經(jīng)對數(shù)據(jù)中心產(chǎn)生了重大影響?;诒仨氃谠贫擞?xùn)練和運行的模型的大小,生成式AI的基礎(chǔ)設(shè)施需求預(yù)計將比早期AI模型高出10到100倍。事實上,所有數(shù)據(jù)中心基礎(chǔ)設(shè)施都受到這一趨勢的影響,包括電力、HVAC、網(wǎng)絡(luò)和物理布局。數(shù)據(jù)中心將如何擴(kuò)展規(guī)模以適應(yīng)呈指數(shù)級增長的生成式AI大型語言模型?
生成式AI的成功可能取決于半導(dǎo)體行業(yè)對以下幾個方面的關(guān)注,一是先進(jìn)的AI處理器,二是如何存儲和處理所有這些數(shù)據(jù),最后是確保數(shù)據(jù)中心散熱更佳、更高效且更安全。
我們已經(jīng)解決了這類問題,以便數(shù)據(jù)中心運營商能夠為5G、云服務(wù)和新一代的AI/ML應(yīng)用提供支持。我們的單片機(jī)、存儲器、PCIe開關(guān)、安全解決方案和其他產(chǎn)品提供了各種解決方案,以應(yīng)對從連接AI處理卡到優(yōu)化數(shù)據(jù)訪問、存儲、安全和保護(hù)等一系列AI挑戰(zhàn),同時提供必要的帶寬、端口密度和連接能力,從而處理不斷增加的流量。
類似的挑戰(zhàn)也適用于數(shù)據(jù)中心和本地服務(wù)器中的生成式AI,其應(yīng)對難度也進(jìn)一步放大。生成式AI似乎也存在一種途徑,能夠擴(kuò)展到物聯(lián)網(wǎng)應(yīng)用中的網(wǎng)絡(luò)邊緣,如患者監(jiān)測和汽車交通違規(guī)檢測。有些人認(rèn)為,如果生成式AI產(chǎn)生的海量數(shù)據(jù)必須在云端而不是在邊緣處理,那么這些應(yīng)用便無法取得成功。
如今的邊緣AI解決方案可能為生成式AI提供了一種路線圖。語音識別系統(tǒng)和AI攝像頭等計算機(jī)視覺產(chǎn)品可在邊緣提供許多優(yōu)勢,包括消除網(wǎng)絡(luò)延遲和將隱私控制權(quán)交還給用戶。它們有助于降低功耗,因為只有在檢測到不規(guī)則的變化后才會將視頻流傳輸?shù)皆贫?,而不是像“傻瓜”攝像頭那樣連續(xù)不斷地傳輸。可以預(yù)計,未來的邊緣設(shè)備也會采用這種方案。
但是,將生成式AI引入到邊緣將比引入傳統(tǒng)AI更加困難。由于數(shù)據(jù)量更大,電力問題將變得更具挑戰(zhàn)性。硬件需求將遠(yuǎn)遠(yuǎn)超過傳統(tǒng)AI所需,并且解決方案還需要為智能邊緣的電池供電、深度嵌入式設(shè)備提供必要的安全性和其他獨特功能。
我們已經(jīng)關(guān)注到這些挑戰(zhàn)。例如,我們正在探索如何利用當(dāng)前的Wi-Fi設(shè)備實現(xiàn)串行端口到生成式AI的橋接。在這種情況下,生成式AI并非在邊緣實現(xiàn),而是通過8位單片機(jī)的UART訪問。單片機(jī)會產(chǎn)生一個實時傳感器數(shù)據(jù)穿插其中的預(yù)定義提示語,將其發(fā)送到生成式AI解決方案,然后根據(jù)回答采取行動。目前,尚不明確端點能否在邊緣獨立運行生成式AI而不回調(diào)至數(shù)據(jù)中心,但我們正處于創(chuàng)新的早期階段。
與我們服務(wù)的任何市場一樣,Microchip的目標(biāo)是盡可能簡化解決行業(yè)中一些最基本的系統(tǒng)設(shè)計挑戰(zhàn)。這包括提供豐富的產(chǎn)品組合,以便客戶能夠采用全面系統(tǒng)解決方案的方法實現(xiàn)創(chuàng)新。我們會幫助解決在需要新功能的成熟應(yīng)用中遇到的挑戰(zhàn),同時也為長期的安全性、保護(hù)性和可靠性要求提供支持。針對生成式AI等最新的新興技術(shù),我們也會采取同樣的做法,這些技術(shù)描繪了令人期待的未來,但在兌現(xiàn)承諾之前,這些技術(shù)仍然面臨著相同的基本系統(tǒng)設(shè)計挑戰(zhàn)。
-
microchip
+關(guān)注
關(guān)注
52文章
1506瀏覽量
117575 -
數(shù)據(jù)中心
+關(guān)注
關(guān)注
16文章
4778瀏覽量
72123 -
AI
+關(guān)注
關(guān)注
87文章
30887瀏覽量
269065 -
生成式AI
+關(guān)注
關(guān)注
0文章
504瀏覽量
474
原文標(biāo)題:CEO博文《AI將如何重新定義數(shù)據(jù)中心?》
文章出處:【微信號:MicrochipTechnology,微信公眾號:Microchip微芯】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
發(fā)布評論請先 登錄
相關(guān)推薦
評論