電子發(fā)燒友網(wǎng)>電子資料下載>電子資料>如何使用生產(chǎn)就緒平臺(tái)為邊緣快速構(gòu)建和部署自適應(yīng)視覺應(yīng)用程序

如何使用生產(chǎn)就緒平臺(tái)為邊緣快速構(gòu)建和部署自適應(yīng)視覺應(yīng)用程序

2075465 2022-11-24 | pdf | 283.96KB | 次下載 | 免費(fèi)

資料介紹

人工智能 (AI) 在基于邊緣的智能相機(jī)上的應(yīng)用已迅速在越來越多的嵌入式視覺應(yīng)用程序中得到認(rèn)可，例如機(jī)器視覺、安全、零售和機(jī)器人技術(shù)。盡管可訪問的機(jī)器學(xué)習(xí) (ML) 算法的迅速出現(xiàn)引發(fā)了人們對 AI 的興趣，但開發(fā)人員仍在努力滿足緊張的項(xiàng)目進(jìn)度，同時(shí)以低功耗為基于邊緣的應(yīng)用程序提供高性能。人工智能 (AI) 在基于邊緣的智能相機(jī)上的應(yīng)用已迅速在越來越多的嵌入式視覺應(yīng)用程序中得到認(rèn)可，例如機(jī)器視覺、安全、零售和機(jī)器人技術(shù)。盡管可訪問的機(jī)器學(xué)習(xí) (ML) 算法的迅速出現(xiàn)引發(fā)了人們對 AI 的興趣，但開發(fā)人員仍在努力滿足緊張的項(xiàng)目進(jìn)度，同時(shí)以低功耗為基于邊緣的應(yīng)用程序提供高性能。更復(fù)雜的是，由于應(yīng)用程序需求的快速變化和不斷改進(jìn)的算法不斷改進(jìn)，即使是新部署的解決方案也可能迅速變得次優(yōu)。開發(fā)人員努力使用在這個(gè)快速發(fā)展的環(huán)境中無法擴(kuò)展的技術(shù)來保證他們的應(yīng)用程序不會(huì)過時(shí)。更復(fù)雜的是，由于應(yīng)用程序需求的快速變化和不斷改進(jìn)的算法不斷改進(jìn)，即使是新部署的解決方案也可能迅速變得次優(yōu)。開發(fā)人員努力使用在這個(gè)快速發(fā)展的環(huán)境中無法擴(kuò)展的技術(shù)來保證他們的應(yīng)用程序不會(huì)過時(shí)。本文介紹了本文介紹了XilinxXilinx靈活的系統(tǒng)級模塊 (SOM) 解決方案，開發(fā)人員可以使用該解決方案快速實(shí)現(xiàn)用于邊緣部署的智能相機(jī)解決方案。它展示了他們?nèi)绾胃p松地調(diào)整這些解決方案以響應(yīng)不斷變化的需求，而不會(huì)影響延遲和功率的關(guān)鍵要求。靈活的系統(tǒng)級模塊 (SOM) 解決方案，開發(fā)人員可以使用該解決方案快速實(shí)現(xiàn)用于邊緣部署的智能相機(jī)解決方案。它展示了他們?nèi)绾胃p松地調(diào)整這些解決方案以響應(yīng)不斷變化的需求，而不會(huì)影響延遲和功率的關(guān)鍵要求。加速視覺應(yīng)用執(zhí)行加速視覺應(yīng)用執(zhí)行基于定制的 Zynq UltraScale+ 多處理器片上系統(tǒng) (MPSoC)，Xilinx 的基于定制的 Zynq UltraScale+ 多處理器片上系統(tǒng) (MPSoC)，Xilinx 的Kria K26Kria K26 SOM 提供了一個(gè)強(qiáng)大的嵌入式處理系統(tǒng)，包括一個(gè) 64 位四核 SOM 提供了一個(gè)強(qiáng)大的嵌入式處理系統(tǒng)，包括一個(gè) 64 位四核ArmArm Cortex-A53 應(yīng)用處理單元 (APU)、一個(gè) 32-位雙核 Arm? Cortex?-R5F 實(shí)時(shí)處理單元 (RPU) 和一個(gè) Arm Mali-400MP2 3D 圖形處理單元 (GPU)。SOM 將 MPSoC 與 4 GB 64 位寬雙倍數(shù)據(jù)速率 4 (DDR4) 內(nèi)存和相關(guān)內(nèi)存控制器以及多個(gè)非易失性內(nèi)存 (NVM) 設(shè)備結(jié)合在一起，包括 512 兆位 (Mbits) 四串行外設(shè)接口 ( QSPI) 存儲(chǔ)器、16 吉字節(jié) (Gbytes) 嵌入式多媒體卡 (eMMC) 存儲(chǔ)器和 64 千比特 (Kbits) 電可擦可編程只讀存儲(chǔ)器 (EEPROM)（圖 1）。 Cortex-A53 應(yīng)用處理單元 (APU)、一個(gè) 32-位雙核 Arm? Cortex?-R5F 實(shí)時(shí)處理單元 (RPU) 和一個(gè) Arm Mali-400MP2 3D 圖形處理單元 (GPU)。SOM 將 MPSoC 與 4 GB 64 位寬雙倍數(shù)據(jù)速率 4 (DDR4) 內(nèi)存和相關(guān)內(nèi)存控制器以及多個(gè)非易失性內(nèi)存 (NVM) 設(shè)備結(jié)合在一起，包括 512 兆位 (Mbits) 四串行外設(shè)接口 ( QSPI) 存儲(chǔ)器、16 吉字節(jié) (Gbytes) 嵌入式多媒體卡 (eMMC) 存儲(chǔ)器和 64 千比特 (Kbits) 電可擦可編程只讀存儲(chǔ)器 (EEPROM)（圖 1）。圖 1：Xilinx Kria K26 SOM 將定制 Zynq UltraScale+ MPSoC 的廣泛處理能力與可信平臺(tái)模塊 2.0 (TPM2) 以及動(dòng)態(tài)和非易失性存儲(chǔ)器相結(jié)合。（圖片來源：賽靈思）圖 1：Xilinx Kria K26 SOM 將定制 Zynq UltraScale+ MPSoC 的廣泛處理能力與可信平臺(tái)模塊 2.0 (TPM2) 以及動(dòng)態(tài)和非易失性存儲(chǔ)器相結(jié)合。（圖片來源：賽靈思）Xilinx 通過廣泛的可編程邏輯系統(tǒng)補(bǔ)充其處理和存儲(chǔ)器資產(chǎn)，該系統(tǒng)包括 256K 系統(tǒng)邏輯單元、234K 可配置邏輯塊 (CLB) 觸發(fā)器、117K CLB 查找表 (LUT) 以及總共 26.6 兆位 (Mbits) 的分布式隨機(jī)存取存儲(chǔ)器 (RAM)、塊 RAM 和 ultraRAM 塊的各種配置中的存儲(chǔ)器。此外，可編程邏輯系統(tǒng)包括 1,248 個(gè)數(shù)字信號處理 (DSP) 切片、四個(gè)收發(fā)器和一個(gè) H.264 和 H.265 視頻編解碼器，能夠支持多達(dá) 32 個(gè)同步編碼/解碼流，總共可達(dá)每秒 60 幀 (fps) 時(shí)的 3840 x 2160 像素。SOM 的兩個(gè) 240 針連接器通過用戶可配置的輸入/輸出 (I/O) 提供對功能塊和外圍設(shè)備的隨時(shí)訪問。