在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

找方案 | 基于Mediatek AIoT Genio1200 的即時影像物件識別方案

大大通 ? 2022-11-21 16:12 ? 次閱讀

在MediaTek AIoT Genio1200平臺上,MediaTek 提供許多不同的軟件解決方案,伙伴們可通過CPU、GPU和APU來提供 AI 計算能力。在開發和部署廣泛的機器學習時,決大部分會為了推演自行開發出的模型,來提供硬件加速功能,伙伴們也可通過圖形處理器來啟用 TensorFlot Lite模型的硬件加速。

MediaTek AIoT Genio1200 board:

Genio1200 demo board

879bb780-6866-11ed-b116-dac502259ad0.jpg

以MTK AIoT Yocto而言,目前已知下列三種方式(CPU、GPU和APU)

第一種是 ARM NN,是一組開源軟件,可在 ARM 的硬件設備上實現機器學習工作,它在目前常見的神經網路框架 Cortex-A CPU、ARM Mali GPU 之間橋接,透過 CPU 來運算和推演模型。

第二種是GPU Neural Network Acceleration,它使用的是設備上的 OpenGL ES(OpenGL for Embedded Systems)計算著色器來推演模型。

第三種是 APU Neural Network Acceleration (MediaTek Deep Learning Accelerator and Vision Processing Unit)。

讓小弟來為各位伙伴們介紹 MediaTek 專有的深度學習加速器,它是一款功能強大且高效的卷積神經網路(Convolutional Neural Network)加速器,MDLA能夠以高乘法累加(Multiply-Accumulate utilization, MAC)利用率實現高 AI 基準測試結果,此設計將 MAC單元與存用功能模塊集成在一起。

在開始演練之前,各位伙伴們是否還記得什么是 MediaTek NeuroPilot 呢?忘記的伙伴們,可以回過頭去了解 淺談MediaTek NeuroPilot

NeuroPilot是聯發科AI 生態系統的核心。伙伴們可介由NeuroPilot在邊緣設備上,以極高的效率開發和部署 AI 應用程序。這使得各種各樣的人工智能應用程序運行得更快?;锇閭內蘸罂梢栽?NeuroPilot SDK內,使用 Neuron編譯器( ncc-tflite),用于將 TFLite 模型轉換為MediaTek 專有的二進制文件 (DLA, 深度學習存檔),以便在 Genio1200 平臺上部署。生成的模型非常高效,延遲減少,內存占用更少。Neuron SDK 還提供了 Neuron Run-time API,它提供了一組 API,可以讓伙伴們從 C/C++ 程序中調用這些 API,以創建運行時的環境,解析編譯的模型文件,并執行設備上的神經網路推理。

87e65cd6-6866-11ed-b116-dac502259ad0.png

由圖示可以知道,DLA檔是 MediaTek專有模型,它是 MDLA(MediaTek Deep Learning Accelerator) 和 VPU(Vision processing unit )計算設備的 low-level binary 檔案。使用 ncc-tflite 將 TensorFlow lite 模型轉換成可在 APU 上推演的 DLA文件,再供給圖像/物件識別的應用程序使用。

使用預先寫好的腳本來將 TensorFlow Lite模型轉換成 DLA 文檔,信息如下:

root@i1200-demo:~# ls

convert_tensorflowLite_to_DLA.sh demos test.tflite

root@i1200-demo:~# ./convert_tensorflowLite_to_DLA.sh

[apusys][info]apusysSession: Seesion(0xaaaae26f9910): thd(ncc-tflite) version(2) log(0)

root@i1200-demo:~# ls

convert_tensorflowLite_to_DLA.sh demos test.dla test.tflite

root@i1200-demo:~#

88019654-6866-11ed-b116-dac502259ad0.jpg

如圖所示,GstInference 是個開源項目,它提供了一個將深度學習推理整合到 GStreamer 中的框架??捎糜诒姸嗟纳疃葘W習架構進行推理,也可搭配實用的程序來支持自定義的架構。此框架使用 R2Inference,這是 C/C++ 中的一個抽象層,用于各種機器學習框架。單一個 C/C++ 應用程序就可以借助 R2Inference來使用不同框架上的模型。這對于利用不同的硬件執行推理時非常有用 (CPU、GPU、APU的加速器)。本次的演練是基于圖中的框架來實現即時影像識別的應用,將剛才轉換好的 DLA文檔來執行于圖像識別的推演。

接下來執行預先配置好的腳位來實現圖像和物件識別的演練。

root@i1200-demo:~# ls

convert_tensorflowLite_to_DLA.sh labels_objectD.txt test2.dla

demos objectD.dla test2.tflite

image_classification.sh object_detection.sh

labels.txt test.tflite

root@i1200-demo:~# ./image_classification.sh

執行結果將會顯示于 HDMI 屏上,可以看到所推演出的物件為 ballpoint pen

881f1e40-6866-11ed-b116-dac502259ad0.jpg

繼續執行物件識別的演示。

root@i1200-demo:~# ls

convert_tensorflowLite_to_DLA.sh labels_objectD.txt test2.dla

demos objectD.dla test2.tflite

image_classification.sh object_detection.sh

labels.txt test.tflite

root@i1200-demo:~# ./object_detection.sh

推演的結果,可以看到識別為 bottle

883fe378-6866-11ed-b116-dac502259ad0.jpg

推演的結果可以看到識別為 monitor

88607890-6866-11ed-b116-dac502259ad0.jpg

推演的結果可以,可以看到識別為 chair

887e78b8-6866-11ed-b116-dac502259ad0.jpg

本次的演示就到此,有興趣的伙伴們可以一起來討論和研究,謝謝大家!

?場景應用圖

889070ea-6866-11ed-b116-dac502259ad0.jpg

?展示板照片

88a95cc2-6866-11ed-b116-dac502259ad0.jpg

?方案方塊圖

89a14b94-6866-11ed-b116-dac502259ad0.png

?核心技術優勢

雙核AI處理器單元(APU) 可處理基于 AI 的任務,支持深度學習(Deep Learning)、神經網絡(Neural Network)加速和計算機視覺(computer vision)應用。

?方案規格

CPU:

Arm Cortex-A78 x4

Arm Cortex-A55 x4

GPU:

Arm Mali-G57 MP5

APU:

MediaTek AI Processor (dual core)

Video processing:

Video encoding 4K60fps HEVC/H.264

Video decoding 4K90fps AV1/VP9/HEVC/H.264

Software:

Android/Yocto Linux/Ubuntu/NeuroPilot SDK

Interface:

HDMI 2.0 receiver (HDMI RX)

PCIE3.0

USB3.1

GbE MAC

ISP, 48MP@30fps/16MP+16MP@30fps

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 機器學習
    +關注

    關注

    66

    文章

    8428

    瀏覽量

    132837
收藏 人收藏

    評論

    相關推薦

    MediaTek與意騰科技CES 2025共展多元AI語音方案

    MediaTek與意騰科技近日宣布,將在2025年國際消費電子展(CES 2025)上攜手展出創新的AI語音解決方案。此次合作旨在針對車用、智慧家庭以及智慧零售市場,為全球用戶帶來更加智能、安全且
    的頭像 發表于 01-10 14:10 ?115次閱讀

    如何實惠UPS電源解決方案

    防止數據丟失。此外,它還可以保護設備免受突然停機造成的損壞。此外,它還允許在必要時啟動正常關機程序。如何實惠UPS電源解決方案在尋求經濟實惠的UPS解決方案時,需
    的頭像 發表于 01-03 09:22 ?99次閱讀
    如何<b class='flag-5'>找</b>實惠UPS電源解決<b class='flag-5'>方案</b>

    鴻蒙案例技術分享 | 基于AIoT-3568X的鴻蒙通行一體機方案項目

    案例展示視美泰鴻蒙通行一體機方案以鴻蒙版AIoT-3568X人工智能主板為核心平臺,搭載OpenHarmony操作系統,使用自研算法和國產芯片,可管可控,并提供身份識別以及其他外設配件生態鏈支持
    的頭像 發表于 12-13 16:25 ?383次閱讀
    鴻蒙案例技術分享 | 基于<b class='flag-5'>AIoT</b>-3568X的鴻蒙通行一體機<b class='flag-5'>方案</b>項目

    大聯大推出基于MediaTek Genio 130與ChatGPT的AI語音助理方案

    大聯大控股,作為亞太地區市場領先的半導體元器件分銷商,近日宣布了一項重要創新。其旗下子公司品佳,成功推出了基于聯發科技(MediaTek)Genio 130芯片與ChatGPT功能的AI語音助理方案
    的頭像 發表于 12-11 11:07 ?443次閱讀

    NRK3502系列芯片 | 制氧機離線語音識別方案

    NRK3502芯片制氧機離線語音識別方案制氧機離線語音識別方案是基于NRK3502藍牙雙模智能語音IoT芯片,依托于九芯電子在語音識別技術上
    的頭像 發表于 12-04 01:02 ?175次閱讀
    NRK3502系列芯片 | 制氧機離線語音<b class='flag-5'>識別</b><b class='flag-5'>方案</b>

    即時通話軟件音頻傳輸質量測試方案

    一、方案概述 度緯科技本套測試方案的核心目的是通過POLQA(Perceptual Objective Listening Quality Assessment)主觀音質評價測試來反映即時通話軟件在
    的頭像 發表于 12-03 14:34 ?196次閱讀
    <b class='flag-5'>即時</b>通話軟件音頻傳輸質量測試<b class='flag-5'>方案</b>

    東軟發布新一代醫學影像解決方案

    近日,東軟全新發布新一代醫學影像解決方案,以智能化為核心,以數據引擎為驅動,面向未來醫學影像行業的發展需求,全新定義醫學影像的產品價值,推動醫學影像
    的頭像 發表于 11-25 09:32 ?206次閱讀

    基于分布式存儲系統醫療影像數據存儲解決方案

    基于分布式存儲系統醫療影像數據存儲解決方案
    的頭像 發表于 09-14 09:53 ?347次閱讀
    基于分布式存儲系統醫療<b class='flag-5'>影像</b>數據存儲解決<b class='flag-5'>方案</b>

    醫療PACS影像數據的極速分布式塊存儲解決方案

    醫療PACS影像數據的極速分布式塊存儲解決方案
    的頭像 發表于 08-23 10:13 ?372次閱讀
    醫療PACS<b class='flag-5'>影像</b>數據的極速分布式塊存儲解決<b class='flag-5'>方案</b>

    杭州國芯微AIoT產品系列及方案列表

    和Flash。芯片支持高性能的語音喚醒,和自定義的離線語音指令識別。具有識別率高、使用方便等特點,可廣泛應用于大小家電和各種智能消費電子產品。方案列表GX8003主要應用領域:語音聲控家電,離線語音
    發表于 08-16 21:14

    MediaTek與美團攜手合作打造新一代餐飲系統硬件S4 Pro系列收銀機

    MediaTek 與美團攜手合作,打造新一代餐飲系統硬件 S4 Pro 系列收銀機。該系列收銀機采用 MediaTek 新一代高階物聯網芯片 Genio 510,對比上一代收銀產品性能大幅提升,為餐飲商戶帶來流暢使用體驗!
    的頭像 發表于 05-17 10:09 ?577次閱讀

    瑞莎科技發布NIO 12L開發板,搭載聯發科Genio 1200處理器

    作為聯發科目前最先進的AIoT平臺,Genio 1200采用6納米工藝制造,包括4顆主頻高達2.2GHz的Arm Cortex-A78內核以及4顆主頻2.0GHz的A55內核,GPU部分為880MHz的Mali-G57 MC5,
    的頭像 發表于 04-12 15:48 ?611次閱讀

    MediaTek商用顯示解決方案亮相UDE 2024

    在UDE 2024第五屆國際半導體顯示博覽會上,MediaTek再次展現了其在科技領域的卓越實力,特別是其商用顯示解決方案,為參觀者帶來了前所未有的沉浸式視覺享受。
    的頭像 發表于 02-29 10:27 ?611次閱讀

    廣和通發布基于MediaTek T300平臺的RedCap模組FM330系列及解決方案

    世界移動通信大會MWC 2024期間,廣和通發布基于MediaTek T300平臺的RedCap模組FM330系列,加速5G-A繁榮發展。FM330系列及其解決方案采用全球先進RedCap方案,滿足移動寬帶和工業互聯對高能效的需
    的頭像 發表于 02-27 18:20 ?1127次閱讀
    廣和通發布基于<b class='flag-5'>MediaTek</b> T300平臺的RedCap模組FM330系列及解決<b class='flag-5'>方案</b>

    廣和通發布基于MediaTek T300平臺的RedCap模組FM330系列及解決方案

    世界移動通信大會MWC 2024期間,廣和通發布基于MediaTek T300平臺的RedCap模組FM330系列,加速5G-A繁榮發展。FM330系列及其解決方案采用全球先進RedCap方案,滿足移動寬帶和工業互聯對高能效的需
    的頭像 發表于 02-27 18:20 ?399次閱讀
    廣和通發布基于<b class='flag-5'>MediaTek</b> T300平臺的RedCap模組FM330系列及解決<b class='flag-5'>方案</b>
    主站蜘蛛池模板: 久久riav二区三区| 国产午夜精品久久久久免费视小说 | 日韩电影中文字幕| 日本一区三区二区三区四区| 欧美色图综合| 天天干天天爽| 天天天天添天天拍天天谢| 台湾久久| 91精品福利久久久| 综合亚洲一区二区三区| 久久精品人人爽人人爽快| 一级欧美日韩| 色午夜影院| 狼狼色丁香久久女婷婷综合| 天天操丝袜| 色婷五月| 黄a网站| 亚洲一级影院| 九九热免费观看| 黄色网络在线观看| 99热官网| 日韩毛片免费视频| 国产女人18毛片水真多18精品| 午夜国产精品福利在线观看| 国产美女一级高清免费观看| 中文字幕一区二区三区在线观看| 中文字幕欧美日韩| 日本免费看黄| 18视频免费网址在线观看| 久操青青| 日韩精品卡4卡5卡6卡7卡| 性欧美高清强烈性视频| 免费日本黄色| 亚洲 欧美 自拍 另类 欧美| 91精品啪国产在线观看免费牛牛| 国产区亚洲区| 欧美三级大片在线观看| 91噜噜噜| 色成人免费网站| 亚洲成人99| 国产真实乱偷人视频|