假期應(yīng)該是放松的時間,有了 NVIDIA Jetson 技術(shù),你就可以做到這一點。本月最新的 Jetson 項目來自一位開發(fā)人員,他利用 DeepStack 、 Home Assistant 和 NVIDIA Jetson 的組合創(chuàng)造了簡化家庭自動化項目的方法。
Robin Cole 是 Vu 衛(wèi)星公司的高級數(shù)據(jù)科學家,具有物理學背景,他開發(fā)了這個項目。他熱衷于使用數(shù)據(jù)和 Python 解決問題。 Cole 在 GitHub 上的主要活動涉及機器學習的實際應(yīng)用。
正如他在他的 GitHub profile 中所指出的:“我有許多個人項目,都是關(guān)于在邊緣設(shè)備上訓練和部署神經(jīng)網(wǎng)絡(luò)的,比如樹莓 Pi 和 Jetson 納米?!?/p>
在業(yè)余時間,他積極參與兩個社區(qū)項目:家庭助理和 DeepStack AI ,并正在探索將這兩種技術(shù)結(jié)合起來的方法。科爾的 Jetson 項目將 DeepStack 對象和人臉檢測與識別服務(wù)集成到流行的家庭自動化平臺 home Assistant 中。
DeepStack 在 Docker 容器中運行,并通過 RESTAPI 公開各種計算機視覺模型。 DeepStack 目標檢測可以識別 80 種不同類型的目標,包括人、車輛和動物。當前列表不包括雪橇或馴鹿,但可以使用自定義對象檢測模型。 DeepStack 可以免費使用,并且完全支持 open source 。您需要一臺具有 8GB RAM 或 NVIDIA Jetson 的機器來運行 DeepStack 。
Home Assistant 是一個開源和可擴展的家庭自動化平臺,可以在本地嵌入式設(shè)備或服務(wù)器上運行,同時維護本地控制和隱私。它可以幫助自動化任務(wù),如家庭能源管理,智能地打開或關(guān)閉燈,或根據(jù)入口是否打開發(fā)出警報。家庭助理可以是 與 1000 多種不同的設(shè)備集成 。
該項目使用 DeepStack REST API 中經(jīng)過訓練的模型向 Home Assistant 發(fā)送響應(yīng), Home Assistant 隨后可以根據(jù)此輸入和其他輸入在家中執(zhí)行任務(wù)。 DeepStack 可以在 Jetson 設(shè)備上運行,并且它在基于 YOLOv5 的訓練模型上實現(xiàn)了良好的推理時間,該模型使用 PyTorch 運行。 DeepStack 和 Home Assistant 通過 Go 服務(wù)器和 Redis 層協(xié)調(diào)通信。
科爾在一份 forum post 中描述自己的工作時寫道:“我希望這個項目能激發(fā)讀者思考家庭和企業(yè)內(nèi)外的新應(yīng)用,這些應(yīng)用可以從人工智能中受益,并實現(xiàn)快速原型和實驗?!?。
這些家庭自動化過程可以應(yīng)用于監(jiān)控圣誕樹的燈光,在特殊包裹送到前門時發(fā)出警報,或者監(jiān)視煙囪,看是否有一個穿著紅色西裝的大家伙試圖在深夜?jié)撊胛輧?nèi)吃掉你所有的餅干。
可以把它看作是對古老的節(jié)日經(jīng)典 你睡覺的時候可以當心;沒有必要醒著。您的家庭自動化設(shè)置可以完成這項工作,這當然是好事 的一種旋轉(zhuǎn)。
通過將 DeepStack 與 Home Assistant 相結(jié)合, Cole 向開發(fā)者展示了如何創(chuàng)建自己的家庭安全或自動化系統(tǒng),以及將 Jetson 集成到更大項目中的能力。對于那些想深入挖掘的人來說,該項目為集成其他 NVIDIA 技術(shù)(如 DeepStream 、 Metropolis ,甚至 NVIDIA Isaac 與 Home Assistant )提供了進一步的可能性。
正如 Cole 在其關(guān)于該項目的論壇帖子中指出的那樣,開發(fā)者社區(qū)正全力以赴,尋找使用 DeepStack Home Assistant 組合的明智方法,包括:
監(jiān)測拉丁美洲一家磚廠的活動。
在泰國觀察入侵的蛇。
監(jiān)控包裹交付。
檢查摩托車是否鎖好。
檢查雞什么時候下蛋。
在人們回家時問候他們,并播放主題曲。
在商店里計算訪客人數(shù)。
檢查停車位何時可用。
這些可能性只受你想象力的限制。我們?nèi)匀徽J為監(jiān)視圣誕老人的設(shè)置可能非常方便。在 developer forums 中分享如何將 DeepStack 和 Home Assistant 與 NVIDIA Jetson 結(jié)合的想法。
科爾還一直在開發(fā)一款使用攝像頭饋送的 用于檢測火災的自定義模型 。
關(guān)于作者
Jason Black 是 NVIDIA 的自主機器營銷和通信高級經(jīng)理。作為過去 25 年的作家和編輯,他喜歡在流行語背后尋找故事的核心。看到機器人 MIG 把他帶到哪里,他很興奮。
審核編輯:郭婷
-
機器人
+關(guān)注
關(guān)注
211文章
28534瀏覽量
207601 -
NVIDIA
+關(guān)注
關(guān)注
14文章
5038瀏覽量
103304 -
攝像頭
+關(guān)注
關(guān)注
60文章
4851瀏覽量
95946
發(fā)布評論請先 登錄
相關(guān)推薦
評論