根據相關機構最新的市場預測,AI市場目前以計算機視覺為主,而其中視頻監控是最大的市場。換句話說,基于視頻圖像數據的智能化應用是目前AI領域的主要應用。
視頻圖像數據的應用前景
視頻圖像數據廣泛應用于智能化應用場景
視頻圖像數據具有對人、物進行識別的特點,這使其在以人、物為中心的應用場景中發揮巨大價值。目前,除了在安防領域中得到了核心應用,視頻圖像數據在商業、金融、平安城市、無人駕駛等領域均有應用。
例如,在智能商場應用場景中,顧客、店鋪經營者、商場運營方分別存在以下需求:
顧客:方便地進店、購物、付款;獲取專屬折扣及個性化推薦……;
店鋪經營者:提升進店率、轉化率、客單價;增加經營利潤……;
商場運營方:提升整體客流;通過提供增值服務實現租金、廣告位收入的最大化;預防安全事故……
針對上述需求,智能應用會基于視頻圖像數據并融合會員數據、銷售數據等業務數據提供智能功能,舉一個完整使用各類數據的例子:
顧客到店后,根據抓拍的人臉數據結合會員數據做會員到店識別,再基于會員的購買記錄和之前的到店行動軌跡挖掘做用戶的購買畫像,通過APP推送精準推薦給到店的顧客。在顧客選擇其中的商品后,根據抓拍識別客戶當前位置并提供直達選擇商品的導航。這樣一來,既方便了顧客也提高了轉化率。
智能商場應用場景解決方案
智能化應用場景中的數據處理需求
智能商場是視頻圖像數據在智能化場景中的典型應用之一。綜合來看,在智能化應用場景中,我們通常會面對結構化與非結構化混合形成的數據,需要對數據做三個階段的處理,即視頻圖像數據的接入、視頻圖像數據及業務數據的處理、數據使用,這也是常見的物聯網數據處理架構方案。
數據處理方案
其中,在第二階段的數據處理中,通常會存在以下四種數據處理需求:
01
數據的感知類計算
需將視頻圖像數據進行圖像處理、建模、識別,結構化等操作。某些應用場景如黑名單報警由于實時性要求高,部分計算需在智能邊緣設備中才能實現;
02
數據的實時流式計算
某些應用場景如客流統計、熱點區域等需進行實時反饋結果的流式計算;
03
數據的多維計算
某些應用場景如人車關聯、頻繁出入分析等涉及到聚類后圖像數據的碰撞;動線分析等場景需進行圖像數據和業務數據之間的關聯……通常情況下,這類計算需求和傳統數據倉庫中的操作類似,需進行大量結構化數據的處理工作;
04
數據挖掘
高級分析、預測類功能如用戶畫像里大量使用的聚類、預測里大量使用的回歸都會涉及到對各類數據做數據挖掘。
由于響應時間、吞吐量和計算模式的不同,上述數據處理需求通常使用多種數據處理組件實現不同類型的計算,以便在幾種計算場景中獲得較高的效率。
目前,大部分數據處理需求都采用Hadoop生態的各類計算組件實現,但在數據量不大、成本存在限制等小規模使用場景中,仍存在硬件資源有限、組件出故障幾率高、維護成本突出等問題。
因此,在上述小規模場景下,使用更輕量的解決方案更為合適。輕量的解決方案應滿足感知計算、實時計算、多維查詢、數據挖掘等計算需求,具備完整的資源配額功能支持和其他模塊混合部署,可透明擴展;同時,使用單一組件可降低資源開銷及維護成本。
人大金倉MPP數據庫:
滿足小規模場景數據處理需求
人大金倉悉心打造的MPP數據庫可以更好解決小規模視頻圖像數據+業務數據處理場景的數據處理需求,它具備以下優勢特點:
1
通過UDF集成感知算法實現感知計算
常見的應用場景如抓拍、以圖搜圖等可通過SQL實現;同時,MPP數據庫本身具備的并行執行方式會在全部計算節點上做并行的比對計算;
2
通過概率數據結構增強實時計算能力
例如使用hyperloglog可做實時的到店流量統計,基于聚類后實名/匿名ID的十億級數據量可實現毫秒級響應;
3
通過并行SQL支持,提供多維查詢功能
通過獲取顧客按時間順序出現的抓拍位置計算行動軌跡、通過關聯交易系統的交易數據獲取顧客在軌跡中的購買記錄等應用場景需要用到聚類后數據和業務數據的OLAP關聯查詢。支持OLAP是MPP數據庫的基礎能力,MPP基于代價的優化器和各類優化規則則可以保證執行的效率;
4
內置并行數據挖掘算法,提供數據挖掘功能
支持使用內置的聚類算法可對顧客進行畫像,使用回歸算法可實現客流和銷售預測等功能。MPP提供的庫內數據挖掘可減少數據移動的開銷,在資源有限的情況,這無疑是一個 更好的選擇;
5
支持CGROUP控制資源及單機混合部署
可通過資源配額為挖掘/報表類任務和實時任務分配不同的CPU比率,這樣一來,夜間進行批量數據挖掘處理時可以占用全部資源計算,也可在有實施任務時降級使用較少的計算資源,減少對系統占用的影響。同時,整體的占用比率限制可以支持MPP和應用系統混合部署在同一服務器;
6
使用單一組件,資源使用更少
場景中數據處理所需要的不同類型計算能力都可以通過MPP數據庫實現,無需多個組件同時使用,資源使用更少。
除了具備以上特點,MPP數據庫還具備“三個減少”優勢:由于數據的處理和開放使用都使用標準SQL,可以減少數據使用層的開發成本;使用交易數據庫的恢復技術實現數據的可靠存儲,可減少由于數據故障產生的維護成本;在存儲典型的人臉、車輛等視圖數據時,歷史數據壓縮比可達5:1到10:1,減少數據存儲成本。
縱觀市場,從 2005年Michael Stonebraker首先提出了數據處理不再適合one size fits all的方案,到如今由于不同的數據和處理需求衍生出了DB-Engines排名中數百種數據處理產品,這些都足以說明不同的數據和不同的處理需求需要使用不同的數據處理方案。
未來已來
未來,隨著視頻圖像數據在更多行業中的深度應用,數據處理將會衍生出更多的需求。人大金倉將持續以“客戶需求為中心”,利用自身過硬的技術實力和開放能力服務更多AI應用場景,為客戶持續貢獻價值。
-
物聯網
+關注
關注
2909文章
44661瀏覽量
373515 -
視頻圖像
+關注
關注
0文章
47瀏覽量
17485 -
智能化
+關注
關注
15文章
4887瀏覽量
55394
原文標題:MPP數據庫助力打造視頻圖像輕量解決方案 滿足AI場景智能化應用
文章出處:【微信號:TheBigData1024,微信公眾號:人工智能與大數據技術】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
評論