2025年1月7日，由中新廣州知識(shí)城開發(fā)建設(shè)辦公室、西安電子科技大學(xué)廣州研究院以及海絲產(chǎn)教融合協(xié)同創(chuàng)新中心共同組織的“聚焦多模態(tài)雷視融合感知技術(shù)”的學(xué)術(shù)沙龍?jiān)谖靼搽娮涌萍即髮W(xué)廣州研究院成功舉辦。昱感微創(chuàng)始人&CEO蔣宏受邀出席演講，與廣研院師生分享了《“多維像素”多模態(tài)雷視融合感知技術(shù)——賦能AI機(jī)器視覺(jué)超級(jí)感知能力》主旨報(bào)告。

昱感微采用最前沿的多維像素多模態(tài)前融合技術(shù)，將可見光攝像頭、紅外攝像頭、4D毫米波雷達(dá)/激光雷達(dá)的探測(cè)數(shù)據(jù)在前端（數(shù)據(jù)獲取時(shí)）融合，并將各傳感器的探測(cè)數(shù)據(jù)“坐標(biāo)統(tǒng)一、時(shí)序?qū)R”，最后以“多維像素”的數(shù)據(jù)格式輸出；昱感微的核心技術(shù)創(chuàng)新——“多維像素”，它是指在可見光攝像頭像素信息上加上其它傳感器對(duì)于同源目標(biāo)感知的信息：圖像數(shù)據(jù)+雷達(dá)探測(cè)數(shù)據(jù)+紅外傳感器探測(cè)數(shù)據(jù)疊加，以攝像頭像素為顆粒度組合全部感知數(shù)據(jù)，形成多模態(tài)融合感知數(shù)據(jù)組合。在高分辨率寬動(dòng)態(tài)的可見光攝像頭感知基礎(chǔ)上，雷達(dá)提供目標(biāo)的距離、速度維度的精準(zhǔn)感知還可以幫助可見光攝像頭克服天氣光線的影響，攝像頭的圖像又為雷達(dá)增添了語(yǔ)義信息，進(jìn)一步提高雷達(dá)點(diǎn)云的置信度以及感知信息量；遠(yuǎn)紅外攝像頭有針對(duì)性的目標(biāo)熱輻射圖像感知?jiǎng)t賦予了自動(dòng)駕駛系統(tǒng)卓越的夜視能力。昱感微“多維像素”超級(jí)攝像頭就像是一雙比人眼更敏銳的眼睛，看到的不僅僅是一幅幅二維的圖像，還有更多維度的精確信息（目標(biāo)的距離/速度/3D空間位置/溫度/材質(zhì)等)，形成完整的多模態(tài)“視覺(jué)語(yǔ)言”，令自動(dòng)駕駛系統(tǒng)可以精確全面地感知道路上各種狀況。（詳情可參見昱感微“多維像素”多模態(tài)融合感知展示）

分享結(jié)束后，與會(huì)師生積極提問(wèn)，現(xiàn)場(chǎng)氣氛熱烈而有序。未來(lái)，隨著AI技術(shù)的不斷進(jìn)步和應(yīng)用場(chǎng)景的不斷拓展，多模態(tài)感知技術(shù)將在AI機(jī)器視覺(jué)領(lǐng)域發(fā)揮更加重要的作用。昱感微很榮幸能成為多模態(tài)感知技術(shù)的先行者，也期待有更多的合作伙伴加入到這一領(lǐng)域來(lái)，一起構(gòu)建合作共贏的生態(tài)鏈，為客戶和彼此創(chuàng)造更高價(jià)值。

審核編輯 黃宇