激光雷達(dá)是現(xiàn)今全球自動駕駛汽車系統(tǒng)的基石。但是它們很容易受到惡劣天氣、黑暗、霧、煙、薄霧和太陽光的干擾，這就是為什么Flir公司一直在“鼓吹”替代或者說冗余方案：遠(yuǎn)紅外熱成像視覺。

在今年的CES展上，F(xiàn)lir宣布了用于開發(fā)自動駕駛汽車的下一代熱成像視覺開發(fā)套件ADK。IP67級、usb和以太網(wǎng)絡(luò)的硬件將廣角鏡頭與公司內(nèi)部的Boson相機(jī)核心配對，可以從電磁光譜的遠(yuǎn)紅外線部分獲取640 x 512分辨率的數(shù)據(jù)。

Flir表示，得益于專有的機(jī)器學(xué)習(xí)算法，ADK能夠探測200米以外的物體。對于道路上的自動決策，熱成像攝像機(jī)加上機(jī)器學(xué)習(xí)能力為行人檢測提供了最有效的方法，尤其是在混亂的環(huán)境或能見度較低的環(huán)境中。

除了這款新的ADK，F(xiàn)lir還發(fā)布了一款據(jù)稱是業(yè)界首創(chuàng)的產(chǎn)品：一款帶有多個Flir ADK攝像頭的商用測試車方案，這些攝像頭可以提供360度的街景。

它配備了熱成像增強(qiáng)的自動緊急制動功能——Flir表示，這是熱成像數(shù)據(jù)增強(qiáng)無人駕駛汽車魯棒性的一種演示。

Flir成立于1978年，擁有3500多名員工。該公司表示，其50多萬個熱傳感器內(nèi)置在通用汽車、寶馬、奧迪、梅賽德斯-奔馳和大眾的駕駛員預(yù)警系統(tǒng)中。

去年10月，該公司首次推出了螢火蟲(Firefly)產(chǎn)品，這是一款基于英特爾Movidius Myiad 2的攝像頭內(nèi)置物體檢測的遠(yuǎn)紅外相機(jī)。

去年6月，該公司還發(fā)布了一個包含1萬張紅外光圖像的開源數(shù)據(jù)集，用這個數(shù)據(jù)集訓(xùn)練的系統(tǒng)可以檢測到距離250米遠(yuǎn)的物體，或者是汽車前大燈照射距離的4倍。

該數(shù)據(jù)集包含白天和夜間的鏡頭在霧，煙，霾，太陽眩光，和其他負(fù)責(zé)環(huán)境下的照明條件，對象包括行人、動物、自行車和其他車輛。

其實(shí)，從去年開始，全球范圍內(nèi)已經(jīng)有多家初創(chuàng)公司在涉足紅外熱成像領(lǐng)域。這些技術(shù)的導(dǎo)入，也來自于新車測試評價的項目升級。

歐洲新車評價發(fā)布組織（E-NCAP）在2018版E-NCAP中再次引入了一系列新的測試，包括測試場景新增黑暗和朦朧的照明條件下進(jìn)行行人檢測。

有一家遠(yuǎn)紅外技術(shù)方案工程團(tuán)隊對事故發(fā)生時的駕駛場景做了一次模擬，在汽車配備了激光雷達(dá)等傳感器之外再配備了熱成像傳感器，那么可以早5秒檢測到行人（目前的熱成像傳感器可以檢測到250米以上，甚至到400米的距離）。

傳統(tǒng)意義上的夜視主要有三種技術(shù)路線，微光夜視、紅外夜視（又分為近紅外、遠(yuǎn)紅外）。微光夜視體積小，價格低，但易受周邊環(huán)境影響。

而遠(yuǎn)紅外傳感器在軍事和航空領(lǐng)域已經(jīng)應(yīng)用多年，因此它是一種成熟的技術(shù)，適合于大規(guī)模市場。相比于近紅外，遠(yuǎn)紅外攝像頭則可以做到車輛在白天或晚上任何條件下可靠地檢測、分割和分析行人、動物、物體和道路狀況，而不管天氣狀況如何。

此外，遠(yuǎn)紅外比激光雷達(dá)和雷達(dá)給出了更多的物體細(xì)節(jié)，比如陰影對圖像的影響最小，溫暖的物體在寒冷的環(huán)境中表現(xiàn)出很高的對比度，使它們易于辨認(rèn)等等。

去年10月，一家以色列初創(chuàng)公司AdaSky宣布推出第一臺為無人駕駛汽車設(shè)計的遠(yuǎn)紅外（FIR）熱像儀。AdaSky承諾，其Viper平臺到2021年將進(jìn)入大規(guī)模生產(chǎn)。

目前，AdaSky的熱成像儀的性能為30萬像素（640x 480像素）、4.3厘米x 2.6厘米的固態(tài)遠(yuǎn)紅外傳感器（不包含移動部件），以每秒60幀的速度連續(xù)工作（目前傳統(tǒng)的汽車夜視紅外儀每隔幾分鐘就需要重新校準(zhǔn)一次），并且能夠以0.05°（熱靈敏度），被動地從幾百米遠(yuǎn)的物體收集熱信號（其中，行人檢測距離在200米左右）。

此外，基于專用圖像信號處理器（ISP）和專用集成電路（ASIC）上的計算機(jī)視覺算法，熱成像儀能夠記錄和檢測動物、行人、騎自行車者和其他危險物體的熱特征，并與其他傳感器協(xié)同工作，以便提供支持惡劣天氣條件下的物體檢測。

熱成像還被用于與傳統(tǒng)可見光視覺進(jìn)行雙目融合。

另一家以色列視覺公司Foresight，繼去年CES展上首次對外展示了QuadSight?四目視覺系統(tǒng)”原型產(chǎn)品（兩對立體視覺的紅外和可見光攝像頭），今年CES展上再次亮相。

QuadSight?四目視覺系統(tǒng)的目標(biāo)是在所有天氣和光照條件下(包括完全黑暗、雪、雨、霧、沙塵暴和眩目的眩光)，實(shí)現(xiàn)近100%的障礙物檢測和接近零誤報。

自從2000年凱迪拉克·德維爾（Cadillac DeVille）首次大規(guī)模配置汽車夜視系統(tǒng)以來，包括寶馬、奔馳等一線豪華品牌一直有搭載相關(guān)產(chǎn)品技術(shù)。

不是新鮮的配置，卻有著尷尬的境遇。一是價格高昂，尤其單一配置情況下，過去幾年沒有很好的ADAS功能去其配合，更多只是作為駕駛員的一種輔助視覺。更關(guān)鍵的是，供應(yīng)商寥寥無幾。

僅停留在豪華車上的現(xiàn)狀可能正在被打破。在接下來的一兩年內(nèi)，我們可以看到它開始進(jìn)入中端車市場。比如，去年上市的PSA旗下高端豪華汽車品牌DS的DS7成為了紅外夜視系統(tǒng)首次下探到30萬元級別車型。

DS7搭載的紅外成像系統(tǒng)又被稱為DS NIGHT VISION功能，安裝在前格柵中的紅外攝像機(jī)能夠有效識別前方15米至150米之間超過50厘米高的人和動物，并提示駕駛者。

除了夜視系統(tǒng)本身的成本下降，如何和目前的ADAS及自動駕駛系統(tǒng)的多傳感器進(jìn)行深度融合，并在基于夜視基礎(chǔ)上的深度學(xué)習(xí)，也是加快規(guī)模化市場導(dǎo)入的機(jī)會。

更為重要的是，遠(yuǎn)紅外夜視成像儀可能是用于半自動駕駛和全自動駕駛汽車傳感器系統(tǒng)的關(guān)鍵部分。其中一個關(guān)鍵的優(yōu)點(diǎn)是，與傳統(tǒng)相機(jī)不同，它們不會被直射陽光或前照燈蒙蔽。