眾所周知,機器學(xué)習(xí)主要分為兩類:監(jiān)督學(xué)習(xí)(supervised learning)與無監(jiān)督學(xué)習(xí)(unsupervised learning)。而監(jiān)督學(xué)習(xí)離不開數(shù)據(jù)標(biāo)注(data labeling),也就是依靠人工找到groundtruth。燒錢速度有多快?近年來,我們注意到,數(shù)據(jù)標(biāo)注創(chuàng)業(yè)公司層出不窮。只要在圖片中標(biāo)注一輛汽車,只需一秒鐘,就能輕輕松松一美元進(jìn)賬。標(biāo)注一段幾十秒視頻中的汽車,就能幾百美元進(jìn)賬。數(shù)據(jù)標(biāo)注的成本與需求都在節(jié)節(jié)攀升。據(jù)市場研究預(yù)測,到2023年,數(shù)據(jù)標(biāo)注市場將達(dá)到10億美元的規(guī)模。這些數(shù)據(jù)標(biāo)注公司一般會開發(fā)出基本的物體識別算法,然后在人工成本較低的地區(qū)招人,培訓(xùn)他們,讓他們找到機器識別中的錯誤,改正之后提交。比如,一些總部在硅谷的公司會在比較偏遠(yuǎn)的州建立分部,進(jìn)行數(shù)據(jù)標(biāo)注。也有很多公司將業(yè)務(wù)外包給數(shù)據(jù)標(biāo)注公司,這些公司的員工一般在非洲國家、印度或者其他人工成本較低的國家。對數(shù)據(jù)需求量大的公司,每個月支付給外包公司上百萬美元,才能滿足開發(fā)需求。數(shù)據(jù)標(biāo)注不僅消耗資金,也是訓(xùn)練模型中最耗時的環(huán)節(jié)。從數(shù)據(jù)采集到最終標(biāo)識,很可能要等待一個月的時間。嚴(yán)重影響了開發(fā)進(jìn)度。因此,很多無人駕駛公司開始研究數(shù)據(jù)標(biāo)識,希望不再依賴人力與第三方公司。
印度數(shù)據(jù)標(biāo)注公司iMerit數(shù)據(jù)標(biāo)注無處不在訓(xùn)練無人駕駛的模型就需要理解各種障礙物的含義,就離不開數(shù)據(jù)標(biāo)識。無人駕駛的數(shù)據(jù)標(biāo)識主要可以用兩個維度來看。第一個維度是2D和3D的分別。2D一般指通過攝像頭捕捉到的數(shù)據(jù),3D指激光雷達(dá)捕捉到的數(shù)據(jù)。第二個維度是語義分割(semantic segmentation)與畫框(bounding box)的分別。
3D語義分割的例子魚和熊掌不可兼得數(shù)據(jù)標(biāo)注的難點主要來源于兩個方面:速度與質(zhì)量。速度慢了就滿足不了模型訓(xùn)練的需求,而太快就會影響質(zhì)量,質(zhì)量低了就會影響模型的準(zhǔn)確性。在資源有限的情況下,速度與質(zhì)量往往魚和熊掌不可兼得。我們可以通過兩種手段來解決這一矛盾:合理的流程和更自動化的機器學(xué)習(xí)技術(shù)。首先來看流程。數(shù)據(jù)標(biāo)識速度慢,或是質(zhì)量低,其實很多時候不是技術(shù)的問題,而是流程的問題。數(shù)據(jù)從采集到產(chǎn)出,首先要被“篩選”,分發(fā)到數(shù)據(jù)標(biāo)識人員的手上,然后被標(biāo)識,標(biāo)識的結(jié)果再被傳回來,最后需要抽檢,保證質(zhì)量。這些步驟中很多地方需要改進(jìn)。比如,哪類數(shù)據(jù)應(yīng)該被篩選?質(zhì)量不合格的標(biāo)識該怎么辦?是否要退回重做?重做又需要時間,不重做就意味著需要更多的數(shù)據(jù)。對于資金不夠充足的公司,改進(jìn)流程往往是最合適的手段。從技術(shù)方面來看,近年來,AutoML(Automated Machine Learning)的概念越來越火,即端到端的全自動機器學(xué)習(xí)技術(shù),可以自主調(diào)參,自主評估模型,從而縮短模型訓(xùn)練的周期。但是,AutoML不是萬能的。至少在未來幾年里,我們都無法擺脫對人工數(shù)據(jù)標(biāo)識的依賴。我們需要找到一種人機共生的方式,將人類對機器的幫助最大化。
歐洲數(shù)據(jù)標(biāo)識市場中,人工標(biāo)識的占比始終占大多數(shù)人機共生(Human-in-the-Loop)2020-2030這十年,將是人類探索與AI合作機會的十年。數(shù)據(jù)標(biāo)注就是人類與AI合作最完美的途徑之一。利用機器學(xué)習(xí)技術(shù)進(jìn)行視覺探測,雖然成本低、速度快,但是往往有一定的錯誤率。這時,就需要人類介入,告訴機器錯在了哪里。機器會記住這些人類提供的回饋信息,進(jìn)一步訓(xùn)練自己的模型,避免下次在類似場景中犯同樣的錯誤,從而形成了一個循環(huán)。比如,AI探測結(jié)果是,某個交通信號燈的顏色是紅色,而人類檢查后發(fā)現(xiàn)應(yīng)該是綠色,就通過某個前端工具點擊“錯誤”。開發(fā)團(tuán)隊要盡快找到模型最需要的反饋信息,為人類標(biāo)注員提供一個工具,將人類的反饋快速分享給機器。
責(zé)任編輯:pj
-
數(shù)據(jù)
+關(guān)注
關(guān)注
8文章
7134瀏覽量
89456 -
AI
+關(guān)注
關(guān)注
87文章
31493瀏覽量
270067 -
無人駕駛
+關(guān)注
關(guān)注
98文章
4088瀏覽量
120889
發(fā)布評論請先 登錄
相關(guān)推薦
評論