機器視覺是人工智能正在快速發展的一個分支。簡單說來,機器視覺就是用機器代替人眼來做測量和判斷。機器視覺系統是通過機器視覺產品(即圖像攝取裝置,分CMOS和CCD兩種)將被攝取目標轉換成圖像信號,傳送給專用的圖像處理系統,得到被攝目標的形態信息,根據像素分布和亮度、顏色等信息,轉變成數字化信號;圖像系統對這些信號進行各種運算來抽取目標的特征,進而根據判別的結果來控制現場的設備動作。
機器視覺是一項綜合技術,包括圖像處理、機械工程技術、控制、電光源照明、光學成像、傳感器、模擬與數字視頻技術、計算機軟硬件技術(圖像增強和分析算法、圖像卡、 I/O卡等)。一個典型的機器視覺應用系統包括圖像捕捉、光源系統、圖像數字化模塊、數字圖像處理模塊、智能判斷決策模塊和機械控制執行模塊。
機器視覺系統最基本的特點就是提高生產的靈活性和自動化程度。在一些不適于人工作業的危險工作環境或者人工視覺難以滿足要求的場合,常用機器視覺來替代人工視覺。同時,在大批量重復性工業生產過程中,用機器視覺檢測方法可以大大提高生產的效率和自動化程度。
一個典型的工業機器視覺系統包括:光源、鏡頭(定焦鏡頭、變倍鏡頭、遠心鏡頭、顯微鏡頭)、 相機(包括CCD相機和COMS相機)、圖像處理單元(或圖像捕獲卡)、圖像處理軟件、監視器、通訊 / 輸入輸出單元等。
四個常見應用領域:
機器視覺圖像檢測應用
檢測是機器視覺工業領域最主要的應用之一, 光學篩選機,幾乎所有產品都需要檢測,而人工檢測存在著較多的毛病,人工檢測準確性低,長時間工作的話,準確性更是無法保證,并且檢測速度慢,容易影響整個生產過程的效率。因此,機器視覺檢測設備在圖像檢測的應用方面也非常的廣泛,光學影像篩選機,例如:硬幣邊沿字符的檢測。
2000年10月新發行的第五套人民幣中,一元硬幣的側邊增強了防偽功能,鑒于生產過程的嚴格控制要求,在造幣的最后一道工序上安置了視覺檢測系統,印刷過程中的套色定位以及較色檢查、包裝過程中的飲料瓶蓋的印刷質量檢查,產品包裝上的條碼和字符識別等,玻璃瓶的缺陷檢測。機器視覺系統對玻璃瓶的缺陷檢測,其主要檢測包括尺寸檢測、瓶身外觀缺陷檢測、瓶肩部缺陷檢測、瓶口檢測等。
機器視覺視覺定位應用
視覺定位要求機器視覺系統能夠快速準確地找到被測零件并確認其位置。在半導體封裝領域,設備需要按照機器視覺取得的芯片位置信息調整拾取頭,準確拾取芯片并進行綁定,這就是視覺定位在機器視覺工業領域最基本的應用。
機器視覺物體測量應用
視覺定位要求機器視覺系統能夠快速準確地找到被測零件并確認其位置。在半導體封裝領域,設備需要按照機器視覺取得的芯片位置信息調整拾取頭,準確拾取芯片并進行綁定,這就是視覺定位在機器視覺工業領域最基本的應用。
機器視覺物體分揀應用
實際上,物體分揀應用是建立在識別、檢測之后一個環節,通過機器視覺系統將圖像進行處理,實現分揀。在機器視覺工業應用中常用于食品分揀、零件外貌瑕疵自動分揀、棉花纖維分揀等。
機器視覺上游有光源、鏡頭、工業相機、圖像采集卡、圖像處理軟件等軟硬件提供商,中游有集成和整機設備提供商,行業下游應用較廣,主要下游市場包括電子制造行業、汽車、印刷包裝、煙草、農業、醫藥、紡織和交通等領域。
機器視覺全球市場主要分布在北美、歐洲、日本、中國等地區,根據統計數據,2014年,全球機器視覺系統及部件市場規模是 36.7 億美元,2015年全球機器視覺系統及部件市場規模是42億美元,2016年全球機器視覺系統及部件市場規模是62億美元,2002-2016年市場年均復合增長率為12%左右。而機器視覺系統集成,根據北美市場數據估算,大約是視覺系統及部件市場的6倍。
機器視覺技術近年發展
中國機器視覺起步于80年代的技術引進,隨著98年半導體工廠的整線引進,也帶入機器視覺系統,06年以前國內機器視覺產品主要集中在外資制造企業,規模都較小,06年開始,工業機器視覺應用的客戶群開始擴大到印刷、食品等檢測領域,2011年市場開始高速增長,隨著人工成本的增加和制造業的升級需求,加上計算機視覺技術的快速發展,越來越多機器視覺方案滲透到各領域,到2016年我國機器視覺市場規模已達近70億元。
機器視覺中,缺陷檢測功能,是機器視覺應用得最多的功能之一,主要檢測產品表面的各種信息。在現代工業自動化生產中,連續大批量生產中每個制程都有一定的次品率,單獨看雖然比率很小,但相乘后卻成為企業難以提高良率的瓶頸,并且在經過完整制程后再剔除次品成本會高很多(例如,如果錫膏印刷工序存在定位偏差,且該問題直到芯片貼裝后的在線測試才被發現,那么返修的成本將會是原成本的100倍以上),因此及時檢測及次品剔除對質量控制和成本控制是非常重要的,也是制造業進一步升級的重要基石。
在檢測行業,與人類視覺相比,機器視覺優勢明顯
1)精確度高:人類視覺是64灰度級,且對微小目標分辨力弱;機器視覺可顯著提高灰度級,同時可觀測微米級的目標;
2)速度快:人類是無法看清快速運動的目標的,機器快門時間則可達微秒級別;
3)穩定性高:機器視覺解決了人類一個非常嚴重的問題,不穩定,人工目檢是勞動非常枯燥和辛苦的行業,無論你設計怎樣的獎懲制度,都會發生比較高的漏檢率。但是機器視覺檢測設備則沒有疲勞問題,沒有情緒波動,只要是你在算法中寫好的東西,每一次都會認真執行。在質控中大大提升效果可控性。
4)信息的集成與留存:機器視覺獲得的信息量是全面且可追溯的,相關信息可以很方便的集成和留存。
機器視覺技術近年發展迅速
1)圖像采集技術發展迅猛
CCD、CMOS等固件越來越成熟,圖像敏感器件尺寸不斷縮小,像元數量和數據率不斷提高,分辨率和幀率的提升速度可以說日新月異,產品系列也越來越豐富,在增益、快門和信噪比等參數上不斷優化,通過核心測試指標(MTF、畸變、信噪比、光源亮度、均勻性、色溫、系統成像能力綜合評估等)來對光源、鏡頭和相機進行綜合選擇,使得很多以前成像上的難點問題得以不斷突破。
2)圖像處理和模式識別發展迅速
圖像處理上,隨著圖像高精度的邊緣信息的提取,很多原本混合在背景噪聲中難以直接檢測的低對比度瑕疵開始得到分辨。
模式識別上,本身可以看作一個標記過程,在一定量度或觀測的基礎上,把待識模式劃分到各自的模式中去。圖像識別中運用得較多的主要是決策理論和結構方法。決策理論方法的基礎是決策函數,利用它對模式向量進行分類識別,是以定時描述(如統計紋理)為基礎的;結構方法的核心是將物體分解成了模式或模式基元,而不同的物體結構有不同的基元串(或稱字符串),通過對未知物體利用給定的模式基元求出編碼邊界,得到字符串,再根據字符串判斷它的屬類。在特征生成上,很多新算法不斷出現,包括基于小波、小波包、分形的特征,以及獨二分量分析;還有關子支持向量機,變形模板匹配,線性以及非線性分類器的設計等都在不斷延展。
3)深度學習帶來的突破
傳統的機器學習在特征提取上主要依靠人來分析和建立邏輯,而深度學習則通過多層感知機模擬大腦工作,構建深度神經網絡(如卷積神經網絡等)來學習簡單特征、建立復雜特征、學習映射并輸出,訓練過程中所有層級都會被不斷優化。在具體的應用上,例如自動ROI區域分割;標點定位(通過防真視覺可靈活檢測未知瑕疵);從重噪聲圖像重檢測無法描述或量化的瑕疵如橘皮瑕疵;分辨玻璃蓋板檢測中的真假瑕疵等。隨著越來越多的基于深度學習的機器視覺軟件推向市場(包括瑞士的vidi,韓國的SUALAB,香港的應科院等),深度學習給機器視覺的賦能會越來越明顯。
4)3d視覺的發展
3D視覺還處于起步階段,許多應用程序都在使用3D表面重構,包括導航、工業檢測、逆向工程、測繪、物體識別、測量與分級等,但精度問題限制了3D視覺在很多場景的應用,目前工程上最先鋪開的應用是物流里的標準件體積測量,相信未來這塊潛力巨大。
諸多難點有待攻破
1)光源與成像:機器視覺中優質的成像是第一步,由于不同材料物體表面反光、折射等問題都會影響被測物體特征的提取,因此光源與成像可以說是機器視覺檢測要攻克的第一個難關。比如現在玻璃、反光表面的劃痕檢測等,很多時候問題都卡在不同缺陷的集成成像上。
2)重噪音中低對比度圖像中的特征提取:在重噪音環境下,真假瑕疵的鑒別很多時候較難,這也是很多場景始終存在一定誤檢率的原因,但這塊通過成像和邊緣特征提取的快速發展,已經在不斷取得各種突破。
3)對非預期缺陷的識別:在應用中,往往是給定一些具體的缺陷模式,使用機器視覺來識別它們到底有沒有發生。但經常遇到的情況是,許多明顯的缺陷,因為之前沒有發生過,或者發生的模式過分多樣,而被漏檢。如果換做是人,雖然在操作流程文件中沒讓他去檢測這個缺陷,但是他會注意到,從而有較大幾率抓住它,而機器視覺在這點上的“智慧”目前還較難突破。
機器視覺產業鏈情況
1)上游部件級市場
主要包括光源、鏡頭、工業相機、圖像采集卡、圖像處理軟件等提供商,近幾年智能相機、工業相機、光源和板卡都保持了不低于20%的增速。根據中國機器視覺產業聯盟(CMVU)調查統計,現在已進入中國的國際機器視覺品牌已近200多家(如康耐視、達爾薩、堡盟等為代表的核心部件制造商,以基恩士、歐姆龍、松下、邦納、NI等為代表的則同時涉足機器視覺核心部件和系統集成),中國自有的機器視覺品牌也已有100多家(如海康、華睿、盟拓光電、神州視覺、深圳燦銳、上海方誠、上海波創電氣等),機器視覺各類產品代理商超過300家(如深圳鴻富視覺、微視新紀元、三寶興業、凌云光、陽光視覺等)。很多國內機器視覺的部件市場都是從代理國外品牌開始,很多企業均與國外的同行有較好的合作,且這種合作具有一定的排他性,這給潛在進入者帶來了一定的門檻,因此優質產品的代理商也都有不錯的市場競爭力和利潤表現。同時,以海康、華睿為代表的國產工業視覺核心部件正在快速崛起。
2)中游系統集成和整機裝備市場
國內中游的系統集成和整機裝備商有100多家,他們可以給各行業自動化公司提供綜合的機器視覺方案,如凌云光、微視新紀元、嘉恒、凌華、陽光視覺、鼎信、大恒圖像等。由于國內產品與國際依然有不小差距,很多中游系統集成商和整機裝備商又是從核心零部件的貿易做起來的,因此很多在視覺產品的選擇方面,依然更為青睞國外品牌。國內品牌為推廣自己的軟硬件產品,往往需要發展自己的方案集成能力,才能更好的面對市場競爭。
3)下游應用市場
機器視覺下游,主要是給終端用戶提供非標自動化綜合解決方案的公司,行業屬性非常強,核心競爭力是對行業和生產的綜合理解和多類技術整合。由于行業自動化的更迭有一定周期性,深受行業整體升級速度、出貨量和利潤狀況影響,因此近兩年來看,拉動機器視覺應用普及最主要的還是在電子制造業,其次是汽車和制藥。
半導體和電子生產行業:從國內機器視覺工業上的應用分布來看,46%都集中在電子及半導體制造行業,包括晶圓加工制造的分類切割、PCB檢測(底片、內/外層板、成品外觀終檢等)、SMT貼裝檢測、LCD全流程的AOI缺陷檢測、各種3c組件的表面缺陷檢測、3c產品外觀檢測等
汽車:車身裝配檢測、零件的幾何尺寸和誤差測量、表面和內部缺陷檢測、間隙檢測等
印刷、包裝檢測:煙草外殼印刷、食品的包裝和印刷、藥品的鋁塑板包裝和印刷等
農業:對農產品的分級、檢驗和分類
紡織:對異纖、云織、經疵、緯疵等瑕疵檢測、織物表面絨毛鑒定、紗線結構分析等等。
機器視覺系統未來發展趨勢
1)嵌入式解決方案發展迅猛,智能相機性能與成本優勢突出,嵌入式PC會越來越強大
2)模塊化的通用型軟件平臺和人工智能軟件平臺將降低開發人員技術要求和縮短開發周期
3)3d視覺將走向更多應用場景
責任編輯:gt
-
傳感器
+關注
關注
2551文章
51099瀏覽量
753570 -
計算機
+關注
關注
19文章
7494瀏覽量
87953 -
機器視覺
+關注
關注
162文章
4372瀏覽量
120316
發布評論請先 登錄
相關推薦
評論