基于陰影重建形狀的視覺技術(shù):一種重要的圖像形狀提取技術(shù)及其應(yīng)用
發(fā)布時(shí)間:2020-06-18 來源:Steve Zhu, Teledyne DALSA 集團(tuán) 責(zé)任編輯:wenwei
【導(dǎo)讀】自動(dòng)化視覺檢測已經(jīng)廣泛應(yīng)用于現(xiàn)今的生產(chǎn)環(huán)境的各個(gè)領(lǐng)域,從半導(dǎo)體、電子、食品和飲料、醫(yī)藥包裝、汽車制造以及其它不同行業(yè)。而視覺檢測的應(yīng)用可分類為測量、有/無檢測、機(jī)器人導(dǎo)航、瑕疵檢測、一維或二維碼識(shí)別,以及光學(xué)文字識(shí)別(OCR)閱讀等等。常規(guī)的 2D 算法通常擅長處理某些特征清晰且定義明確的應(yīng)用,因此檢測更加可靠。 換句話說,目標(biāo)特征必須穩(wěn)定并且清晰一致地呈現(xiàn),檢測和識(shí)別才會(huì)比較可靠。
不過就如人生一樣,視覺檢測時(shí)常面臨挑戰(zhàn)和困境,譬如一些表面帶有天然的紋理或高度反光的物體;再譬如,一些部件經(jīng)過打磨或沖壓等制造過程,產(chǎn)生了彎曲或帶紋理的表面;還有一些物件帶有浮雕圖案或凹凸不平特征,例如是沖壓或雕刻標(biāo)記,這些都會(huì)為檢測帶來困難。傳統(tǒng)的二維算法和預(yù)處理工具往 往不能可靠的解決這些問題?;陉幱爸亟ㄐ螤?Shape from Shading)技術(shù)則是一種經(jīng)過驗(yàn)證的更可靠方法,能夠應(yīng)付這些復(fù)雜的檢測任務(wù)。
本文中一下兩個(gè)應(yīng)用案例,顯示陰影重建形狀(SFS)技術(shù)如何提高目標(biāo)物體的反差并盡可能地抑制背景噪聲,使得更容易地檢測出缺陷并成功讀取字符。
上圖:原圖像;中圖:陰影重建形狀技術(shù)處理后的圖像; 下圖:利用Teledyne DALSA Sherlock 軟件的陰影重建形狀技術(shù)處理后的圖像
陰影重建形狀技術(shù)的廣泛應(yīng)用
下面兩個(gè)例子顯示 SFS 陰影重建形狀技術(shù)的應(yīng)用如何解決一些傳統(tǒng)二維算法和預(yù)處理器難于處理的情況。在第一個(gè)案例中,制造商試圖檢測瓷磚表面的裂縫或劃痕??墒怯捎诖纱u表面帶有復(fù)雜的紋理背景,使得一般的照明技術(shù)和常規(guī)的二維預(yù)處理器和算法很難及時(shí)檢測到異常,因?yàn)檫@些缺陷在標(biāo)準(zhǔn)成像中根本無法察覺。利用 SFS 技術(shù),凹陷、裂縫和刮痕都能夠被輕易從背景中分離,分辨及被檢測出來。
在上面的示例中,可以看到字體和圖案是以凸壓方式印在名片上。 如第一張圖片所示,在文首的圖片中,在名片上的壓印字體其實(shí)是很難用肉眼來閱讀的。雖然低角度暗場光源會(huì)有幫助,但還是不夠強(qiáng)大和穩(wěn)定。利用 SFS 配合多角度多重光源,可實(shí)現(xiàn)具有更高反差和更出色的合成圖像。圖像經(jīng)處理后,名片上的所有字體均清晰顯示 (如上面第二張圖片所示),以便于標(biāo)準(zhǔn)光學(xué)文字辨識(shí)算法查驗(yàn)。
什么是 SFS 陰影重建視覺技術(shù)?
陰影重建形狀(Shape from Shading,簡稱 SFS)是一種將物件形狀和它的二維表面紋理分離的技術(shù)。通常,一般來說,它是用于突顯圖像的三維表面紋理信息,即所謂的形狀圖像,并除去高反光部分的眩光,即所謂的紋理圖像。這一技術(shù)的工作原理是利用分段環(huán)燈或獨(dú)立的條形燈并將多個(gè)圖像組合為一個(gè)圖像而起作用。拍攝過程會(huì)從一系列圖像中提取數(shù)據(jù)以揭示以前隱藏的表面特征或缺陷。
相機(jī)會(huì)按照環(huán)燈的逆時(shí)針轉(zhuǎn)動(dòng)方向,拍攝出四個(gè)不同照明角度的圖像。接著利用陰影重建形狀(SFS)技術(shù)把四個(gè)圖像合成,以顯示三維表面結(jié)構(gòu)。上面的四幀圖片顯示出一個(gè)帶紋理的瓶蓋在不同照明角度下拍攝出來的影像,以及經(jīng)SFS 算法處理后的合成圖像。
下圖顯示 SFS 技術(shù)的合成和處理過程。
利用多角度多重光源(使用者可編程)擷取的四個(gè)影像
Teledyne DALSA Sherlock 軟件里的 SFS 算法可計(jì)算具有 3D 效果的合成圖像,以增強(qiáng)對(duì)比度,同時(shí)抑制背景噪聲。
形狀圖像
工作原理如下:算法會(huì)搜尋從每一照明方向建構(gòu)出來的陰影以及突顯出來的邊緣。每一幀圖像的陰影和邊緣會(huì)組合成一個(gè)圖像,以展示各部份的高度差異。
這特別有助于偵測刮痕、凹陷、遺失的部件等等。
紋理圖像
該算法還將尋找沒有直接照明的圖像區(qū)域。 然后,它將看起來相同的圖像的所有區(qū)域(即它們沒有眩光)組合到一個(gè)沒有眩光的圖像中。 這對(duì)于檢查高反射率零件或通過塑料或透明材料覆蓋物或包裹物檢查零件很有用。
如何處理運(yùn)動(dòng)中目標(biāo)物的檢測
假如部件在檢測過程中處于運(yùn)動(dòng)狀態(tài),SFS 的嵌入式活動(dòng)矯正機(jī)制可以處理同一部件在每一圖像擷取時(shí)位于不同位置的情況。再通過額外的一副圖像,即所謂的搜尋圖像。通過比較第一副圖像和搜尋圖像,算法會(huì)找出部件在圖像擷取時(shí)的活動(dòng)模式,從而識(shí)別并對(duì)齊正確的像素。
磁磚彩色圖像 磁磚單色圖像
經(jīng) SFS 處理的圖像
SFS 陰影重建技術(shù)的優(yōu)勢
這種先進(jìn)的視覺解決方案具有許多獨(dú)特的優(yōu)勢。 通過先進(jìn)軟件算法配合多角度照明,它有助于消除表面背景效果(例如噪音或色彩),并產(chǎn)生聚焦于具有強(qiáng)烈對(duì)比度的特征的輸出圖像,以方便檢查。 它特別適合檢查多種材料(例如金屬,塑料,橡膠和陶瓷)的反射表面和粗糙表面是否有瑕疵(例如凹痕,凹槽,裂縫和劃痕),并清晰顯示難以理解的字符。
推薦閱讀:
設(shè)計(jì)電路當(dāng)然要“知己知彼”,開關(guān)穩(wěn)壓器拓?fù)涞脑肼曁匦源笃鸬?/a>
特別推薦
- 是否存在有關(guān) PCB 走線電感的經(jīng)驗(yàn)法則?
- 一文看懂電壓轉(zhuǎn)換的級(jí)聯(lián)和混合概念
- 第12講:三菱電機(jī)高壓SiC芯片技術(shù)
- 準(zhǔn) Z 源逆變器的設(shè)計(jì)
- 貿(mào)澤電子持續(xù)擴(kuò)充工業(yè)自動(dòng)化產(chǎn)品陣容
- 低功耗嵌入式設(shè)計(jì)簡介
- 如何通過基本描述找到需要的電容?
技術(shù)文章更多>>
- 瑞典名企Roxtec助力構(gòu)建安全防線
- 貿(mào)澤與Cinch聯(lián)手發(fā)布全新電子書深入探討惡劣環(huán)境中的連接應(yīng)用
- 第二十二屆中國國際軟件合作洽談會(huì)在成都順利舉行
- 混合信號(hào)示波器的原理和應(yīng)用
- 功率器件熱設(shè)計(jì)基礎(chǔ)(十)——功率半導(dǎo)體器件的結(jié)構(gòu)函數(shù)
技術(shù)白皮書下載更多>>
- 車規(guī)與基于V2X的車輛協(xié)同主動(dòng)避撞技術(shù)展望
- 數(shù)字隔離助力新能源汽車安全隔離的新挑戰(zhàn)
- 汽車模塊拋負(fù)載的解決方案
- 車用連接器的安全創(chuàng)新應(yīng)用
- Melexis Actuators Business Unit
- Position / Current Sensors - Triaxis Hall
熱門搜索
電池管理系統(tǒng)
電磁蜂鳴器
電磁兼容
電磁爐危害
電動(dòng)車
電動(dòng)工具
電動(dòng)汽車
電感
電工電路
電機(jī)控制
電解電容
電纜連接器
電力電子
電力繼電器
電力線通信
電流保險(xiǎn)絲
電流表
電流傳感器
電流互感器
電路保護(hù)
電路圖
電路圖符號(hào)
電路圖知識(shí)
電腦OA
電腦電源
電腦自動(dòng)斷電
電能表接線
電容觸控屏
電容器
電容器單位