熱線電話:0755-23712116
郵箱:contact@shuangyi-tech.com
地址:深圳市寶安區(qū)沙井街道后亭茅洲山工業(yè)園工業(yè)大廈全至科技創(chuàng)新園科創(chuàng)大廈2層2A
目前基于機器視覺的缺陷檢測技術(shù)已經(jīng)大量應(yīng)用于紡織品、汽車零部件、半導(dǎo)體、光伏組件等產(chǎn)品的缺陷檢測中,大大提升了制造業(yè)的質(zhì)檢效率。
但是,缺陷檢測在視覺需求中難度較大,不同于二維碼識別和OCR等算法容易去做成標(biāo)準(zhǔn)化的工具,穩(wěn)定性和精度需要依據(jù)具體的行業(yè)和具體的設(shè)備進行量化。凹凸、污點、瑕疵、劃痕、裂縫等都是比較常見的缺陷,如圖1所示。
▲圖1污漬、劃痕圖
目前,基于成本和算法穩(wěn)定性的考慮,機器視覺也依舊擁有廣泛的用處。筆者在近期的實際應(yīng)用中總結(jié)了幾種比較常用的缺陷檢測方法,下面對此進行詳細(xì)介紹。
01預(yù)處理
這一部分的操作可選性較多,主要有圖像增強、平滑濾波、銳化等。
1.1圖像增強
圖像增強主要是為了改善圖像質(zhì)量以及增強感興趣部分,使圖像變得更利于計算機處理,例如圖2,曝光不足的圖像需要增強處理。
▲圖2圖像增強處理前和后對比圖
常用算法是scale_image()和emphize()。
scale_image()的作用是增強圖像的色彩對比度,讓圖像中黑的地方更黑,亮的地方更亮,其原理計算公式為:
其中表示為灰度范圍。
emphasize()的作用是增強圖像的高頻區(qū)域(邊緣和拐角),使圖像看起來更清晰。原理是使用平均圖像進行濾波,根據(jù)獲得的灰度值(平均值)和原始灰度值計算得到灰度值,計算公式為:
其中,是對比度因子,則是對溢出灰度進行裁剪。
1.2圖像銳化
圖像銳化是為了補償圖像的輪廓,增強圖像的邊緣及灰度跳變的部分,使得圖像變得更加清晰。
常用算子是shock_filter(),原理是基于圖像的灰度值進行膨脹和侵蝕從兩側(cè)向邊緣傳輸,并滿足微分方程:
其中,圖像的灰度值,因此,離散化的方程在長度為Theta的迭代時間步長中求解,因此輸出圖像包含迭代Theta時的灰度值函數(shù)。
1.3圖像平滑
圖像平滑主要是為了減小噪聲,改善圖像質(zhì)量,有時還可以模糊圖像,方便目標(biāo)內(nèi)的小間斷進行連接。這一部分大家都比較熟悉,常用的是以下三種方法:
· 均值濾波是對輸入圖像的灰度值進行線性平滑,原理是將像素灰度值與其鄰域內(nèi)的像素灰度值相加取平均值;
· 中值濾波適合于去除一些孤立的點,保留邊緣信息,原理是以像素為中心,取一個指定形狀的鄰域作為濾波器,然后將區(qū)域內(nèi)的灰度值排序,取排序的中值替換像素中心;
· 高斯濾波是適合于去除高斯噪聲,原理是利用一個二維離散的高斯函數(shù)進行計算。
值得注意的是:應(yīng)該生成合適的濾波器,并注意頻域和空間域的轉(zhuǎn)換。
02Blob分析+特征
Blob分析是對圖像中相同像素的連通域進行分析,該連通域稱為Blob。因此,能夠通過對前景、背景分離后的二值圖像,進行連通域提取和標(biāo)記。標(biāo)記完成的每一個Blob都代表一個前景目標(biāo),然后就可以計算Blob的一些相關(guān)特征,從而定位到準(zhǔn)確的區(qū)域。相對于單純的角點,它的穩(wěn)定性要更好,抗噪聲能力也更強。
其步驟為:
特征篩選是根據(jù)計算出的Blob區(qū)域進行計算,然后根據(jù)選擇的特征,比如Area(面積)、Width(寬)、Circularity(圓度)、inner_radius(內(nèi)接半徑)、anisometry(長寬比)等等,最終得出需要的區(qū)域,如圖3所示,根據(jù)面積和圓度來篩選得出。
▲圖3-1Blob分析+特征的原圖
▲圖3-2Blob分析=特征的結(jié)果圖
03模板匹配+差分
▲圖4模板匹配+差分的檢測結(jié)果
04頻域+空間域
首先介紹一下頻域和空間域,空間域是指自變量是圖像中的像素點位置,而值域是針對這個位置所標(biāo)記的像素值進行一些操作和變換,類似于是像數(shù)坐標(biāo),表示是一種映射關(guān)系,最終得出一個輸出結(jié)果。而頻域的自變量是頻率,因變量是該頻率信號的幅度,通??臻g域經(jīng)過傅里葉變換后得到的是圖像頻譜。
在數(shù)字圖像處理中,我們知道光在計算機內(nèi)部進行采樣和量化,可用函數(shù)來表示這些數(shù)據(jù)。根據(jù)傅里葉變換將一個信號函數(shù)分解成多個三角函數(shù)的線性組合的思想,圖像是由多個正弦函數(shù)構(gòu)成,每個正弦函數(shù)都有一個自己的頻率。低頻特征的灰度變化不明顯,例如圖像整體輪廓,中頻特征的灰度變化居中,代表圖像邊緣、紋理等細(xì)節(jié),高頻特征的圖像灰度變化劇烈,如圖像邊緣和噪聲。
因此,頻域+空間域形式組合的缺陷檢測常常用于微小的瑕疵檢測,主要有兩種:
那么,先進行頻域部分的處理方法如下:
之后,空間域的處理分為三部分:
05幾何測量
幾何測量也是一種常見的工業(yè)應(yīng)用,基本思想是利用工件圖像中的參考物體來建立尺度關(guān)系,然后根據(jù)已知的尺度關(guān)系計算工件的實際尺寸,等式關(guān)系為:物體實際寬度/照片中物體的寬度=參考物實際寬度/照片中參考物的寬度,主要步驟是:
利用以上幾種或一種方法就能夠得到對缺陷的處理結(jié)果,里面的一些參數(shù)需要不斷去調(diào)試,從而找到最優(yōu)的參數(shù)。但是,集合到項目平臺時,算法的一些判定參數(shù)應(yīng)該開放出來,以便使用者挑選,從而判斷該圖到底是NG還是OK。最后,優(yōu)秀的算法功能應(yīng)該能夠做好足夠防護措施,避免程序閃退。