基于圖像處理的包裝缺陷檢測方法綜述

文/韓明芮 楊璽

1.引言

隨著社會和科技的進步，商品的衛(wèi)生和質(zhì)量安全成為了人們?nèi)找骊P(guān)注的對象，由此引出的產(chǎn)品包裝問題也逐漸成為一種大趨勢，因此很多企業(yè)除了關(guān)注商品本身，還要關(guān)心商品的包裝質(zhì)量。傳統(tǒng)的人工檢測方法因存在效率低、成本高、勞動強度大這些缺點，已經(jīng)遠(yuǎn)遠(yuǎn)不能滿足現(xiàn)代化的生產(chǎn)、工作需求，而包裝缺陷檢測技術(shù)可提高產(chǎn)品包裝的技術(shù)水平和自動化程度，保證產(chǎn)品質(zhì)量，降低成本，降低工人的勞動強度，因此用機器視覺技術(shù)代替人力勞動來檢測包裝的缺陷成為必然。一個完整的包裝缺陷檢測系統(tǒng)主要分成圖像處理算法、系統(tǒng)的硬件及軟件等部分，系統(tǒng)的圖像處理算法是系統(tǒng)關(guān)鍵，一方面對檢測精度與速度有要求，另一方面要根據(jù)被檢測對象的圖像特點確定最優(yōu)圖像識別方案。

本文首先根據(jù)材料的不同，梳理出包裝缺陷的分類，然后從包裝缺陷的檢測流程——圖像預(yù)處理、缺陷特征提取、缺陷定位計算等過程對各類缺陷檢測算法進行梳理比較，最后分析得出針對不同的材料所適合的不同的圖像處理檢測算法。

2.包裝缺陷分類

根據(jù)包裝的材料不同，包裝的缺陷也不盡相同。本文通過分析總結(jié)，發(fā)現(xiàn)具有代表性的包裝分類及缺陷主要為以下三種：

（1）泡沫塑料包裝。主要用于生鮮水果的包裝。因其具有材質(zhì)輕巧、高回彈、絕熱保溫、抗震介電、抗壓耐侵蝕等優(yōu)越功能，在修建、航空、化工、農(nóng)業(yè)等領(lǐng)域得到廣泛應(yīng)用。但是多年來薄膜塑料包裝的合格率低成為困擾生產(chǎn)的一大難題。主要缺陷有三類：表面銹漬；發(fā)泡掉粒、組織疏松；局部收縮[1]。

（2）鋁塑泡罩包裝。主要用在藥品的包裝上。因其具有攜帶方便、獨立密封、取藥衛(wèi)生等優(yōu)點而得到廣泛應(yīng)用。但是存在漏裝、破損、漏粉、空囊和夾雜異物等缺陷[2]。

（3）矩形紙質(zhì)包裝。多用于食品包裝與煙卷包裝上，因其成本低、可降解、防靜電、可實現(xiàn)物流包裝與產(chǎn)品包裝的結(jié)合等優(yōu)點而得到廣泛應(yīng)用，主要缺點表現(xiàn)在不防水、易破損等幾方面

[3]。

3.缺陷檢測的研究和分析

目前國內(nèi)外針對上述包裝缺陷檢測的方法實施了大量的研究，并且仍在不斷發(fā)展中，但是整體流程大致相同。首先通過閾值分割和噪聲濾除等方法，將采集的圖像分離、過濾，得到預(yù)處理后的圖像[4]；其次是對檢測圖像進行邊緣檢測，最后是對處理好的圖像進行缺陷特征的提取和識別。

3.1 圖像預(yù)處理

圖像預(yù)處理的目的就是需要對圖片進行增強，也就是去除圖像中妨礙計算機識別判斷的障礙，如干擾源、噪聲等，預(yù)處理的好壞直接關(guān)系到后期算法的實現(xiàn)是否高效[5]。具體步驟一般為：

（1）分割背景。分割背景是指從眾多各具屬性的圖像信息中提取出要分析處理的目標(biāo)，使其成為目標(biāo)前景。分割結(jié)果的優(yōu)劣將直接影響到邊緣提取、缺陷識別等后續(xù)技術(shù)。圖像分割算法主要分為以下幾大類：基于閾值的分割方法、基于聚類的分割方法、基于區(qū)域的分割方法以及基于特定理論的分割方法[6]。其中，基于閾值的分割方法主要有直方圖閾值法和最大類間方差法；基于聚類的分割方法主要有K-均值聚類和模糊C均值聚類；基于區(qū)域的分割方法主要有區(qū)域生長與區(qū)域合并和分水嶺分割法；基于特定理論的分割方法主要有人工神經(jīng)網(wǎng)絡(luò)、遺傳算法和基于顏色模型的方法。

目前在包裝缺陷檢測領(lǐng)域的圖像分割中主要用到的算法有Otsu閾值分割算法[7]以及基于此算法的改進算法。

文獻[4]利用Otsu閾值分割算法將背景與前景圖像分離。它用兩個評價函數(shù)即最大類間方差和最小類內(nèi)方差作為基礎(chǔ)，得到間類方差最大閾值，就是最優(yōu)分割閾值，所以是一種輕簡、應(yīng)用廣泛的自動閾值計算方法。

文獻[8]針對以上介紹的Otsu閾值分割算法進行改進，該改進算法先分別計算目標(biāo)類與背景類的類內(nèi)絕對平均差，將其相加即為總體類內(nèi)絕對差之和，再計算目標(biāo)類和背景類類間平均離差，然后作差得到最終的閾值識別函數(shù)。此方法在分割效果的邊緣細(xì)節(jié)的處理上，得到了具體地改善[8]。

Otsu算法的計算簡單，在一定條件下不受圖像亮度對比度的影響，因此Otsu閾值分割算法適合用在鋁塑泡罩包裝的檢測當(dāng)中，有很多學(xué)者基于此算法進行改進繼續(xù)應(yīng)用在鋁塑泡罩包裝的檢測當(dāng)中，從而改善包裝前景與背景的分割效果和分割效率。

(2)噪聲過濾。受圖像表面特征的影響，經(jīng)過分割后的圖像結(jié)果中有時會存在一些隨機出現(xiàn)的區(qū)域噪聲。在包裝的缺陷檢測中往往通過形態(tài)學(xué)開運算的方法，將這些噪聲有效過濾，使正確的缺陷輪廓得以保留。膨脹和腐蝕是形態(tài)學(xué)中的兩種基礎(chǔ)操作，開運算是經(jīng)過先腐蝕后膨脹的組合過程來實現(xiàn)的[9]。文獻[9]就是用的此方法對分割后的圖像進行有效過濾，達到了很好的效果。

3.2 邊緣檢測

邊緣包含了圖像大量信息，是圖像判別的重要依據(jù)。因此，邊緣檢測算法一直是圖像處理工作者研究的熱點。總體來說，圖像邊緣檢測算法分為兩大類方法：微分算子法和曲面擬合法。微分算子法通過一階或二階導(dǎo)數(shù)計算來找出圖像灰度的突變部位(邊緣)，一般通過模板卷積實現(xiàn)，常用算子有Roberts、Sobel、Prewitt、Laplacian、Canny等[10]。曲面擬合算法是用一個平面或曲面去逼近由圖像灰度構(gòu)成的面積元，然后用這個平面或曲面的梯度代替像素點的梯度，從而實現(xiàn)邊緣檢測，常用方法有一次平面擬合和二次曲面擬合。微分算子法的優(yōu)點是簡單、快速，但抑制噪聲的能力差；曲面擬合法能較好地抑制散點噪聲，但因為要進行擬合運算而算法較復(fù)雜，所以實時性差[11]。

文獻[3]以矩形紙質(zhì)包裝為例，用Robert算子進行邊緣檢測，robert算子實現(xiàn)了目標(biāo)的精確瞄準(zhǔn)，但在判斷方面容易受到噪聲干擾，從而出現(xiàn)失誤。所以是一種優(yōu)點明顯、缺點也明顯的方法。文獻[12]以矩形紙質(zhì)包裝為例，采用Sobel算子進行邊緣檢測[12]，Sobel邊緣檢測算子在以像素點為中心的3×3領(lǐng)域內(nèi)做灰度加權(quán)運算，根據(jù)該點是否處于極值狀態(tài)進行邊緣檢測。它不但可以產(chǎn)生較好的邊緣效果，而且對噪聲具有一定的平滑作用，減小了對噪聲的敏感度。其卷積模板為：

文獻[13]的作者和文獻[14]的作者均采用Canny算法[13-14]提取圖像邊緣，其基本思想為：首先選擇一定的高斯濾波器對圖像進行平滑濾波，然后采用非極值抑制技術(shù)對平滑后的圖像進行處理，得到最后的邊緣圖像。它在進行邊緣檢測時的關(guān)鍵在于選取適當(dāng)?shù)母咚篂V波器領(lǐng)域大小和適當(dāng)?shù)拈撝怠?/p>

文獻[15]的作者以矩形小包裝為例，用快速Hough變換的算法提取邊緣，精確地識別的小包裝的矩形邊緣[15]。

相較于鋁塑泡罩包裝，矩形紙質(zhì)包裝有尺寸較大，輸入的圖像有較大噪聲的特點，因而對矩形紙質(zhì)包裝的缺陷檢測、邊緣檢測的處理效果對后續(xù)缺陷的提取和識別有很大的影響，所以相較于其他材質(zhì)的包裝，紙質(zhì)包裝的缺陷檢測中對這一部分的研究最多。通過對比幾種經(jīng)典的邊緣檢測算法可以看出，Canny算子能夠削弱噪聲的影響，同時在邊緣的檢測精度上也有不錯的表現(xiàn)，所以最適合應(yīng)用于矩形紙質(zhì)包裝的缺陷檢測。

3.3 缺陷的提取和識別

經(jīng)過邊緣檢測后的圖像輪廓已經(jīng)能比較清晰地呈現(xiàn)出來，為缺陷的特征提取及識別提供了條件。根據(jù)圖像的特征不同，提取的方法可以概括為：顏色特征提取方法、紋理特征提取方法、代數(shù)特征提取方法和變換特征提取方法[17]。

文獻[9]用圖像差方法實現(xiàn)矩形紙質(zhì)的缺陷提取。該文章通過實驗對矩形包裝中污點的識別效果好。圖像差分是一種圖像的代數(shù)特征提取方法，即通過計算兩幅圖像所對應(yīng)像素點的差來表現(xiàn)出兩幅圖像的差異。由于該方法原理簡單，計算效率高，因而其在圖像分割上有非常廣泛的應(yīng)用，尤其是對于在線檢測等實時性強的圖像處理過程，更是有良好的檢測效果。

文獻[15]利用基于分類二叉樹方式對矩形紙質(zhì)缺陷進行多類SVM識別。這樣對于n個缺陷，就要構(gòu)建n-1個SVM分類器。該文章確定的矩形紙質(zhì)缺陷共有6種分別是包裝破損、缺蓋、封條脫落、露白、反包、包裝錯位。

文獻[17]的作者用HIS顏色系統(tǒng)進行特征提取，然后采用改進的閔可夫斯基距離法進行缺陷檢測。實驗表明對缺粒、大面積缺陷的檢測效果較好。文獻[18]的作者則采用快速魯棒特征SURF提取算法進行缺陷的提取，用SVM分類器相對鋁塑泡罩包裝的缺陷進行分類[18]，實驗證明對于缺粒、漏粉、破損和夾雜異物這四種缺陷有良好的檢測效果。

通過分析對比幾種經(jīng)典的缺陷提取和識別的方法可以看出，對于缺陷的分類都選用SVM分類器進行分類，說明對于包裝的缺陷檢測，重點難點在于前期的圖像處理算法的選取。對于鋁塑泡罩包裝的檢測因其缺陷種類復(fù)雜，需采用多種特征提取相結(jié)合的方法對缺陷特征進行提取。

4.結(jié)語

通過分析對比現(xiàn)有的包裝缺陷檢測算法，本文發(fā)現(xiàn)對矩形紙質(zhì)包裝和鋁塑泡罩包裝的缺陷檢測研究居多，對桶裝、塑膠材料包裝、泡沫塑料包裝等等的關(guān)注度并不高。

針對不同材質(zhì)的包裝特點，缺陷檢測的流程也不盡相同。對于矩形紙質(zhì)包裝的檢測，因其紙箱體積較大，表面噪聲較大等特點，針對邊緣檢測環(huán)節(jié)的研究尤為重要。而對于鋁塑泡罩包裝，因其缺陷種類較多，紋理復(fù)雜等特點，針對缺陷提取和識別的環(huán)節(jié)尤為重要。由于包裝工藝和流程的情況比較復(fù)雜，研究人員所用的算法較為固定，靈活性較差，在具體使用過程中容易出現(xiàn)檢測不全面的問題。

雖然國內(nèi)在低精度、小系統(tǒng)的檢測方面的成果已然比較多比較豐富，但是在高速、大面積、高精度、高效率領(lǐng)域的檢測由于長期依賴進口，并且開發(fā)時間較國外要晚，所以仍處于摸索成長階段。從上述分析可以看出，今后包裝缺陷的識別方向是：識別包裝的類型更豐富，運用范圍更廣，識別速度更快，準(zhǔn)確率更高。基于以上的方法總結(jié)，可以看到包裝的缺陷檢測將在產(chǎn)品包裝領(lǐng)域表現(xiàn)出越來越驚人的能力，同時這也將會提升行業(yè)競爭力的又一新指標(biāo)，關(guān)于包裝檢測的研究還有很大的發(fā)展空間。

項目：北京市智能物流系統(tǒng)協(xié)同中心、智能物流系統(tǒng)北京市重點實驗室（BZ0211）和2018人才培養(yǎng)質(zhì)量建設(shè)—專業(yè)建設(shè)—北京高校專業(yè)群建設(shè)（市級）（PXM2018_014214_000005_0032526 6/67/68/69_FCG）資助。