基于LabVIEW的零件分類系統

張乾 杜向陽 王飛

摘 ?要： 在機械加工過程中，每個機床對零件進行一道或幾道工序的加工。為了提高生產效率，降低工人的勞動強度，提高智能化生產程度，使用美國NI公司所開發的LabVIEW軟件為開發環境，用Vision Assistant和IMAQ Vision的圖像處理工具包，設計了一套可以識別不同工序下零件狀態的系統。首先對不同工序下零件的狀態進行收集，通過圖像預處理、分類器的配置、訓練及評價得到包含一個具有零件特征向量值及零件名稱的分類器，然后將訓練所得的分類器運用到零件分類的過程中。實驗證明了這種方法具有很高的精度，該方法可以用于生產過程中不同工序下零件的識別問題，應用該方法可以有效降低工人的勞動強度。

關鍵詞：機器視覺;零件分類;圖像預處理;LabVIEW

中圖分類號：TP391????文獻標識碼：ADOI：10.3969/j.issn.1003-6970.2019.09.038

本文著錄格式：張乾，杜向陽，王飛. 基于LabVIEW的零件分類系統[J]. 軟件，2019，40（9）：168-171

Parts Classification System Based on LabVIEW

ZHANG Qian，?DU Xiang-yang，?WNAG Fei

（School of mechanical and automotive engineering，Shanghai University of Engineering Science，Shanghai 201620，China）

【Abstract】： In the process of machining，?each machine tool processes parts in one or more process. In order to improve the production efficiency in the production process，?reduce the labor intensity of labor workers and improve the level of intelligence in the production process，?using the Vision Assistant and IMAQ Vision image processing kits in LabVIEW software developed by American NI company as the development platform which system can recognize the state of parts in different working procedures.?First we should collected the state of parts in different processes，through image preprocessing、classifier configure、training and evaluation，a classifier containing part feature vector value and part name is obtained，then applied the trained classifier in the process of parts classification.Experiments show that this method has high precision，?and it?can be used to identify parts in different processes in the production process，?and the application?of this method can effectively reduce the labor intensity of workers.

【Key words】： Machine vision;?Part classification;?Image preprocessing;?LabVIEW

0??引言

在工業生產過程中，機械臂起著十分重要的作用。傳統的機械臂只能夠按照編程的方式來對固定位置的貨物進行抓取和運輸^[1]。采用機器視覺對物體進行定位，將定位信息傳遞給機械臂，實現對機械臂的運動控制，使機械臂的智能化程度大大提 ??高^[2]，從而降低了工人的勞動強度。

隨著我國經濟的快速發展，我國的制造業規模在不斷地擴大^[3]，制造精度有了提高，產品數量有了顯著增加。在傳統的機械零件加工領域，由于每個機床都只能加工零件的一道工序或幾道工序，加工后的零件還需要進入到下一個環節進行更深一步的加工，在每一步的加工過程中，都會涉及到搬運的問題。為了減輕工人搬運工件到指定機床的工作強度^[4]，提高生產效率，促進機器視覺在生產生活中的應用^[5]，因此，設計了一套可以在生產線中進行零件分類的系統。該系統是基于LabVIEW為開發環境進行設計的，當檢測到零件屬于這個工步應該加工時的狀態時，利用機械臂將零件放入機床進行加工。實驗證明該系統可以準確的識別零件，可以應用到零件加工的過程中去。

1 ?系統簡介

基于LabVIEW的零件分類系統是由光源、工業相機、圖像采集卡、PLC、機械臂以及PC機等幾方面組成^[6]。系統的工作過程如下面描述所示：首先通過工業相機獲取圖像，并將所獲得的圖像經由圖像采集卡傳送給PC機進行灰度化和二值化處理，然后將采集到的相同的同一零件在同一工序下的圖片通過收集、訓練得到一個分類器，并將分類器的運算結果應用到零件的目標檢測過程中，通過機械臂將檢測到的零件放進機床進行加工。其需要分類的圖片如圖1所示，圖1左邊是初步加工的車輪的照片，圖1右邊是經過鏜孔后的車輪的照片。

1.1系統工作原理

當系統開始工作的時候，系統首先由工業相機將零件圖像轉換為電信號，通過數據采集卡將圖像的電信號轉化為數字信號來進行處理。通過計算機確定出要加工零件的具體位置，使用工業以太網將物體所在的位置信息發送給PLC，PLC通過發送控制指令從而驅動機械臂^[7]進行抓取零件的工作。其系統工作原理如圖2所示。

1.2軟件開發平臺

系統采用美國NI公司開發的LabVIEW為開發環境，通過視覺處理模塊對所要處理的圖片進行圖像的采集、處理、識別、定位。使用LabVIEW所帶的運動控制模塊發送指令給PLC，并通過PLC控制機械臂運動抓取所需加工的零件。

2 ?零件的檢測與識別

2.1圖像預處理

由于在進行圖像獲取的時候，圖像是由型號為MER-500-7UM-L的大恒工業相機獲取。在進行機加工的過程中，存在著被加工零件會把一些鐵屑帶出來或者傳送帶上有一些雜質，不便于后續零件分類器的特征值提取以及零件的識別。為了便于后續工作可以正常進行，利用被加工零件相對于鐵屑或者雜質的面積比較大，利用面積特征（IMAQ Particle Filter 3）去除掉那些鐵削或雜質，其處理前和處理后的效果圖如圖3所示。

2.2 圖像特征的提取

為了獲取圖像的特征，首先將經過處理好的圖像載入到Vision Assistant中的圖像處理環節中去。為了使圖像的對比度變的更好，使用NI Vision Assistant中的Grayscale模塊中的Lookup Table函數來改善圖像的對比度和亮度。其經過改善后的圖像效果如圖4所示。

為了獲得被加工零件的特征，拍攝了零件在不同位置時的形態，這樣可以更好的提取零件的特征。將經過預處理的圖像放在文件夾中，通過NI Vision Assistant中Acquire Image載入要處理的圖像。

在進行零件特征提取之前，需要對圖像進行進一步的預處理^[8]。為了便于框選出所需要處理的零件，LabVIEW中的Vision Assistant模塊提供了六種方式，分別是長方形、旋轉長方形、橢圓形、環形、多邊形及自定義選擇框。為了減少在識別過程中圖像的處理量，在進行圖像特征提取之前，需要對圖像進行二值化處理，通過實驗7種二值化方法比較得出用Clustering這種方法效果較好，圖片處理效果如圖5所示。

由于零件的亮度要高于背景的亮度，所以Look For中尋找的是Bright Objects。而Reject Objects Touching ROI的選中則是為了方便選中要訓練的物體。在對零件進行訓練的時候需要采集大量樣本，在預處理的右側有Add Sample（添加樣本）和Add Class（添加類），方便了樣本的收集，其訓練過程的預處理如圖6所示。

經過預處理的圖片，需要對其進行分類訓練，NI Vision Assistant為訓練提供了三種方法，分別是Nearest Neighbor（最鄰近法）、K-Nearest Neighbor（K-臨近法）^[9-10]、Minimum Mean Distance（最小平均距離）。在訓練過程中，經過比較可以得出K-Nearest Neighbor（K-臨近法）的效果比較好。同時，為了實時驗證其訓練效果的好壞，在Classi fication Results中可以看到訓練效果的好壞（訓練效果的最高得分是1000），而下面的Distances代表的是歐氏距離，在圖7的歐氏距離為0，說明其有較好的訓練效果。

為了方便在以后的訓練過程中可以利用所收 集圖片以及特征，將這些特征文件以.clf文件格式 保存。

2.3零件的識別與跟蹤

零件的識別是指系統可以根據零件的特征給零件貼上對應的標簽。而零件的跟蹤則是指在獲得零件的第一幀圖像的時候，其可以估計在后續過程中零件出現的位置，確定零件的運動方向，從而便于機械手臂抓取物體^[11]。

對于在柔性車間的生產流水線上，其傳送帶的速度都是恒定的。針對當機械臂把零件放在傳送帶上可能造成零件位置的移動，進行了一系列的驗證。通過實驗可知，即使零件的位置是不固定的，由于所采樣本的數量較多，零件的樣本特征被較好的提取出來了，該系統仍然能夠準確地識別出零件以及定位出零件的位置，右邊的數據在800分以上，說明其有良好的分類效果，其效果圖如圖8所示。

當檢測到物體的時候，計算機通過TCP通訊將信息傳送給PLC，然后PLC通過控制機械臂從而完成零件的抓取和放置。

3 ?實驗結果

以兩個工步臨近的零件作為實驗對象，在保障所選用的機械臂、計算機、PLC以及傳送帶的材質和零件的材質不變的情況下，實驗結果如表1所示。

在實驗過程中，可以計算出其綜合準確率達到87.5%。但是在其中出現一些誤差，研究發現實驗出現誤差的原因是實驗過程中相機的魯棒性較差，容易受到環境的影響。

參考文獻

• 張明建， 曾偉明. 基于機器視覺的小型電機自動裝配研究[J]. 制造技術與機床， 2017（06）： 124-128.
• 雷巧利. 基于LabVIEW的機器視覺測量技術及應用[D]. 西安電子科技大學， 2011.
• 張偉. 轉型期我國制造業企業規模及結構優化研究[D]. 西南財經大學， 2006.
• 姚暢. 基于機器視覺的紐扣分揀設備設計[D]. 安徽理工大學， 2018.
• 唐向陽， 張勇， 李江有， 黃崗， 楊松， 關宏. 機器視覺關鍵技術的現狀及應用展望[J]. 昆明理工大學學報（理工版）， 2004（02）： 36-39.
• 張星， 吳麗明， 曹勁. 碼垛機器人視覺系統設計[J]. 吉首大學學報（自然科學版）， 2018， 39（01）： 40-43.
• 李慧霞， 高梓豪. 室內智能移動機器人規則物體識別與抓取[J]. 軟件， 2016， 37（02）： 89-92+97.
• 賈利紅. 基于DSP的高速軌道扣件檢測算法研究及系統設計[D]. 電子科技大學， 2014.
• 陳園， 侯贊， 劉軍華， 雷超陽. 基于改進K-Means聚類醫學圖像配準[J]. 軟件， 2018， 39（01）： 75-82.
• 楊婷婷， 王雪梅. 基于百度地圖的改進的K-means算法研究[J]. 軟件， 2016， 37（01）： 76-80.
• 張文勇， 陳樂柱. 基于LabVIEW機器視覺的餐具分揀系統[J]. 計算機科學， 2018， 45（S1）： 595-597+605.