機(jī)器視覺(jué)是人工智能正在快速發(fā)展的一個(gè)分支。簡(jiǎn)單說(shuō)來(lái)，機(jī)器視覺(jué)就是用機(jī)器代替人眼來(lái)做測(cè)量和判斷。機(jī)器視覺(jué)系統(tǒng)是通過(guò)機(jī)器視覺(jué)產(chǎn)品（即圖像攝取裝置，分CMOS和CCD兩種）將被攝取目標(biāo)轉(zhuǎn)換成圖像信號(hào)，傳送給專用的圖像處理系統(tǒng)，得到被攝目標(biāo)的形態(tài)信息，根據(jù)像素分布和亮度、顏色等信息，轉(zhuǎn)變成數(shù)字化信號(hào);圖像系統(tǒng)對(duì)這些信號(hào)進(jìn)行各種運(yùn)算來(lái)抽取目標(biāo)的特征，進(jìn)而根據(jù)判別的結(jié)果來(lái)控制現(xiàn)場(chǎng)的設(shè)備動(dòng)作。

發(fā)展

如今，中國(guó)正成為世界機(jī)器視覺(jué)發(fā)展最活躍的地區(qū)之一，應(yīng)用范圍涵蓋了工業(yè)、農(nóng)業(yè)、醫(yī)藥、軍事、航天、氣象、天文、公安、交通、安全、科研等國(guó)民經(jīng)濟(jì)的各個(gè)行業(yè)。其重要原因是中國(guó)已經(jīng)成為全球制造業(yè)的加工中心，高要求的零部件加工及其相應(yīng)的先進(jìn)生產(chǎn)線，使許多具有國(guó)際先進(jìn)水平的機(jī)器視覺(jué)系統(tǒng)和應(yīng)用經(jīng)驗(yàn)也進(jìn)入了中國(guó)。

經(jīng)歷過(guò)長(zhǎng)期的蟄伏，2010年中國(guó)機(jī)器視覺(jué)市場(chǎng)迎來(lái)了爆發(fā)式增長(zhǎng)。數(shù)據(jù)顯示當(dāng)年，中國(guó)機(jī)器視覺(jué)市場(chǎng)規(guī)模達(dá)到8.3億元，同比增長(zhǎng)48.2%，其中智能相機(jī)、軟件、光源和板卡的增長(zhǎng)幅度都達(dá)到了50%，工業(yè)相機(jī)和鏡頭也保持了40%以上的增幅，皆為2007年以來(lái)的最高水平。

工作原理

機(jī)器視覺(jué)檢測(cè)系統(tǒng)采用CCD照相機(jī)將被檢測(cè)的目標(biāo)轉(zhuǎn)換成圖像信號(hào)，傳送給專用的圖像處理系統(tǒng)，根據(jù)像素分布和亮度、顏色等信息，轉(zhuǎn)變成數(shù)字化信號(hào)，圖像處理系統(tǒng)對(duì)這些信號(hào)進(jìn)行各種運(yùn)算來(lái)抽取目標(biāo)的特征，如面積、數(shù)量、位置、長(zhǎng)度，再根據(jù)預(yù)設(shè)的允許度和其他條件輸出結(jié)果，包括尺寸、角度、個(gè)數(shù)、合格 / 不合格、有 / 無(wú)等，實(shí)現(xiàn)自動(dòng)識(shí)別功能。

概述

機(jī)器視覺(jué)系統(tǒng)的特點(diǎn)是提高生產(chǎn)的柔性和自動(dòng)化程度。在一些不適合于人工作業(yè)的危險(xiǎn)工作環(huán)境或人工視覺(jué)難以滿足要求的場(chǎng)合，常用機(jī)器視覺(jué)來(lái)替代人工視覺(jué)；同時(shí)在大批量工業(yè)生產(chǎn)過(guò)程中，用人工視覺(jué)檢查產(chǎn)品質(zhì)量效率低且精度不高，用機(jī)器視覺(jué)檢測(cè)方法可以大大提高生產(chǎn)效率和生產(chǎn)的自動(dòng)化程度。而且機(jī)器視覺(jué)易于實(shí)現(xiàn)信息集成，是實(shí)現(xiàn)計(jì)算機(jī)集成制造的基礎(chǔ)技術(shù)。

典型結(jié)構(gòu)

一個(gè)典型的機(jī)器視覺(jué)系統(tǒng)包括以下五大塊：

照明

照明是影響機(jī)器視覺(jué)系統(tǒng)輸入的重要因素，它直接影響輸入數(shù)據(jù)的質(zhì)量和應(yīng)用效果。由于沒(méi)有通用的機(jī)器視覺(jué)照明設(shè)備，所以針對(duì)每個(gè)特定的應(yīng)用實(shí)例，要選擇相應(yīng)的照明裝置，以達(dá)到最佳效果。光源可分為可見光和不可見光。常用的幾種可見光源是白熾燈、日光燈、水銀燈和鈉光燈。可見光的缺點(diǎn)是光能不能保持穩(wěn)定。如何使光能在一定的程度上保持穩(wěn)定，是實(shí)用化過(guò)程中急需要解決的問(wèn)題。另一方面，環(huán)境光有可能影響圖像的質(zhì)量，所以可采用加防護(hù)屏的方法來(lái)減少環(huán)境光的影響。照明系統(tǒng)按其照射方法可分為：背向照明、前向照明、結(jié)構(gòu)光和頻閃光照明等。其中，背向照明是被測(cè)物放在光源和攝像機(jī)之間，它的優(yōu)點(diǎn)是能獲得高對(duì)比度的圖像。前向照明是光源和攝像機(jī)位于被測(cè)物的同側(cè)，這種方式便于安裝。結(jié)構(gòu)光照明是將光柵或線光源等投射到被測(cè)物上，根據(jù)它們產(chǎn)生的畸變，解調(diào)出被測(cè)物的三維信息。頻閃光照明是將高頻率的光脈沖照射到物體上，攝像機(jī)拍攝要求與光源同步。

鏡頭

FOV（Field of Vision）=所需分辨率*亞象素*相機(jī)尺寸/PRTM（零件測(cè)量公差比）

鏡頭選擇應(yīng)注意：

①焦距②目標(biāo)高度 ③影像高度 ④放大倍數(shù) ⑤影像至目標(biāo)的距離 ⑥中心點(diǎn) /節(jié)點(diǎn)⑦畸變

視覺(jué)檢測(cè)中如何確定鏡頭的焦距

為特定的應(yīng)用場(chǎng)合選擇合適的工業(yè)鏡頭時(shí)必須考慮以下因素：

· 視野 - 被成像區(qū)域的大小。

· 工作距離 （WD） - 攝像機(jī)鏡頭與被觀察物體或區(qū)域之間的距離。

· CCD - 攝像機(jī)成像傳感器裝置的尺寸。

· 這些因素必須采取一致的方式對(duì)待。如果在測(cè)量物體的寬度，則需要使用水平方向的 CCD 規(guī)格，等等。如果以英寸為單位進(jìn)行測(cè)量，則以英尺進(jìn)行計(jì)算，最后再轉(zhuǎn)換為毫米。

參考如下例子：有一臺(tái) 1/3” C 型安裝的 CCD 攝像機(jī)（水平方向?yàn)?4.8 毫米）。物體到鏡頭前部的距離為 12”（305 毫米）。視野或物體的尺寸為2.5”（64 毫米）。換算系數(shù)為 1” = 25.4 毫米（經(jīng)過(guò)圓整）。

FL = 4.8 毫米 x 305 毫米 / 64 毫米

FL = 1464 毫米 / 64 毫米

FL = 按 23 毫米鏡頭的要求

FL = 0.19” x 12” / 2.5”

FL = 2.28” / 2.5”

FL = 0.912” x 25.4 毫米/inch

FL = 按 23 毫米鏡頭的要求

注：勿將工作距離與物體到像的距離混淆。工作距離是從工業(yè)鏡頭前部到被觀察物體之間的距離。而物體到像的距離是 CCD 傳感器到物體之間的距離。計(jì)算要求的工業(yè)鏡頭焦距時(shí)，必須使用工作距離

高速相機(jī)

按照不同標(biāo)準(zhǔn)可分為：標(biāo)準(zhǔn)分辨率數(shù)字相機(jī)和模擬相機(jī)等 。要根據(jù)不同的實(shí)際應(yīng)用場(chǎng)合選不同的相機(jī)和高分辨率相機(jī)：

按成像色彩劃分，可分為彩色相機(jī)和黑白相機(jī)；

按分辨率劃分，像素?cái)?shù)在38萬(wàn)以下的為普通型，像素?cái)?shù)在38萬(wàn)以上的高分辨率型；

按光敏面尺寸大小劃分，可分為1/4、1/3、1/2、1英寸相機(jī)；

按掃描方式劃分，可分為行掃描相機(jī)（線陣相機(jī)）和面掃描相機(jī)（面陣相機(jī)）兩種方式；（面掃描相機(jī)又可分為隔行掃描相機(jī)和逐行掃描相機(jī)）；

按同步方式劃分，可分為普通相機(jī)（內(nèi)同步）和具有外同步功能的相機(jī)等。

圖像采集卡

圖像采集卡只是完整的機(jī)器視覺(jué)系統(tǒng)的一個(gè)部件，但是 它扮演一個(gè)非常重要的角色。圖像采集卡直接決定了攝像頭的接口：黑白、彩色、模擬、數(shù)字等等。

比較典型的是PCI或AGP兼容的捕獲卡，可以將圖像迅速地傳送到計(jì)算機(jī)存儲(chǔ)器進(jìn)行處理。有些采集卡有內(nèi)置的多路開關(guān)。例如，可以連接8個(gè)不同的攝像機(jī)，然后告訴采集卡采用那一個(gè)相機(jī)抓拍到的信息。有些采集卡有內(nèi)置的數(shù)字輸入以觸發(fā)采集卡進(jìn)行捕捉，當(dāng)采集卡抓拍圖像時(shí)數(shù)字輸出口就觸發(fā)閘門。

視覺(jué)處理器

視覺(jué)處理器集采集卡與處理器于一體。以往計(jì)算機(jī)速度較慢時(shí)，采用視覺(jué)處理器加快視覺(jué)處理任務(wù)。采集卡傳輸圖像到存儲(chǔ)器，進(jìn)而計(jì)算分析。當(dāng)前主流配置的PLC，且配置較高，視覺(jué)處理器已經(jīng)幾乎退出市場(chǎng)。

應(yīng)用案例

在布匹的生產(chǎn)過(guò)程中，像布匹質(zhì)量檢測(cè)這種有高度重復(fù)性和智能性的工作只能靠人工檢測(cè)來(lái)完成，在現(xiàn)代化流水線后面常常可看到很多的檢測(cè)工人來(lái)執(zhí)行這道工序，給企業(yè)增加巨大的人工成本和管理成本的同時(shí)，卻仍然不能保證100 %的檢驗(yàn)合格率（即“零缺陷”）。對(duì)布匹質(zhì)量的檢測(cè)是重復(fù)性勞動(dòng)，容易出錯(cuò)且效率低。

流水線進(jìn)行自動(dòng)化的改造，使布匹生產(chǎn)流水線變成快速、實(shí)時(shí)、準(zhǔn)確、高效的流水線。在流水線上，所有布匹的顏色、及數(shù)量都要進(jìn)行自動(dòng)確認(rèn)（以下簡(jiǎn)稱“布匹檢測(cè)”）。采用機(jī)器視覺(jué)的自動(dòng)識(shí)別技術(shù)完成以前由人工來(lái)完成的工作。在大批量的布匹檢測(cè)中，用人工檢查產(chǎn)品質(zhì)量效率低且精度不高，用機(jī)器視覺(jué)檢測(cè)方法可以大大提高生產(chǎn)效率和生產(chǎn)的自動(dòng)化程度。

特征提取辨識(shí)

一般布匹檢測(cè)（自動(dòng)識(shí)別）先利用高清晰度、高速攝像鏡頭拍攝標(biāo)準(zhǔn)圖像，在此基礎(chǔ)上設(shè)定一定標(biāo)準(zhǔn)；然后拍攝被檢測(cè)的圖像，再將兩者進(jìn)行對(duì)比。但是在布匹質(zhì)量檢測(cè)工程中要復(fù)雜一些：

1． 圖像的內(nèi)容不是單一的圖像，每塊被測(cè)區(qū)域存在的雜質(zhì)的數(shù)量、大小、顏色、位置不一定一致。

2． 雜質(zhì)的形狀難以事先確定。

3． 由于布匹快速運(yùn)動(dòng)對(duì)光線產(chǎn)生反射，圖像中可能會(huì)存在大量的噪聲。

4． 在流水線上，對(duì)布匹進(jìn)行檢測(cè)，有實(shí)時(shí)性的要求。

由于上述原因，圖像識(shí)別處理時(shí)應(yīng)采取相應(yīng)的算法，提取雜質(zhì)的特征，進(jìn)行模式識(shí)別，實(shí)現(xiàn)智能分析。

Color檢測(cè)

一般而言，從彩色CCD相機(jī)中獲取的圖像都是RGB圖像。也就是說(shuō)每一個(gè)像素都由紅（R）綠（G）藍(lán)（B）三個(gè)成分組成，來(lái)表示RGB色彩空間中的一個(gè)點(diǎn)。問(wèn)題在于這些色差不同于人眼的感覺(jué)。即使很小的噪聲也會(huì)改變顏色空間中的位置。所以無(wú)論我們?nèi)搜鄹杏X(jué)有多么的近似，在顏色空間中也不盡相同。基于上述原因，我們需要將RGB像素轉(zhuǎn)換成為另一種顏色空間CIELAB。目的就是使我們?nèi)搜鄣母杏X(jué)盡可能的與顏色空間中的色差相近。

Blob檢測(cè)

根據(jù)上面得到的處理圖像，根據(jù)需求，在純色背景下檢測(cè)雜質(zhì)色斑，并且要計(jì)算出色斑的面積，以確定是否在檢測(cè)范圍之內(nèi)。因此圖像處理軟件要具有分離目標(biāo)，檢測(cè)目標(biāo)，并且計(jì)算出其面積的功能。

Blob分析（Blob Analysis）是對(duì)圖像中相同像素的連通域進(jìn)行分析，該連通域稱為Blob。經(jīng)二值化（Binary Thresholding）處理后的圖像中色斑可認(rèn)為是blob。Blob分析工具可以從背景中分離出目標(biāo)，并可計(jì)算出目標(biāo)的數(shù)量、位置、形狀、方向和大小，還可以提供相關(guān)斑點(diǎn)間的拓?fù)浣Y(jié)構(gòu)。在處理過(guò)程中不是采用單個(gè)的像素逐一分析，而是對(duì)圖形的行進(jìn)行操作。圖像的每一行都用游程長(zhǎng)度編碼（RLE）來(lái)表示相鄰的目標(biāo)范圍。這種算法與基于象素的算法相比，大大提高處理速度。

結(jié)果處理和控制

應(yīng)用程序把返回的結(jié)果存入數(shù)據(jù)庫(kù)或用戶指定的位置，并根據(jù)結(jié)果控制機(jī)械部分做相應(yīng)的運(yùn)動(dòng)。

根據(jù)識(shí)別的結(jié)果，存入數(shù)據(jù)庫(kù)進(jìn)行信息管理。以后可以隨時(shí)對(duì)信息進(jìn)行檢索查詢，管理者可以獲知某段時(shí)間內(nèi)流水線的忙閑，為下一步的工作作出安排；可以獲知內(nèi)布匹的質(zhì)量情況等等。

應(yīng)用現(xiàn)狀

在國(guó)外，機(jī)器視覺(jué)的應(yīng)用普及主要體現(xiàn)在半導(dǎo)體及電子行業(yè)，其中大概40%-50%都集中在半導(dǎo)體行業(yè)。具體如PCB印刷電路：各類生產(chǎn)印刷電路板組裝技術(shù)、設(shè)備；單、雙面、多層線路板，覆銅板及所需的材料及輔料；輔助設(shè)施以及耗材、油墨、藥水藥劑、配件；電子封裝技術(shù)與設(shè)備；絲網(wǎng)印刷設(shè)備及絲網(wǎng)周邊材料等。SMT表面貼裝：SMT工藝與設(shè)備、焊接設(shè)備、測(cè)試儀器、返修設(shè)備及各種輔助工具及配件、SMT材料、貼片劑、膠粘劑、焊劑、焊料及防氧化油、焊膏、清洗劑等；再流焊機(jī)、波峰焊機(jī)及自動(dòng)化生產(chǎn)線設(shè)備。電子生產(chǎn)加工設(shè)備：電子元件制造設(shè)備、半導(dǎo)體及集成電路制造設(shè)備、元器件成型設(shè)備、電子工模具。機(jī)器視覺(jué)系統(tǒng)還在質(zhì)量檢測(cè)的各個(gè)方面已經(jīng)得到了廣泛的應(yīng)用，并且其產(chǎn)品在應(yīng)用中占據(jù)著舉足輕重的地位。除此之外，機(jī)器視覺(jué)還用于其他各個(gè)領(lǐng)域。

而在中國(guó)，視覺(jué)技術(shù)的應(yīng)用開始于90年代，因?yàn)樾袠I(yè)本身就屬于新興的領(lǐng)域，再加之機(jī)器視覺(jué)產(chǎn)品技術(shù)的普及不夠，導(dǎo)致以上各行業(yè)的應(yīng)用幾乎空白。目前國(guó)內(nèi)機(jī)器視覺(jué)大多為國(guó)外品牌。國(guó)內(nèi)大多機(jī)器視覺(jué)公司基本上是靠代理國(guó)外各種機(jī)器視覺(jué)品牌起家，隨著機(jī)器視覺(jué)的不斷應(yīng)用，公司規(guī)模慢慢做大，技術(shù)上已經(jīng)逐漸成熟。

隨著經(jīng)濟(jì)水平的提高，3D機(jī)器視覺(jué)也開始進(jìn)入人們的視野。3D機(jī)器視覺(jué)大多用于水果和蔬菜、木材、化妝品、烘焙食品、電子組件和醫(yī)藥產(chǎn)品的評(píng)級(jí)。它可以提高合格產(chǎn)品的生產(chǎn)能力，在生產(chǎn)過(guò)程的早期就報(bào)廢劣質(zhì)產(chǎn)品，從而減少了浪費(fèi)節(jié)約成本。這種功能非常適合用于高度、形狀、數(shù)量甚至色彩等產(chǎn)品屬性的成像。

在行業(yè)應(yīng)用方面，主要有制藥、包裝、電子、汽車制造、半導(dǎo)體、紡織、煙草、交通、物流等行業(yè)，用機(jī)器視覺(jué)技術(shù)取代人工，可以提供生產(chǎn)效率和產(chǎn)品質(zhì)量。例如在物流行業(yè)，可以使用機(jī)器視覺(jué)技術(shù)進(jìn)行快遞的分揀分類，不會(huì)出現(xiàn)大多快遞公司人工進(jìn)行分揀，減少物品的損壞率，可以提高分揀效率，減少人工勞動(dòng)。