1、    基于5g的工業機器視覺發展趨勢與政策建議    張暉 張欣 胡琳1 引言機器視覺可以借助光或電磁波的輻射，通過使用含cmos（互補金屬氧化物半導體）或ccd（電荷耦合器件）的圖像攝取裝置來探測及解析來自目標物體的反射光而生成圖像，將該圖像傳送至處理單元進行數據處理與分析，從而感知并判別出目標物體和環境的特征，根據判別結果來控制現場設備的動作以執行實用的功能。機器視覺綜合應用了光學、機械、電子和計算機軟硬件等方面的前沿技術，涉及到計算機、圖像處理、模式識別、人工智能、信號處理和光機電一體化等多個領域。目前機器視覺已廣泛應用于食品飲料、化妝品、建材和

2、化工、金屬加工、電子制造、包裝印刷和汽車制造等眾多生產性行業和服務性行業。隨著第五代移動通信技術（5g）的不斷發展，在5g網絡的加持下，基于ai的機器視覺系統正在催生更大的應用市場，它可以把數據發送到云端，能夠實現更加復雜的運算并且實時返回結果。如今通過在生產線或巡檢機器人上部署工業相機，采集圖像視頻上傳到云端，結合5g大帶寬、低時延的特性以及機器視覺技術進行智能化檢測與分析已成為不少企業的首選。2 機器視覺技術發展歷程機器視覺的發展史可追溯至20世紀60年代末，基本上每經歷十年機器視覺技術與應用都會產生一次深刻變革和飛速發展。國外機器視覺的發展歷程如圖1所示。19691979年：在成像傳感器

3、誕生的驅動下，機器視覺進入產業萌芽期。此時受限于半導體工藝成熟度和成本等因素制約，機器視覺只在極高端的科學研究和航天、軍工項目中有少量初級應用，尚未形成完整的概念。1969年美國貝爾實驗室成功研制出ccd傳感器，可以直接把圖像轉換為數字信號并存儲到電腦中參與計算和分析，從而奠定了機器視覺技術誕生的基石。ccd的發明可視為機器視覺發展的起點，它使得“為機器植入眼睛”成為可能。2009年，ccd的兩位發明人維拉·博伊爾（willard s. boyle）和喬治·史密斯（george e. smith）獲得了諾貝爾物理學獎。19801989年：在應用的驅動下，機器視覺進入起步期。

4、機器視覺的概念首次在產業界被提及，但未形成精準的定義。在此期間產生了首批機器視覺企業，如加拿大的dalsa、美國的柯達和仙童、英國的e2v等ccd傳感器與工業相機公司，以及美國康耐視等具有代表性的軟件算法公司。19901999年：在應用的進一步驅動下，機器視覺產業進入成長波動期。1990年半導體產業的發展使機器視覺定位與檢測成為替代人工必不可少的技術，機器視覺產業首次得到蓬勃發展的機遇。在美國和日本等發達國家，機器視覺技術開始得到實際應用，但由于成像技術和算法算力的發展尚不成熟，不能全面滿足行業應用需求，無法全面推廣。由于技術門檻和系統成本過高，雖然出現一些專門從事機器視覺技術的新企業，但規模

5、普遍較小。20002009年：在應用和算力的共同驅動下，機器視覺進入產業發展早期。在此期間，fpd平板顯示制造、 pcb檢測和汽車制造等行業陸續對機器視覺技術應用表現出強烈需求。同時，cpu算力提升使機器視覺系統在pc-base條件下可以處理一般性的問題。產業需求和技術進步共同促進了機器視覺產業的快速發展與繁榮。我國機器視覺產業也在這個階段加入全球陣營。20102020年：ai算法的發展推動機器視覺進入發展中期。2016年，人工智能算法alphago打敗人類頂尖棋手李世石，開啟了人工智能發展的新紀元。隨后，人工智能賦能的機器視覺開始在智能制造應用中加快普及，產業得到了空前發展。隨著應用的暴發式

6、擴展，預計2021年后機器視覺將迎來高速發展期。3 機器視覺的概念與技術架構機器視覺系統是集光學、機械、電子、計算和軟件等技術為一體的工業應用系統，它通過對電磁輻射的時空模式進行探測及感知，可以自動獲取一幅或多幅目標物體圖像，對所獲取圖像的各種特征量進行處理、分析和測量，根據測量結果做出定性分析和定量解釋，從而得到有關目標物體的某種認識并作出相應決策，執行可直接創造經濟價值或社會價值的功能活動。機器視覺系統一般具有物體定位、特征檢測、缺陷判斷、目標識別、計數和運動跟蹤等功能。機器視覺的技術架構如圖2所示。如圖所示，機器視覺覆蓋成像、信號分析與處理以及決策及執行等關鍵環節。圖像信息獲取對應著成像

7、環節，是機器視覺系統的最前端，主要包含光源、鏡頭、相機和圖像采集卡、控制器和相關配件，其中圖像采集卡主要是針對模擬相機可以實現模擬信號向數字信號的轉換。圖像分析處理對應著信號分析與處理環節，主要由信息處理平臺和機器視覺算法庫組成。其中信息處理平臺主要有基于個人計算機（pc）及其通用中央處理器（cpu）進行視覺信息處理、使用專用的圖形處理器（gpu）或嵌入式神經網絡處理器（npu）進行視覺信息處理、使用專有的嵌入式系統進行視覺信息處理（也稱嵌入式視覺）等不同形式。機器視覺算法庫1主要包括目前在工業機器視覺應用較多的halcon、visionpro和nivision等機器視覺算法庫，也包括open

8、cv這樣的開源算法庫。智能決策執行對應著決策及執行環節，由ai能力平臺和現場應用軟件組成。其中ai能力平臺中的模式識別是基于人的經驗來賦予機器智能；機器學習是由機器通過統計概率對大量數據進行分析從而總結規律獲得智能（如線性回歸、邏輯回歸、神經網絡和svm等）；深度學習可以看作機器學習更深層的分支，具有超多層的神經網絡，能夠學到更多特征獲得更高智能。現場應用軟件主要有面向檢測、定位、識別和測量等四類應用場景的機器視覺軟件。機器視覺已在電子制造、半導體、軌道交通、印刷包裝、鋰電池、卷煙、光伏以及汽車制造等典型行業得到廣泛應用。作為多學科的交叉應用，機器視覺系統涉及精密光學、精密機械、電子器件、光電

9、半導體、5g移動通信、深度學習以及ar/vr等支撐技術。在實際應用市場中，機器視覺主要表現為成像器件、工業智能相機、視覺機器人、可配置視覺系統、視覺應用專機和視覺檢測測量產線等不同產品形態。機器視覺系統尚屬新技術新產品，具有蓬勃旺盛的市場需求，也是推動工業轉型升級的重要手段，但是目前從概念到產品未形成統一的系列標準規范，標準體系的構建將進一步規范市場，引導機器視覺產業健康快速發展2。4 機器視覺系統的典型特性形象地說，機器視覺的本質是為機器植入“眼睛”和“大腦”。為機器植入眼睛，代表著機器視覺利用環境和物體對光的反射來獲取及感知信息；為機器植入大腦，意味著機器視覺需要對信息進行智能處理與分析，

10、并應用分析得到的結果來執行相應的活動3。機器視覺系統具有以下幾個典型特性：1. 使用精準成像擴展人眼的視覺范圍和能力機器視覺系統具有較寬的光譜響應范圍，例如使用人眼不可見的紅外光進行測量，可以擴展人眼的視覺范圍。系統可以長期穩定工作，承擔大量的測量、分析和識別任務，而人眼由于易疲勞難以對同一對象進行長時間不間斷觀察。2. 通過人機交互和圖像采集實現人機物互聯機器視覺不止通過光學圖像采集將“物”和“機”有效結合，還通過用戶界面將“人”和“機”進行了有機整合，從而實現人-機-物的互聯。機器視覺是實現工業互聯網的重要手段之一。3. 采集圖像信息能夠全面滿足實際應用需求在實際部署過程中，機器視覺系統往

11、往需要定制化設計多模態多視角的專用圖像采集部件，以使得采集到的圖像信息能直接精確反映行業具體應用需求的深層次特征。另外除了實時處理之外，還需要將海量的圖像數據進行存儲以供事后查詢和數據分析挖掘。4. 以需求適配為目的做到成本可控性能均衡機器視覺系統是面向市場應用以直接創造經濟和社會價值為目的，而不盲目追求高性能。在此前提下系統設計應做到兩個適配和最小化：一是成像與精度適配，即在達到成像精度的前提下成像器件成本最小化；二是算法與算力適配，即在算法滿足實際需求的基礎上算力供給最小化。5. 應用場景多有實時性和近實時性指標要求機器視覺系統主要應用于工業領域。作為工業生產過程中的關鍵環節，在很多應用場

12、景中（比如工件在線檢測和機器人視覺定位等），系統要達到實際可用必須滿足實時性或者近實時性的指標要求。6. 主要應用于工業環境兼具可靠性與易用性機器視覺系統多應用于工業環境，機器需要7×24 h運轉，要求具備高可靠性；機器視覺使用場景屬于非接觸測量，對于測量和被測雙方都不產生任何損傷，可以提高系統可靠性；此外，系統使用者包括不同知識層次的管理者和工人，需要具備極高的易用性以方便他們迅速掌握和使用。5 基于5g的工業機器視覺技術應用5g具有高速率、低時延和大連接等特點，對于普通消費者而言最直觀的感受就是下載電影更快、打游戲不卡等等網絡性能改善，但數據傳輸速度的提升只是5g的一個方面，它將

13、賦能千行百業，其海量應用場景更值得探索與期待。全球研究機構marketsand markets最新研究報告顯示：2020全球機器視覺市場規模為107億美元，到2025年，該市場將增長至127億美元4。在工業應用領域，5g網絡提供了便捷、高速、高帶寬、低延遲和高可靠性的數據傳輸通道，對于機器視覺來說這些特性尤為重要。通常，高清圖像傳感器采集的數據量都比較大，例如機器視覺每次采集一幀畫面的數據量可能達到144 mb（12bit/pixel）。如果沒有高速、高可靠性的網絡，這樣的大數據量就只能在終端直接處理，對于機器視覺系統的信息處理和交互能力擴展將帶來極大的削弱和限制。面向工業機器視覺應用，中國電

14、信和中興通訊已經聯合提出了基于5g移動邊緣計算（mec）的分布式通用機器視覺平臺。通過邊緣云計算能力，簡化現場的工控機方案和設備檢測、識別方法，加快視覺算法的優化，實現工業智能化。通過云邊端部署，將機器視覺系統的能力按需部署在mec平臺上，借助中國電信提供的具備專業運維的網絡和計算環境、差異化的路由策略以及按需編排下沉部署等服務，實現高效穩定的5g mec+機器視覺方案。5g mec平臺使內容與服務更靠近用戶，滿足低時延、本地化需求，可以根據業務本地化需求，按需動態下沉網絡能力到邊緣網關，在靠近移動用戶的網絡邊緣提供it和云計算的能力。通過云邊業務相關能力的協同，形成中心云+mec的整體云服務

15、能力。工業機器視覺應用對于5g通信環境有著自身的特殊需要。由于工業企業的數據安全性要求和工業實時性操作的超低時延要求，面向普通消費者的5g商用基站和終端并不完全適用于工業機器視覺系統。這種情況下必須要為企業部署5g專網和mec平臺，就近為企業提供可靠的超低時延通信服務。工業機器視覺未來的廣泛應用也將以5g行業專網作為主要的無線網絡支撐。除此以外，在4g時代，網絡能力主要用于消費者視頻數據的下載以下行為主，更多的數據流向是由企業端自上而下發送給個人端。到了5g時代，通信網絡應用范圍大增，上行數據流量大增，對上行的網絡寬帶提出了更高要求，但是如何使上行接收到足夠的信號，成為擺在方案提供商面前的難題

16、。比如實際應用場景中工業相機每幀圖片數據量約幾十至百兆，單場景300 mbps、500 mbps、1 024 mbps等上行傳輸速率需求非常普遍，導致傳統的機器視覺解決方案對5g的上行速度提出了巨大挑戰。針對于工業機器視覺等這種不同于一般5g高速下行低速上行的商用特點的高速上行的特殊網絡使用需求，華為同中國電信共同合作研發了5g超級上行技術，并已寫入3gpp國際標準。該技術能夠大幅提高5g網絡上行能力，并降低時延，從而降低終端門檻，極大促進5g應用的產業化。所謂5g超級上行，就是通過上下行通道的時分雙工（tdd）與頻分雙工（fdd）協同，高頻和低頻互補、時域和頻域聚合，充分發揮3.5g大帶寬能

17、力和fdd頻段低、穿透能力強的特點，既提升了上行帶寬，又提升了上行覆蓋。換句話說，5g超級上行是一種fdd/tdd時頻域復用聚合提升上行覆蓋和容量的技術。終端以時分復用方式使用兩個上行載波，同一時刻僅在一個載波上發送。通過超級上行技術，終端可利用低頻fdd和高頻tdd的上行資源，實現網絡覆蓋、容量性能的提升，以及更低的空口時延，全面滿足5g時代應用對于更大上行流量和更低時延的需求。它是移動通信首個時域和頻域結合的技術，是移動通信又一個里程碑式的創新。5g超級上行好比在tdd的車道上加開了一條fdd上行車道，這樣一來上行車輛不用分時段限行，全時段暢通無阻。5g行業專網的部署和5g超級上行技術的突

18、破，在工業機器視覺應用領域，真正解決了工業機器視覺未來發展的網絡瓶頸問題，實現了完整的基于5g的工業機器視覺系統解決方案，體現出5g是解決工業互聯網重要手段的重要意義。6 我國機器視覺發展的問題與建議6.1 我國機器視覺發展面臨的問題我國機器視覺產業起步于20世紀90年代末，經過20多年的摸索實踐已經得到了一定的應用，但由于起步較晚，較美、英、日以及德等國家仍有較大差距。他們占據生產系統基礎端，掌握住了價值鏈當中價值含量高的部分，從源頭和價值的投放端掌握其競爭力的核心優勢。近年來，國際貿易競爭日益激烈，對我國機器視覺發展帶來了前所未有的挑戰。從限制政策角度來看，一是國外品牌對華出口許可審核的條

19、例逐漸增多，周期逐漸拉長；二是終端用戶黑名單上的中國企業也越來越多。例如，美國商務部將把包括海康威視、大華科技、依圖科技等在內的多家中國機構和公司列入美國出口管制“實體名單”，限制其零部件的購買。從產品形態角度來看，美、英、德和日等制造強國的技術產品目前仍牢牢占據生產要素上游。在機器視覺產業中，實現智能感知的視覺系統所包含的高端相機、鏡頭、光源、成像芯片、嵌入式處理芯片和視覺應用軟件平臺，依舊以其為主導。近年來，西方國家已對華禁運性能極其高端的成像器件和在科研及國防領域獲得廣泛應用的成像器件，國外品牌芯片基本切斷對華出口，對我國的機器視覺產業化帶來了嚴重阻礙。國際局勢變化給我國機器視覺發展帶來

20、了巨大的挑戰，同時也暴露出我國機器視覺產業發展過程中關鍵技術國產化率低等突出問題，主要體現在基礎層產品與技術自主化薄弱，尚缺少較強的核心技術產品與之抗衡，國產化替代的需求亟待重視與解決。6.2 推進我國機器視覺發展的政策建議1. 加強機器視覺核心關鍵技術支持與突破突破機器視覺基礎理論及關鍵核心技術瓶頸，以先進成像技術與算法為雙輪驅動核心，以數據和硬件為基礎，以5g通信網絡為支撐，以大規模知識庫的構建與應用為導向，實施重大關鍵技術攻關工程，制定機器視覺共性技術開發路線圖，重點提升先進成像、ai智能算法、工業云邊端通信等多種成像與智能信息處理技術，形成開放兼容、穩定成熟的技術體系。同時，通過梳理和

21、細化標準化需求，以技術突破帶動核心技術標準突破。2. 加大機器視覺科研創新投入力度，加快體系構建基于機器視覺的基礎理論、基礎技術、應用，作為人工智能戰略的重要基礎，制定機器視覺三年、五年以及十年行動計劃，將機器視覺作為新增的重大課題專項方向，導入至國家自然科學基金、國家重點研發計劃和制造業高質量發展專項等大專項中。同時，服務于縱向課題專項，在研究方向中設置更大比重的與機器視覺關聯的任務。3. 加強機器視覺頂層設計與統籌推進機制建設政府對機器視覺領域創新要素如人才、資金、技術和信息等的支持，應直接擴大供給，以此推動提升科技活動、產業創新能力；通過金融稅費、法規監管、政策規劃等政策影響并優化機器視覺領域的產業環境因素，以此間接促進科技、產業的可持續發展。確定機器視覺未來