視覺(jué)處理平臺VPU發(fā)展趨勢

摘要：隨著(zhù)物聯(lián)網(wǎng)智能化需求的出現，視覺(jué)感知成為一種至關(guān)重要的融合技術(shù)，其核心處理平臺也在發(fā)生著(zhù)深刻的變革。視覺(jué)處理平臺(VPU)的推出促進(jìn)視覺(jué)處理技術(shù)的創(chuàng )新發(fā)展，Movidius公司以獨特的專(zhuān)用視覺(jué)處理VPU芯片，致力于拓展面向廣闊視覺(jué)感知領(lǐng)域的應用市場(chǎng)，展現出的高集成、高性能以及小型化的特色，代表著(zhù)VPU未來(lái)的發(fā)展方向。

視覺(jué)處理推進(jìn)處理器平臺發(fā)展

　　視覺(jué)處理(Vision Processing)技術(shù)是一個(gè)既傳統而又新鮮，需要融入各種創(chuàng )新因素的綜合影像處理技術(shù)。視覺(jué)處理依賴(lài)于通用處理器平臺的性能，最初基于計算機軟件算法實(shí)施處理，之后借助高速數字信號處理器(DSP)完成嵌入式實(shí)時(shí)應用。隨著(zhù)DSP性能大幅提高和浮點(diǎn)運算的出現，視覺(jué)實(shí)時(shí)處理技術(shù)和應用有了長(cháng)足的進(jìn)步。但是，視覺(jué)處理需要很多特別處理，若純粹采用通用高速處理芯片和算法軟件還是難以適應不斷提高的要求，因此需要采取更多更新且有針對性的處理手段。

　　隨著(zhù)多種高速高性能處理器技術(shù)的發(fā)展，視覺(jué)處理有了更多的可選平臺?？删幊踢壿嬯嚵?FPGA)基于硬件可編程方式進(jìn)行處理;嵌入式應用處理器(AP)可集成多種專(zhuān)用協(xié)處理器輔助處理;具有專(zhuān)用IP的單片系統(SoC)則可以直接將硬件處理單元植入系統平臺。相比之下，通用DSP平臺的針對性有所局限，需要通過(guò)多核集成，或多片陣列來(lái)提高性能。然而，在視覺(jué)處理新的市場(chǎng)環(huán)境下，對性能、功耗、價(jià)格和尺寸的更高需求對處理器提出了更加嚴格的要求，因此，視覺(jué)處理平臺VPU(Vision Processing Unit，簡(jiǎn)稱(chēng)VPU)成為一種全新的核心引擎。由于VPU中集成了多種專(zhuān)門(mén)進(jìn)行視覺(jué)處理的硬件結構，因此在處理上可以有很大的超越，其綜合性能可大幅度提升到每瓦性能超過(guò)600GFLOPS(浮點(diǎn)運算單位)，是其它處理器的二至三倍，而價(jià)格僅為幾分之一。

視覺(jué)處理器平臺的特色及應用

　　VPU針對視覺(jué)處理應用而設計，在性能、功耗和功能性方面都有特別的強化，使之更貼近于實(shí)際的應用需求，其設計兼顧到多種用途，專(zhuān)門(mén)為視覺(jué)處理進(jìn)行硬件系統的優(yōu)化。其實(shí)VPU也是一個(gè)SoC，內部集成有多個(gè)主控RISC的CPU、許多硬件加速器單元和矢量處理器陣列，專(zhuān)門(mén)為視覺(jué)海量像素設計的高性能影像信號處理器(ISP)，以及豐富的高速外圍接口。在保證強大性能和功能的前提下，VPU采用更先進(jìn)的集成電路工藝，大大縮小了芯片的尺寸，并結合有效的技術(shù)手段，降低各個(gè)運算單元的功耗。

　　當前行業(yè)內處于領(lǐng)先地位的VPU平臺是Movidius公司推出的小型化、低功耗架構，本人近期在北京與該公司高級副總裁Farshid Sabet先生有過(guò)交流，通過(guò)正在進(jìn)行的產(chǎn)品路演(Roadshow)，對于 Myriad 系列VPU平臺有了直觀(guān)的感受。這是一款可以用于3D感知及掃描建模的芯片，可以支持室內導航、360度全景視頻處理等機器視覺(jué)應用，其視覺(jué)處理性能超出其它處理器平臺十倍，功耗則低一個(gè)數量級，而尺寸和價(jià)格都僅為五分之一，如圖1所示為Myriad芯片和硬件參考設計。這款VPU的出現，無(wú)疑向新興的智能相機市場(chǎng)注入了活力。

　　Myriad 的第二代VPU采用全新的體系架構，提升性能達到二十倍，增強視覺(jué)處理能力使之成為新的VPU標桿，同時(shí)支持六個(gè)60幀全高清視頻信號輸入，而功耗在1.2瓦以?xún)?，芯片采?8納米工藝制造。新平臺的突出表現在于實(shí)現虛擬現實(shí)、室內定位和物體識別的應用，是機器人視覺(jué)應用的理想選擇。通過(guò)該芯片超小型的尺寸，可以應用到智能工業(yè)相機中和各種智能終端，也可用在紐扣式智能相機上，或在可穿戴智能相機上擴展使用。

　　VPU為視覺(jué)應用提供了一個(gè)強大的平臺，但更多的開(kāi)發(fā)工作是在軟件上，基于VPU的視覺(jué)應用系統開(kāi)發(fā)可以充分利用片上的硬件單元及相關(guān)的軟件資源。如圖2所示為包含工具、支持庫及框架的完整VPU軟件開(kāi)發(fā)套件(SDK)，以往視頻處理器中涉及視覺(jué)處理的單元得到了增強，如核心視覺(jué)處理單元、線(xiàn)性代數運算矩陣，還有前端影像處理單元，不僅包含ISP處理，還有ISP仿真，并支持相機調試工具。圖形處理能力的提升表現在支持圖形檢測API，為便于多核異構芯片開(kāi)發(fā)而支持OpenCL。由于在視覺(jué)應用中，與高敏感度和超高像素的傳感器的接駁尤為重要，因此專(zhuān)門(mén)有傳感器支持接口單元。另外VPU所特有的工具單元也提供視覺(jué)調試的全面支持。VPU中的主控制器、BSP、HDK等通用單元以開(kāi)放為主，便于客戶(hù)進(jìn)行更多應用開(kāi)發(fā)。

視覺(jué)處理器的市場(chǎng)前景展望

　　作為一個(gè)行業(yè)的平臺領(lǐng)先者需要有足夠的積累和不懈的進(jìn)取，當然還要有強大的財力和物力的支持，VPU平臺的創(chuàng )建和發(fā)展也絕不輕松，對此Sabet先生暢談了Movidius的發(fā)展歷程。這確實(shí)是一家頗具傳奇色彩的創(chuàng )新型公司，十年來(lái)只專(zhuān)注做一件事，就是創(chuàng )建和完善VPU平臺。我驚奇地得知Movidius最早的成立地竟然是愛(ài)爾蘭的都柏林，而后又在羅馬尼亞，再到美國的硅谷建立研發(fā)團隊。公司創(chuàng )始人都堪稱(chēng)半導體和處理器行業(yè)的元老，公司并設立技術(shù)指導委員會(huì )，確立公司的技術(shù)路線(xiàn)和VPU平臺發(fā)展總體規劃。在Movidius核心管理層中，我聽(tīng)到了不少熟悉的名字，其中就有TI及其他知名公司資深的高管和專(zhuān)家。公司員工目前雖未過(guò)百人，但研發(fā)人員就占了九成，其中五分之一負責VPU芯片硬件設計，而其余從事VPU上軟件構建，由此可見(jiàn)VPU應用在很大程度上依賴(lài)于軟件。

　　Movidius選擇VPU作為公司的立基之時(shí)，物聯(lián)網(wǎng)尚在起步，其智能化必將帶來(lái)視覺(jué)處理的蓬勃發(fā)展。盡管研發(fā)處理器平臺必然投入巨大、周期漫長(cháng)，投資產(chǎn)生回報更要有耐性，但創(chuàng )新才是硬道理，在VPU未為大牌公司所關(guān)注，也就沒(méi)有被壟斷的風(fēng)險，Movidius抓住了這個(gè)機遇，潛心數年打造出名為Myriad的系列VPU平臺。據權威機構預測，全球物聯(lián)網(wǎng)設備數量將達到500億之多， 若十分之一有視覺(jué)需求已極為可觀(guān)，屆時(shí)新的視覺(jué)處理器之爭將展開(kāi)。Movidius未雨綢繆，已經(jīng)開(kāi)始了新興市場(chǎng)的布局。如圖3所示為VPU面向物聯(lián)網(wǎng)的視覺(jué)感知應用方向，其中無(wú)人機的應用將包含傳感和防撞，以及盤(pán)旋定位和像素映射;VR和VA相關(guān)的手勢和姿態(tài)、人眼跟蹤、3D觸控;服務(wù)機器人的3D映像及自動(dòng)導向;安防監控的前端實(shí)時(shí)視頻智能分析和自動(dòng)識別。在此基礎上可不斷擴展視覺(jué)相關(guān)的應用。

　　Movidius在視覺(jué)處理平臺發(fā)展中的優(yōu)勢在業(yè)界引人矚目，使得Google Project Tango選擇后作為合作伙伴，并將第一代Myriad VPU引入其3D視覺(jué)手機和平板電腦產(chǎn)品，而Myriad二代未來(lái)將為智能機器人、可穿戴設備等嵌入式物聯(lián)網(wǎng)設備提供視覺(jué)感知支持。Movidius慎重選擇具有發(fā)展潛力的合作伙伴，并全力支持他們使用其芯片以獲得市場(chǎng)成功。中國是Movidius極為看重的市場(chǎng)，業(yè)已投入資源，以VPU支持中國企業(yè)在視覺(jué)感知領(lǐng)域的創(chuàng )新和拓展。期待VPU能在中國新興產(chǎn)業(yè)的發(fā)展中獲得更加廣闊的市場(chǎng)空間，更好地服務(wù)于中國制造2025的宏偉戰略規劃。

參考文獻：

　　[1]王瑩,葉雷.物聯(lián)網(wǎng)趨勢下的安防監控發(fā)展,電子產(chǎn)品世界,2015(6)

　　[2]迎九.GEO向消費和工業(yè)市場(chǎng)推出圖像處理引擎,電子產(chǎn)品世界,2014(11)

　　[3]李星宇.飛思卡爾i.MX6應用處理器助力機器視覺(jué),電子產(chǎn)品世界,2014(11)

本文來(lái)源于中國科技期刊《電子產(chǎn)品世界》2016年第1期第25頁(yè)，歡迎您寫(xiě)論文時(shí)引用，并注明出處。