視覺(jué)AI網(wǎng)關(guān)解決方案

視覺(jué)AI也稱(chēng)為計算機視覺(jué)，旨在訓練計算機復制人類(lèi)視覺(jué)系統，讓數字設備（如人臉檢測器、QR碼掃描儀）能夠像人類(lèi)一樣識別和處理圖像、視頻中的物體。視覺(jué)AI可以主動(dòng)識別不安全因素，實(shí)現AI智能值守，節約人力成本，滿(mǎn)足不同應用場(chǎng)景的安全管理需求。

瑞薩電子推出視覺(jué)AI網(wǎng)關(guān)解決方案，基于A(yíng)I對象檢測與識別平臺，使用多個(gè)攝像頭收集數據并獲得有效的無(wú)線(xiàn)數據傳輸。方案采用了具有豐富外設功能的RZ/V2M AI-MPU和優(yōu)化的電源IC、VersaClock時(shí)鐘發(fā)生器，以及用于Wi-Fi、藍牙和LTE的通信模塊，不僅具有靈活的連接選項和優(yōu)化的電源系統，而且有助于加速強大AI網(wǎng)關(guān)設備的開(kāi)發(fā)。該解決方案具有高性能和低功耗的特性，同時(shí)，集成的邊緣AI功能提高了此方案的網(wǎng)關(guān)應用價(jià)值。

器件詳解

視覺(jué)AI網(wǎng)關(guān)解決方案使用了內置視覺(jué)AI加速器的、能夠處理多個(gè)攝像頭圖像數據的全新RZ/V2MA器件，進(jìn)一步擴充了RZ/V系列微處理器（MPU）產(chǎn)品線(xiàn)，并為視覺(jué)AI應用帶來(lái)了更高水平的高精度圖像識別能力。

這款器件集成了兩個(gè)64位Arm? Cortex? -A53內核，能夠1GHz最高工作頻率實(shí)現高計算性能；專(zhuān)有的低功耗DRP-AI（動(dòng)態(tài)可重構處理器）加速器可以1TOPS/W（每秒百萬(wàn)次操作/瓦）級的性能處理圖像數據。

RZ/V2MA器件配備以太網(wǎng)、USB和PCI Express等高速接口，可以從多個(gè)外部攝像頭輸入圖像。除了DRP-AI加速器外，RZ/V2MA還包含一個(gè)OpenCV加速器，可以同時(shí)執行基于規則的圖像處理。這些功能有助于A(yíng)I網(wǎng)關(guān)、視頻服務(wù)器、安全門(mén)、POS終端和機械臂等機器視覺(jué)產(chǎn)品獲得高精度圖像識別能力。該器件的目標應用主要是AI功能網(wǎng)關(guān)和AI視頻服務(wù)器等。

系統框圖

為了幫助用戶(hù)快速上手，新款RZ/V2MA提供一整套開(kāi)發(fā)工具輔助視覺(jué)AI系統設計。新器件的DRP-AI Translator可以將AI模型轉換為DRP-AI可執行文件，而新增的基于開(kāi)源深度學(xué)習編譯器Apache TVM技術(shù)的DRP-AI TVM編譯器可讓DRP-AI加速器與CPU一起工作，使DRP-AI能夠轉換和生成比以往更多的AI模型?，F在瑞薩已對ONNX和PyTorch AI模型的支持，計劃未來(lái)支持Tensorflow。

方案優(yōu)勢

●   通過(guò)解碼視頻流（H.264或H.265）并以最小切換開(kāi)銷(xiāo)處理多個(gè)AI推理，從而實(shí)現快速視覺(jué)AI處理

●   支持帶以太網(wǎng)協(xié)議的高速視覺(jué)網(wǎng)關(guān)功能：100/1000Mbps和快速USB連接：USB 3.1第1代（5Gbps）

●   支持PCI Express 2.0（第2代/2通道）的外設擴展

●   RZ/V2MA內置電源時(shí)序控制功能可使電源設計更簡(jiǎn)單且具有更高的可靠性

●   集成多種通信設備、高性能Wi-Fi模塊、緊湊且高性能的低功耗藍牙（LE）模塊和LTE Cat-M1蜂窩物聯(lián)網(wǎng)模塊

●   為合作伙伴提供評估板RZ/V2MA評估板

作為瑞薩電子“成功產(chǎn)品組合”的一部分，上述解決方案將相互兼容的瑞薩器件完美結合，實(shí)現無(wú)縫協(xié)作，幫助用戶(hù)縮短設計流程，加快產(chǎn)品上市。與此同時(shí)，這款視覺(jué)AI網(wǎng)關(guān)解決方案也將為電商個(gè)性化圖像搜索、3D模型構建、OCR掃描、人臉識別、圖像探測器等創(chuàng )新用例賦能。