基于Mediatek Genio350 的IoT之人臉偵測方案

聯(lián)發(fā)科技MediaTek IoT Genio350 是用于連接多媒體系統的高度集成解決方案。目前 IoT Yocto 支持大部分硬件功能，而其它僅由聯(lián)發(fā)科專(zhuān)有軟件支持。 IoT Yocto 支持的硬件功能請參考下面的功能框圖。

支持的功能塊:

IoT Yocto 支持以下 Genio350 設備功能：

· Quad-core Arm? Cortex?-A53 64-bit processor

· Arm Mali?-G52 MC1 3D Graphics Accelerator (GPU)

· AI Processor Unit (APU) Cadence? Tensilica? VP6 processor

· Dual MIPI? Camera Serial Interface (CSI)

· Dual display support with MIPI DSI and DPI

· Rich audio interfaces to support various microphones and speakers configurations

· 10/100 Ethernet MAC with RMII

· Support Wi-Fi connectivity through external Cypress module and MT7633 module

聯(lián)發(fā)科技 MediaTek  Genio350是高度集成的邊緣人工智能平臺采用超高效的 14 奈米工藝構建，結合了專(zhuān)用的 APU（人工智能處理器）和 DSP，以實(shí)現視覺(jué)和語(yǔ)音邊緣人工智能，在常見(jiàn)應用中具有顯著(zhù)提高的性能和能效。

支持具有觸摸界面和豐富應用程序的高清顯示器，使其成為智能設備、智能訪(fǎng)問(wèn)、零售和商業(yè)環(huán)境中的信息站、自動(dòng)售貨機或 POS 等公共接口，或工業(yè)和醫療環(huán)境中的集線(xiàn)器的理想平臺。

Arm Mali G52 GPU 提供了顯著(zhù)更高的性能，并且通過(guò) OpenGL ES、OpenCL 和 Vulkan 實(shí)現的通用 API 兼容性，簡(jiǎn)化了開(kāi)發(fā)機會(huì )。 高達 13MP 的高清攝像頭，加上使用 HEVC 以全高清 @ 60fps 的快速視頻編碼，支持需要詳細和可靠的圖像和視頻捕獲功能的下一代應用程序。一般處理由快速 2GHz 四核 Arm Cortex-53 CPU 提供。 提供的更廣泛的內存和閃存選項中進(jìn)行選擇，從而更自由地滿(mǎn)足性能要求。

本次演練是搭配 GenesysLogic GL3004 360° Camera 做演示

1. 先確認 Camera 是掛載于哪一個(gè) Video 節點(diǎn)，

輸入 ls -l /sys/class/video4linux/

2. 本次OpenCV語(yǔ)法是設置成自行帶參數，來(lái)選擇所要提取的 Video 節點(diǎn)

video_capture = cv2.VideoCapture(int(sys.argv[1]))

3. 執行預先寫(xiě)好的臉部偵測的語(yǔ)法

輸入 python3 ./demo-opencl.py 3

演示結果如下

?場(chǎng)景應用圖

?展示板照片

?方案方塊圖

?核心技術(shù)優(yōu)勢

聯(lián)發(fā)科技 MediaTek Genio350 具有集成 APU 和 DSP 的主流 AIoT 平臺，專(zhuān)為需要視覺(jué)和語(yǔ)音邊緣處理的邊緣應用而設計。例如面部、物體、手勢、動(dòng)作識別、LPR、語(yǔ)音激活和速度識別、聲音隔離、生物技術(shù)和生物測量測量等應用。

?方案規格

· 應用處理器   

Arm Cortex-A53, Quad Core 64-bit, 運行時(shí)脈高達 2GHz

· 圖形處理器   

Arm Mali-G52 MC1

· 人工智能處理器   

MediaTek APU 1.0

· 記憶體   

LPDDR4/LPDDR4X 時(shí)脈高達 3200Mbps, LPDDR3, DDR3/L 時(shí)脈高達 1866Mbps

· 影音多媒體規格   

Voice Assistant Services   

HiFi4 DSP   

ISP 13MP Camera   

1920x1200 *2 支持雙顯   

Video Encoding 支持 H.264, H.265 / HEVC, 1080p@60p(HEVC, H264)   

Video Decoding 支持 H.264, H.265 / HEVC, MPEG-1/2/4, VP-9

· 無(wú)線(xiàn)連接   

Wi-Fi 5 (b/g/n/ac)，2.4GHz/5GHz   

Bluetooth 5.0

· 儲存裝置   

eMMC 5.1, SLC/MLC/TLC, Micro SD card.

· 周邊界面:   

Audio Amplifier, DPI, Ethernet, GPIO, I2C, LVDS, HDMI, MIPI-DSI, MIPI-CSI, PDM-in, SDIO, TDM, USB2.0 OTG and Host.