RK3568核心板ROM-5880助力360°環(huán)視系統破除車(chē)輛盲區

導讀

隨著(zhù)科技的不斷發(fā)展，可視化智能化已經(jīng)成為現代車(chē)輛的未來(lái)發(fā)展方向。360環(huán)視作為智慧車(chē)輛的重要功能，已經(jīng)在乘用車(chē)輛大面積使用。近期隨著(zhù)社會(huì )對商用車(chē)輛，特種車(chē)輛可靠性，安全性要求的提高，相關(guān)企業(yè)也開(kāi)始了360環(huán)視功能的開(kāi)發(fā)。

01  車(chē)輛360環(huán)視應用需求

相比于普通車(chē)輛，特種車(chē)輛車(chē)體高，車(chē)身長(cháng)，容易產(chǎn)生視覺(jué)盲區引發(fā)交通事故。某特種車(chē)輛制造商為提高特種車(chē)輛的駕駛安全性，在原出色的機械性能基礎上，引入新技術(shù)來(lái)實(shí)現產(chǎn)品智能環(huán)視。結合其對特種車(chē)輛安全性的追求，該公司決定開(kāi)發(fā)集成360°環(huán)視和AI圖像識別的車(chē)輛安全新方案。

為實(shí)現360°環(huán)視功能，控制主機需接入多個(gè)高清攝像頭獲取實(shí)時(shí)路況，并通過(guò)處理，將多個(gè)圖像拼接和矯正，最終呈現在顯示設備上。該方案進(jìn)一步引入AI進(jìn)行圖像識別，幫助駕駛員安全駕駛。然而，作為傳統的特種車(chē)輛廠(chǎng)商，該廠(chǎng)商缺乏360°環(huán)視和AI圖像識別的開(kāi)發(fā)能力，需要供應商提供完整的環(huán)視AI解決方案。同時(shí)，特種車(chē)輛的作業(yè)環(huán)境復雜，故還需要采用抗震，寬溫設計抵御劇烈振動(dòng)、工作環(huán)境高低溫度的影響。

在尋求解決方案的過(guò)程中，他們了解到研華廣泛應用于視覺(jué)相關(guān)單元ROM-5880工業(yè)級核心模塊方案。憑借研華成熟的AI算法開(kāi)發(fā)能力，以及既有的車(chē)輛環(huán)視解決方案，雙方進(jìn)而確定了該項目的合作。

面臨的挑戰

■ 實(shí)時(shí)高清攝像頭接入

■ 圖像數據拼接處理能力

■ 寬溫×振動(dòng)防護

■ AI算法及算力支持

■ Arm平臺NPU的使用

■ 車(chē)規產(chǎn)品長(cháng)生命周期供貨

02 研華解決方案

基于上述挑戰，研華梳理了該公司車(chē)輛兼容型號，設備使用場(chǎng)景等需求。雙方經(jīng)過(guò)多輪交流合作，充分發(fā)揮各自領(lǐng)域的優(yōu)勢，共同設計了初步硬件方案。硬件方案采用ROM-5880核心模塊，可接入MIPI攝像頭，支持4K H.264/H.265視頻解碼，實(shí)現快速圖像處理。同時(shí)搭載1 Tops AI算力NPU，滿(mǎn)足圖像識別需求。同時(shí)ROM-5880核心板解決方案可通過(guò)3.0Grms振動(dòng)標準測試，以及支持-40~+85°寬溫，確保特種車(chē)在嚴苛環(huán)境下穩定運行。

此外，研華給客戶(hù)提供了前，后，左，右四顆魚(yú)眼攝像頭接入方案，通過(guò)4路AHD魚(yú)眼攝像頭數據輸入ROM-5880上的MIPI-CSI采集車(chē)輛環(huán)視圖像數據，再通過(guò)研華自研的軟件方案輸出成360°環(huán)視圖像。同時(shí)在A(yíng)I方面，研華基于既有的AI視覺(jué)算法模型，由客戶(hù)提供的圖像數據庫，幫助客戶(hù)完成了從AI模型選型，到訓練及部署的整套AI視覺(jué)方案應用。在OS方面，研華獨有的JelinaOS滿(mǎn)足安全連網(wǎng)更新，快速部署模型，持續優(yōu)化迭代等需求。

研華既有的視覺(jué)算法

03  研華技術(shù)服務(wù)

除設計與開(kāi)發(fā)外，研華作為一個(gè)40年企業(yè)，格外看重對交付的驗證與持續維護。所以研華不僅如期完成了系統集成與高標準測試，也應客戶(hù)的要求，提供長(cháng)達10年的長(cháng)期軟件維護服務(wù)，既確保各組件的無(wú)縫集成，也有效地保障了整體方案的可靠性和穩定性。目前客戶(hù)已經(jīng)實(shí)裝了3000臺設備，且該項目也正在持續出貨中。

ROM-5880 產(chǎn)品特性

■ 基于瑞芯微RK3568四核Cortex-A55，高達2.0GHz

■ 搭載1TOPS AI算力NPU

■ 板載2/4GB LPDDR4內存和16/32GB存儲

■ 支持1x HDMI2.0 4K, 1x signal LVDS or 1x 2ch MIPI DSI or 1x edp

■ 支持4K H.264/H.265視頻解碼

■ 支持2x USB3.0, 2x USB2.0, 3x UART, 14x GPIO，2x CAN

■ 支持2x PCIe3.0, 1x SATA, 1x MIPI CSI, 2x Gigabit LAN

■ 支持Linux和Android

研華ROM-5880核心模塊已經(jīng)上市。