數萬(wàn)智能汽車(chē)量產(chǎn)應用的ADAS、IMS方案

自行科技基于 FPGA 平臺持續量產(chǎn)高可靠性、高性?xún)r(jià)比的高級駕駛輔助系統（ ADAS ）、智能座艙系統（ IMS ）等車(chē)內外視覺(jué)感知類(lèi)智能駕駛解決方案。

深圳市自行科技有限公司是一家全球領(lǐng)先的智能駕駛解決方案及設備提供商，也是基于 FPGA 硬件平臺開(kāi)發(fā)計算機視覺(jué)與傳感器融合技術(shù)的中國先鋒企業(yè)，在 FPGA 賦能的圖像處理技術(shù)和深度學(xué)習技術(shù)領(lǐng)域，具有深厚的人才和技術(shù)儲備，以及完善的產(chǎn)品開(kāi)發(fā)工具鏈。同時(shí)，該公司還是中國“駕駛員注意力監測系統性能要求及試驗方法”（行業(yè)稱(chēng)作 DMS ）國家標準制定起草單位之一、博世（ Bosch ）中國軟件合作商，以及豐田通商和賽靈思認證合作伙伴之一。

圖1–自行科技的核心技術(shù)

項目概述

人工智能、5G和車(chē)聯(lián)網(wǎng)技術(shù)的發(fā)展，正在重新定義未來(lái)汽車(chē)的安全和人機交互體驗，與之相應的各種智能駕駛技術(shù)的迭代與部署也日益加速。

“智能駕駛，ADAS先行”。ADAS 和 IMS 作為率先啟動(dòng)的智能駕駛兩大重要領(lǐng)域，從“駕駛自動(dòng)化”和“座艙智能化”兩大方向，推動(dòng)著(zhù)智能駕駛的落地進(jìn)程。

自行科技是中國本土最早接觸 FPGA 的企業(yè)之一，也是賽靈思在中國最早的汽車(chē)市場(chǎng)認證合作伙伴之一。借助賽靈思車(chē)規級 Zynq?-7000 SoC 系列自適應計算平臺，自行科技持續量產(chǎn)了一系列 ADAS 和 IMS 等車(chē)內外視覺(jué)感知類(lèi)智能駕駛解決方案。賽靈思 Zynq 平臺的動(dòng)態(tài)功能轉換（ DFX ）功能，為自行科技提供了更高性能、更低時(shí)延，以及多種 ADAS 功能在統一計算資源上實(shí)時(shí)加載和動(dòng)態(tài)轉換的靈活應變能力。

行業(yè)挑戰

環(huán)視系統（AVM，Around View Monitor）是近年來(lái)滲透率最高的 ADAS 功能之一，也被稱(chēng)為 360 度全景環(huán)視系統。該系統通過(guò)安裝在車(chē)輛前后左右的四個(gè)攝像頭傳感器感知車(chē)外的環(huán)境數據，幫助駕駛員了解車(chē)輛周邊的環(huán)境，并在危險發(fā)生前提供及時(shí)提醒。和單純的前視或者后視系統相比，AVM 需要實(shí)時(shí)處理來(lái)自車(chē)身 360° 的數據，同時(shí)通過(guò)圖像拼接、視頻處理等技術(shù)幫助駕駛員實(shí)現快速決策。

傳統的 AVM 系統通?；?ARM 或 GPU 來(lái)實(shí)現，例如，恩智浦的 I.MX6 系列芯片。這些芯片平臺應用于 AVM 系統會(huì )面臨各種局限，如 ARM 效率低、GPU功耗高、啟動(dòng)時(shí)間慢且成本高等特點(diǎn)，使其無(wú)論從能效還是成本上，都無(wú)法滿(mǎn)足車(chē)廠(chǎng)智能駕駛的超大規模部署需求。

與此同時(shí)，在智能座艙領(lǐng)域，隨著(zhù)終端消費者對智能座艙多元化交互體驗的需求日益發(fā)展，在傳統的語(yǔ)音、觸控交互外，基于視覺(jué)傳感器的智能交互、多傳感器融合智能交互也愈發(fā)受到消費者喜愛(ài)。面對多元且持續變化的體驗需求、智能化需求、傳感器融合需求，加上亙古不變的成本要求，在有限的座艙環(huán)境中，現有 ASIC、ASSP、DSP等固定或者標準處理器平臺，均都難以在尺寸、性能、成本等各方面同時(shí)滿(mǎn)足所有上述需求。

擁有豐富 FPGA 設計經(jīng)驗的自行科技，率先意識到 FPGA 所具備的部署靈活，啟動(dòng)速度快、穩定性強、邏輯資源豐富、可自適應調配等特點(diǎn)，能夠很好地滿(mǎn)足 AVM 和 IMS 系統所需要的各種功能。他們希望結合自有的全球領(lǐng)先 AI 技術(shù)和出色的 FPGA 開(kāi)發(fā)能力，為業(yè)界打造新一代 AVM 和 IMS 系統。

解決方案

自行科技選擇了賽靈思車(chē)規級（ XA ）Zynq?-7000 SoC 系列自適應計算平臺打造新一代 AVM 和 IMS 系統。

自行科技 CEO 關(guān)艷峰博士表示：“Zynq SoC 作為基于 FPGA 的異構多處理器硬件處理器平臺，集可編程邏輯（ PL ）和片上處理系統（ PS ）為一體，不僅擁有一般處理器，如ASIC、ASSP 和 DSP 的功能，而且還擁有其它處理器所不具備的更多功能。這些功能與我們領(lǐng)先的 AI 深度學(xué)習技術(shù)以及計算機視覺(jué)和傳感器融合技術(shù)相結合，為我們打造全新一代 AVM 和 IMS 系統帶來(lái)了寶貴的差異化和領(lǐng)先性?xún)?yōu)勢?！?/p>

針對客戶(hù)需求，自行科技基于賽靈思成熟的車(chē)規級 Zynq-7Z010  平臺開(kāi)發(fā)出一套高效的AVM 系統，實(shí)現了啟動(dòng)速度快、拼接失真低和高魯棒性，同時(shí)兼具視角動(dòng)態(tài)隨動(dòng)和前后輔助線(xiàn)動(dòng)態(tài)加載等功能，為傳統的 AVM 系統紅海市場(chǎng)注入了一股新鮮的動(dòng)力。與此同時(shí)，自行科技借助自身領(lǐng)先的 AI 算法能力，基于 Zynq-7Z010 和 7Z020 平臺開(kāi)發(fā)出了高性?xún)r(jià)比且豐富多樣的 IMS，其功能覆蓋廣泛，包括疲勞檢測，注意力檢測，身份識別、狀態(tài)識別、行為識別、手勢識別、情感識別、乘員狀態(tài)、后排識別等。

自行科技新一代 AVM 和 IMS 系統與行業(yè)現有方案相比實(shí)現了：

●   更高性能。單顆 Zynq 芯片即可實(shí)現從環(huán)境表征到傳感器融合和特征提取的完整 ADAS 方案設計，使得自行科技的解決方案避免了所有其它跨芯片平臺方案芯片間傳輸的帶寬瓶頸和安全隱患，方案性能因而更高，也更穩定、可靠。

●   更低時(shí)延。低時(shí)延的實(shí)時(shí)反應能力對駕駛安全至關(guān)重要。賽靈思 SoC 獨特的 FPGA 并行處理優(yōu)勢，使其可以靈活接入各類(lèi)傳感器，并以納秒或微秒級并行處理來(lái)自整個(gè)前端傳感器的數據，系統時(shí)延相對 GPU 或者 CPU 都更低。

●   更低系統總擁有成本(TCO)：自行科技充分利用 Zynq 里的 BRAM、查找表、寄存器、DSP 等豐富硬件資源，將計算復雜的深度學(xué)習網(wǎng)絡(luò )成功部署在低成本的 Zynq 芯片上，成功開(kāi)發(fā)出高性?xún)r(jià)比、多功能且極具競爭力的 IMS 和 ADAS 系統。

●   更靈活。借助 FPGA  特有的可重配置功能，以及自行科技的深度學(xué)習模塊化設計及重組技術(shù)，自行科技全新解決方案能夠支持用戶(hù)根據需求自定義新的功能，或者方便地進(jìn)行傳感器的擴展。同時(shí)，也為自行科技快速優(yōu)化部署新的深度神經(jīng)網(wǎng)絡(luò )，以及后續各類(lèi) ADAS 系統功能的擴展打下了堅實(shí)的基礎。

●   更智能、更安全：Zynq SoC的 DFX 功能，使得自行科技全新解決方案實(shí)現了多種 ADAS 功能在統一計算資源上的實(shí)時(shí)加載和動(dòng)態(tài)轉換。例如，在新型 AVM 系統上實(shí)現其它駕駛輔助功能，如車(chē)道偏離告警系統（ LDW ）、盲區監測系統（ BSD ），從而令駕駛更加智能與安全。

圖2–自行科技汽車(chē)智能化產(chǎn)品布局圖

設計成效

自行科技基于 FPGA 硬件平臺持續開(kāi)發(fā)出高性?xún)r(jià)比的 ADAS、IMS 等智能駕駛解決方案。相較于傳統的 I.MX6D 方案，自行科技全新 AVM 系統僅在主芯片上就比傳統芯片（I.MX6D方案）降低了 50% 以上的成本，而且在功能與性能上實(shí)現了當前主流智能汽車(chē)電子產(chǎn)品解決方案的水準，可以滿(mǎn)足國內外智能汽車(chē)電子產(chǎn)品市場(chǎng)的需求。

目前，自行科技基于 FPGA 平臺開(kāi)發(fā)的各類(lèi)智能駕駛電子產(chǎn)品及解決方案，已成功在國內商用車(chē)與乘用車(chē)（中國最大客車(chē)品牌，以及年銷(xiāo)售額200萬(wàn)的知名合資汽車(chē)品牌車(chē)型等）前裝市場(chǎng)實(shí)現穩定量產(chǎn)，累計出貨已達數萬(wàn)臺。

圖3–客車(chē)DMS產(chǎn)品示意圖

圖4–汽車(chē)AVM產(chǎn)品示意圖