ADAS多種傳感器融合帶來(lái)了信息處理的挑戰
Jeff?Van?Washenova?(CEVA?AI和CV市場(chǎng)營(yíng)銷(xiāo)與商業(yè)開(kāi)發(fā)事業(yè)部?高級總監)
本文引用地址:http://dyxdggzs.com/article/202004/412539.htm1 汽車(chē)ADAS的多種傳感器融合
隨著(zhù)主動(dòng)安全功能成為汽車(chē)電子中的關(guān)鍵要素,圍繞車(chē)輛周?chē)惭b以保護人員安全的傳感器將持續增長(cháng)。為了實(shí)現主動(dòng)安全功能和高水平自主駕駛,車(chē)輛將會(huì )需要多個(gè)攝像頭、雷達和LiDar。除了傳感器出現增長(cháng)之外,融合這些傳感器信號以獲取準確和可靠的車(chē)輛周?chē)h(huán)境的模型也很重要。這些曾經(jīng)僅在高檔汽車(chē)中出現的電子系統正在遷移到幾乎所有車(chē)輛上。消費者需求和更嚴格的車(chē)輛安全等級要求,推動(dòng)了這一發(fā)展趨勢。
除了車(chē)輛中的傳感器數量增長(cháng)之外,這些傳感器內的處理運算不僅利用傳統形式的算法(計算機視覺(jué)),還利用基于A(yíng)I的算法以作配合。AI正在進(jìn)入車(chē)輛中的幾乎每個(gè)傳感器和電子模塊中,范圍包括自然語(yǔ)言處理到目標檢測和分割。
2 對芯片IP的挑戰
這些發(fā)展趨勢帶來(lái)了一些挑戰。隨著(zhù)這些主動(dòng)安全功能擴展到所有的車(chē)輛上,汽車(chē)業(yè)界要求這些解決方案必需高效、靈活和可擴展。由于A(yíng)I不斷遷移到這些傳感器中,因此客戶(hù)需要能夠進(jìn)行高效處理的IP產(chǎn)品;但是由于技術(shù)的創(chuàng )新速度超過(guò)了典型電子模塊的開(kāi)發(fā)周期,因此這些IP還必須具有靈活性,因而,客戶(hù)需要能夠適應這種創(chuàng )新變化的IP產(chǎn)品。
除此之外,從運算的角度來(lái)看,各類(lèi)型傳感器具有不同的運算需求,所以解決方案必須靈活處理這些不同類(lèi)型的運算。一個(gè)示例是汽車(chē)后部的倒車(chē)攝像頭,你需要使用深度學(xué)習算法,以及能夠處理傳統計算機視覺(jué)算法的處理器。
從硬件方面來(lái)看,這帶來(lái)了挑戰,也需要能夠與硬件協(xié)同工作,經(jīng)過(guò)優(yōu)化,以便在這些硬件上高效運行軟件開(kāi)發(fā)工具。
3 CEVA的解決方案
芯片IP企業(yè)CEVA專(zhuān)注面向汽車(chē)電子技術(shù)和下一代車(chē)輛中之新興技術(shù),這些技術(shù)用于主動(dòng)安全到信息娛樂(lè )。目前CEVA擁有一系列IP產(chǎn)品組合,面向計算機視覺(jué)、AI、雷達、LiDar、傳感器融合、Car2X通信(DSRC/C-V2X)和音頻處理應用。
其中,CEVA SensPro是業(yè)界首個(gè)高性能傳感器中樞DSP架構,旨在處理情境感知設備的復雜傳感器處理工作負載。SensPro可以高效地應對汽車(chē)、機器人、AR/VR、語(yǔ)音助手、移動(dòng)設備和智能家居設備中的現代智能系統生成的傳感器數據的巨大增長(cháng),滿(mǎn)足業(yè)界對專(zhuān)用處理器的需求。這些傳感器包括攝像頭、雷達、LiDAR、飛行時(shí)間(ToF)裝置、麥克風(fēng)、慣性測量單元(IMU),以及任何其他可以生成用于創(chuàng )建情境感知設備之數據的傳感器。
除了SensPro,CEVA處理器還可以在低功耗嵌入式解決方案中以高效的方式運行神經(jīng)網(wǎng)絡(luò )。CEVA NeuPro-S是一款靈活且可擴展的解決方案,具有可以同時(shí)滿(mǎn)足傳統計算機視覺(jué)和AI加速需求的組件。它還能夠隨著(zhù)深度學(xué)習中的創(chuàng )新而成長(cháng),并可以處理現今正在開(kāi)發(fā)的新方法。
為了進(jìn)一步發(fā)展這個(gè)平臺方法,CEVA提供一款稱(chēng)為CEVA深度神經(jīng)網(wǎng)絡(luò )(CDNN)的軟件框架,可以將神經(jīng)網(wǎng)絡(luò )優(yōu)化為適用于CEVA產(chǎn)品組合的低功耗嵌入式系統。
?。ㄗⅲ罕疚膩?lái)源于科技期刊《電子產(chǎn)品世界》2020年第05期。)
評論