銀牛微電子發(fā)布高性能3D圖像和視覺(jué)處理器NU4500

5月17日，以“驅動(dòng)智能機器人創(chuàng )新”為主題的“第十四屆松山湖中國IC創(chuàng )新高峰論壇”正式在廣東東莞松山湖召開(kāi)。合肥銀牛微電子有限責任公司研發(fā)副總裁周凡在論壇上推出了其最新的高性能3D圖像和視覺(jué)處理器NU4500。

3D視覺(jué)和AI是3D空間計算的關(guān)鍵技術(shù)，是智能識別、自主決策和精準控制的基礎，應用前景廣闊，不僅在智能制造、自動(dòng)駕駛、機器人等領(lǐng)域發(fā)揮重要作用，還將在元宇宙XR、消費電子、物流無(wú)人機、3D掃描、虛擬數字人等前沿應用領(lǐng)域中展現出巨大的潛力。周凡博士也表示，3D空間計算技術(shù)正逐步滲透到各個(gè)領(lǐng)域，徹底改變人類(lèi)的生活方式和生產(chǎn)方式。

目前空間計算的應用面臨三大痛點(diǎn)：1、2D視覺(jué)已經(jīng)無(wú)法滿(mǎn)足日益復雜的終端應用要求 ；2、延時(shí)大功耗大軟件化3D算法+傳統AI芯片或者FPGA芯片的方案不可持續。3、適用于復雜場(chǎng)景的3D感知設備價(jià)格昂貴 、多傳感器融合大幅增加系統成本及復雜度 單芯片解決方案 。

為了破解這三大痛點(diǎn)，銀牛微電子聚焦于3D視覺(jué)、3D雙目立體算法芯片化，并單芯片實(shí)現了3D+SLAM+AI，無(wú)需額外的AI芯片及激光SLAM，可以助力設備實(shí)現低功耗、低成本、小型化。

作為一家長(cháng)期深耕于3D視覺(jué)領(lǐng)域的企業(yè)，銀牛微電子總部位于合肥，并在上海、以色列、北京和深圳設立了公司和分公司。需要特別指出的是，銀牛微電子在2020年就完成對于全球知名的3D計算機視覺(jué)和圖像處理器芯片設計廠(chǎng)商以色列Inuitive的收購。

Inuitive作為一家成立超10年的3D機器視覺(jué)廠(chǎng)商，在3D機器視覺(jué)領(lǐng)域有著(zhù)深厚的技術(shù)積累，具備豐富的3D視覺(jué)、復雜SoC芯片設計、低功耗設計和邊緣AI計算經(jīng)驗，其核心的IP都是完全自研的。Inuitive的3D深度感知圖像處理器芯片，具有強大的AI能力，結合SLAM實(shí)時(shí)跟蹤建圖引擎，以及通用CPU內核與豐富的I/O接口，可以極大限度的滿(mǎn)足客戶(hù)的3D機器視覺(jué)產(chǎn)品開(kāi)發(fā)需求，并且芯片的工作功耗也是非常的低。

在收購Inuitive之后，2021年，銀牛微電子就推出了基于NU4000芯片的3D機器視覺(jué)模組，并在2022年推出了全新的具有3.5Tops算力的NU4100芯片，可以支持6路視頻的輸入，720P@120FPS，運動(dòng)到顯示延遲僅1ms。2023年9月該芯片成功量產(chǎn)，并獲得了多家頭部客戶(hù)的采用。

周凡表示，銀牛微電子是目前全球唯一量產(chǎn)單芯片集成芯片化3D視覺(jué)感知、Al、SLAM模塊的SoC芯片廠(chǎng)商，同時(shí)也是全球唯二的3D雙目立體算法芯片化的量產(chǎn)芯片廠(chǎng)商。

銀牛微電子此次最新發(fā)布的NU4500，是一款高度集成的空間計算系統集成主控芯片，基于12nm工藝，擁有八核ARM Cortex-A55 CPU，集成了Synopsys APX5.2/NPU4K 視覺(jué)/AI處理器，可提供7.5Tops算力。同時(shí)還集成了ARC EM11D音頻DSP、高分辨率雙攝像頭ISP、H264/HEVC 視頻編碼器引肇、安全子系統。接口方面可支持USB3.0、Pcle-Gen4、SDIO/eMMC和LPDDR4x/5等高速接口。

NU4500還擁有基于硬件的圖像深度視覺(jué)引擎，包括領(lǐng)先的自研的深度引擎、計算機視覺(jué)加速引擎、圖像后處理模塊、異步時(shí)間扭曲(ATW）引擎等，能夠與其高性能CPU、VPU、AI和ISP內核緊密結合，可以支持單芯片10個(gè)輸入視頻流，具備強大的3D空間計算功能，能夠以低功耗提供3D感知、AI和各種空間計算應用支持。

得益于NU4500強大的性能，其能夠支持廣泛應用在包括人形機器人/AMR/AGV在內的泛機器人、 元宇宙XR、消費電子、物流無(wú)人機3D掃描等前沿應用領(lǐng)域。

周凡表示，目前銀牛微電子已贏(yíng)得全球龍頭企業(yè)信賴(lài)，超過(guò)150客戶(hù)簽署合同或上機測試。深度合作客戶(hù)包括小米、極智嘉、Varjo 等國內外頭部企業(yè)。

編輯：芯智訊-浪客劍