天璣9300蘇黎世AI Benchmark跑分出爐，贏(yíng)得AI性能第一！

聯(lián)發(fā)科最新發(fā)布的一代旗艦級5G生成式AI移動(dòng)芯片天璣9300，其創(chuàng )新的全大核架構設計與最新的AI處理器APU等聯(lián)發(fā)科特色技術(shù)的合并，為生成式AI應用提供了強大的動(dòng)力，以實(shí)現引人入勝、豐富多樣的生成式AI體驗。同時(shí)，聯(lián)發(fā)科也與大量的AI企業(yè)在業(yè)內進(jìn)行深入合作，共同在移動(dòng)平臺上構造了一個(gè)充滿(mǎn)活力的AI生態(tài)。

       全新第七代AI處理器APU 790，為生成式AI而生     

隨著(zhù)用戶(hù)對生成式AI應用需求日益增長(cháng)，端側生成式AI便捷、安全性等優(yōu)勢便凸顯出來(lái)。當然，部署端側AI大語(yǔ)言模型需要強大的AI算力支撐。

天璣9300搭載聯(lián)發(fā)科第七代AI處理器APU 790，為生成式AI而設計，擁有硬件級的生成式AI引擎，可以實(shí)現更加高速且安全的邊緣AI計算，深度適配Transformer模型進(jìn)行算子加速，速度是上一代的8倍。

同時(shí)APU 790的性能和能效得到顯著(zhù)提升，整數運算和浮點(diǎn)運算能力提升至前一代的2倍，蘇黎世ETHZv5.1 AI-Benchmark Mobile Soc跑分2109 分，AI性能成功霸榜，功耗更是降低了45%。在強大的AI性能支持下，1秒以?xún)燃纯缮蓤D片。天璣9300強悍的AI算力、創(chuàng )新的全大核CPU架構和Immortalis-G720 GPU都為端側運行生成式AI打下堅實(shí)的性能基礎。

同時(shí)，基于億級參數大語(yǔ)言模型的特性，聯(lián)發(fā)科開(kāi)發(fā)了混合精度 INT4 量化技術(shù)，結合聯(lián)發(fā)科特有的內存硬件壓縮技術(shù)NeuroPilot Compression，可以更高效地利用內存帶寬，大幅減少AI大模型占用終端內存，為端側運行AI大語(yǔ)言模型突破手機內存限制，助力更大參數模型在端側落地。

基于以上，天璣9300首次在vivo旗艦手機端側落地70億參數AI大語(yǔ)言模型，處理速度可達20 Tokens每秒。不僅如此，聯(lián)發(fā)科突破了行業(yè)極限，已經(jīng)與vivo成功在端側運行了130億參數的大語(yǔ)言模型。甚至，天璣9300已率先實(shí)現在移動(dòng)芯片上成功運行330億參數的AI大語(yǔ)言模型，領(lǐng)跑業(yè)界。

天璣9300還支持多模態(tài)生成式AI大模型，打造出“文生詩(shī)”“文生圖”“文生趣圖”等豐富有趣的端側體驗。

可見(jiàn)，天璣9300的AI算力和端側生成式AI能力已領(lǐng)先行業(yè)，足以讓用戶(hù)隨時(shí)隨地AI創(chuàng )造力全飆。

       生成式AI模型端側技能擴充，帶來(lái)全面、豐富的端側生成式AI體驗

與云側生成式AI解決方案不同，由于硬件環(huán)境的差異，部署端側生成式AI也需要考慮手機內存、存儲容量、負載上限等因素。為此，聯(lián)發(fā)科率先提出了先進(jìn)的解決方案。

APU 790 支持生成式AI模型端側技能擴充技術(shù)NeuroPilot Fusion，它可以基于基礎大模型持續在端側進(jìn)行低秩自適應（LoRA，Low-Rank Adaptation）融合，在混合式AI的賦能下，可以基于1個(gè)基礎大模型，通過(guò)云端訓練，在端側完成N個(gè)功能的融合，賦予基礎大模型更全面、更豐富的生成式AI應用能力。

比如基于A(yíng)I模型端側技能擴充技術(shù)的“圖生GIF動(dòng)圖”功能，用戶(hù)可以根據一張照片更換不同的風(fēng)格甚至表情，玩出個(gè)人專(zhuān)屬風(fēng)格的表情包，秒變表情包小達人。

       AI開(kāi)發(fā)平臺NeuroPilot加速端側生成式AI生態(tài)布局

基于強大的AI算力和先進(jìn)的內存硬件壓縮技術(shù)、AI模型端側技能擴充等技術(shù)，天璣9300的APU 790將端側生成式AI的速度和廣度提升到了全新的水平。同時(shí)，為加速生成式AI在端側部署和普及，聯(lián)發(fā)科也憑借其AI開(kāi)發(fā)平臺NeuroPilot構建了豐富的AI生態(tài)，從底層硬件到工具鏈、模型中心以及開(kāi)發(fā)生態(tài)，助力生態(tài)快速、高效地部署端側生成式AI應用。

AI開(kāi)發(fā)平臺NeuroPilot支持Android、Meta LIama 2、百度文心一言大模型、百川智能百川大模型等前沿主流AI大模型。

更為重要的是，NeuroPilot擁有一套完整且先進(jìn)的工具鏈，除了NeuroPilot Compression低秩自適應融合，還有Speculative Decoding推測解碼加速和模型優(yōu)化與轉化技術(shù)。

聯(lián)發(fā)科的天璣開(kāi)發(fā)者中心還可提供端側生成式AI落地一站式開(kāi)發(fā)者資源，分享端側模型部署案例提升開(kāi)發(fā)效率。目前已有20多個(gè)生成式AI合作伙伴加入生態(tài)共建。

聯(lián)發(fā)科還攜手業(yè)界合同伙伴打造精彩的生成式AI應用體驗。虹軟的生成式AI超級分辨率技術(shù)基于天璣9300 APU 邊緣計算能力，相比前代，性能可提升30%。在25倍放大的拍攝時(shí)，利用生成式AI超級分辨率技術(shù)，可以拍出細節更真實(shí)的圖像效果。

極感科技的生成式AI語(yǔ)意搜索技術(shù)也基于天璣9300 APU邊緣計算能力，對比前代，性能可提升260%。比如在手機的相冊中搜索照片，描述照片的內容即可在毫秒內精準搜到對應的照片。而且在斷網(wǎng)狀態(tài)下也能搜索，隱私也不會(huì )泄露。

Morpho的視頻通話(huà)實(shí)時(shí)數字分身生成技術(shù)，同樣基于天璣9300 APU邊緣計算能力，對比前代，性能提升26%。一般的虛擬人像生成器需手動(dòng)選取容貌樣式花費時(shí)間。但基于視頻通話(huà)實(shí)時(shí)數字分身生成技術(shù)，用戶(hù)操作容易，僅需打開(kāi)攝像頭單幀圖片即可瞬間生成數字分身。

基于天璣9300 APU邊緣計算能力，慧鯉生成式AI防眩光技術(shù)性能可提升60%。在此技術(shù)加持下，無(wú)論是室外還是室內，在拍攝時(shí)如有眩光，只要輕松一暗即可消除眩光干擾。

可以看到，在A(yíng)I端云融合的趨勢下，天璣9300在A(yíng)I算力、生成式AI用戶(hù)體驗和生態(tài)方面展現出全面的優(yōu)勢，為新一代旗艦級端側生成式AI體驗樹(shù)立了新的標桿，強大生成式AI就要用天璣。

同時(shí)，聯(lián)發(fā)科等生成式AI的領(lǐng)先者們正通過(guò)不斷地技術(shù)革新和適當的生態(tài)布局，大力推動(dòng)混合式AI計算，并為端側生成式AI部署設計出了一套獨自且高效的方法，全力以赴推進(jìn)生成式AI在端側的普及，旨在讓更多的用戶(hù)享受到端側AI的個(gè)性化服務(wù)，帶來(lái)全新的全方位智能體驗，實(shí)現科技成果惠及全社會(huì )。