行業(yè)首發(fā)端側AI訓練,天璣9400放出前沿AI技術(shù)
聯(lián)發(fā)科通過(guò)天璣9400再一次展現了其在A(yíng)I芯片市場(chǎng)的競爭力。這款芯片不僅延續了天璣系列的技術(shù)優(yōu)勢,還首次將生成式AI應用于手機端,極大地提升了手機的AI性能。天璣9400不僅在技術(shù)上取得了突破,也通過(guò)與應用生態(tài)的緊密結合,開(kāi)創(chuàng )了更多的智能化場(chǎng)景。
本文引用地址:http://dyxdggzs.com/article/202410/463664.htm先進(jìn)技術(shù)創(chuàng )新,開(kāi)啟“端側視頻”和“端側訓練”的新篇章
天璣9400還帶來(lái)了多項震驚整個(gè)行業(yè)的前沿技術(shù),首發(fā)了端側視頻生成應用,這在整個(gè)業(yè)界包括云端都是最前沿的功能。據介紹,天璣9400的NPU 890通過(guò)內建時(shí)域張量(Temporal Tensor)硬件指令加速技術(shù)和端側高畫(huà)質(zhì)Diffusion Transformer(DiT)技術(shù),在端側實(shí)現了類(lèi)似Sora的視頻生成功能,開(kāi)創(chuàng )了手機端側AI生成視頻的新篇章。
從生成圖像到生成視頻,這是AI技術(shù)上的一大跨越,意味著(zhù)端側AI從此擁有了像云端一樣理解物理世界規則的能力,可以期待天璣這項技術(shù)的成熟和進(jìn)化,這或許將帶來(lái)一場(chǎng)手機應用生態(tài)和手機生產(chǎn)力角色的巨大變革。
智慧的AI體驗,一定是個(gè)性化的服務(wù)?;趶姾返亩藗人懔蜕墒紸I能力,天璣9400首發(fā)端側LoRA訓練,可以讓用戶(hù)利用個(gè)人資料在端側訓練和生成個(gè)性化內容,并建立專(zhuān)屬于個(gè)人的AI數字分身。整個(gè)過(guò)程無(wú)需連網(wǎng),既保護了用戶(hù)隱私,又實(shí)現了AI的專(zhuān)屬個(gè)人化,無(wú)限地拓展創(chuàng )意。這是智能手機和應用升級為智能體化的關(guān)鍵,在保護用戶(hù)隱私的前提下,智能體化的手機會(huì )基于個(gè)人數據越來(lái)越懂用戶(hù)的偏好、習慣,甚至在未來(lái)會(huì )理解用戶(hù)的情感和行動(dòng)趨勢。
聯(lián)發(fā)科還與虹軟合作,基于端側個(gè)性化模型訓練,打造了生成式AI修圖解決方案,讓搭載天璣9400的手機擁有更好的AI修圖效果。
天璣讓AI更懂你,先進(jìn)生成式AI讓創(chuàng )意更隨心
天璣9400還帶來(lái)了一系列的端側AI應用底層技術(shù)創(chuàng )新。天璣9400的Stable Diffusion性能相較前代提升了2倍,可以根據用戶(hù)照片的身體姿態(tài),生成各種頗具創(chuàng )意的動(dòng)圖,讓用戶(hù)在手機端側就可以輕松發(fā)揮創(chuàng )造力。
聯(lián)發(fā)科還和小紅書(shū)深度合作,首發(fā)推出端側SDXL高清風(fēng)格圖,可以將用戶(hù)的個(gè)人照片通過(guò)端側的AI處理生成各種風(fēng)格的魔幻照片,而且相比云端平均生成時(shí)長(cháng)還要快2倍,本地AI運算快速的優(yōu)勢體現出來(lái)了。
此外,聯(lián)發(fā)科還和全民K歌深度合作,首發(fā)推出端側AI純凈人聲萃取技術(shù),通過(guò)天璣AI音源分軌技術(shù),將K歌時(shí)的人聲提取出來(lái),再搭配stable diffusion算法做人聲還原,可以打造出純凈動(dòng)聽(tīng)的歌聲,然后再搭配音樂(lè )混音, 可以為用戶(hù)提供媲美專(zhuān)業(yè)錄音室的的K歌作品,讓唱歌愛(ài)好者用手機就可以享受媲美專(zhuān)業(yè)錄音室級別的效果。
同時(shí),天璣9400的端側長(cháng)文本處理能力大幅提升,支持32K Tokens,提升到上一代的8倍,極大的提升了端側大語(yǔ)言模型的溝通能力。這意味著(zhù)可以錄入更多的內容給生成式AI應用,人機溝通更加不受限,AI也變得越來(lái)越聰明,可以快速學(xué)習更豐富的知識來(lái)生成更準確的內容。
更驚艷的是,天璣9400端側多模態(tài)AI運算性能達到業(yè)界第一的50 Tokens每秒,可以大幅度減少用戶(hù)等待內容生成的時(shí)間?;趶姶蟮亩藗榷嗄B(tài)AI運算性能,天璣9400可以理解與推理圖片的內容,還可以理解圖片中文字和數字的相對關(guān)系,并根據用戶(hù)的喜好提供更加個(gè)性化的服務(wù)。
聯(lián)發(fā)科技與面壁智能合作,提升端側多模態(tài)AI的理解和推理能力,只需要用手機拍一張圖,就可以讓AI幫你解題。除了做數學(xué)題,還可以實(shí)現更多場(chǎng)景應用,比如點(diǎn)餐,只需要拍一張菜單照片,智能體AI就可以根據你的喜好幫你點(diǎn)餐。
今年,聯(lián)發(fā)科提出的天璣端側AI技術(shù)路線(xiàn)包括“芯片、模型、應用”三個(gè)維度。為了滿(mǎn)足用戶(hù)在端側對不同應用和大模型的需求,天璣9400與阿里云、百川智能、百度智能云、Google、零一萬(wàn)物、面壁智能、Meta、Microsoft、騰訊混元等全球領(lǐng)先的大模型廠(chǎng)商深度合作,實(shí)現了對這些主流大模型的深度適配優(yōu)化,讓用戶(hù)自由選擇不受限。
在面向應用開(kāi)發(fā)者的天璣AI先鋒計劃推動(dòng)和引領(lǐng)下,目前已經(jīng)有海量AI先行者加入到天璣AI生態(tài)中,共同探索端側AI技術(shù)創(chuàng )新路線(xiàn)和應用前景,天璣在端側AI的領(lǐng)導和行業(yè)聚合效應無(wú)疑正在為端側AI用戶(hù)帶來(lái)更多可能性。
NPU性能稱(chēng)霸,以最強端側AI構筑“智能體化”堅實(shí)基底
看天璣9400的AI性能提升。天璣9400搭載聯(lián)發(fā)科全新的第八代AI處理器NPU 890,AI性能和能效都有著(zhù)飛躍式的提升。在蘇黎世ETHZ AI Benchmark v6.0 芯片AI性能的測試中,天璣9400以絕對高分的成績(jì)一騎絕塵,相比友商芯片直接就是倍數級的領(lǐng)先。此外,天璣9400相較于上一代功耗降低可達35%。AI性能第一、功耗大幅降低,輕松拿下最強手機NPU。聯(lián)發(fā)科對于低功耗的重視真是刻到了骨子里,畢竟只有更好的功耗控制,才有更大的潛力運行各類(lèi)創(chuàng )新的AI應用。
天璣9400統治級的AI性能已經(jīng)遠超一般迭代的范圍,但聯(lián)發(fā)科花費這么大的力氣提升AI其實(shí)并不意外。早在今年上半年聯(lián)發(fā)科就召開(kāi)了開(kāi)發(fā)者大會(huì )MDDC 2024,與眾多合作伙伴聯(lián)合發(fā)布了《生成式AI手機產(chǎn)業(yè)白皮書(shū)》,詮釋了手機發(fā)展與變革的新趨勢,手機和AI應用的智能體化是未來(lái)手機進(jìn)化的主要路線(xiàn),移動(dòng)芯片毫無(wú)疑問(wèn)是這一場(chǎng)變革的關(guān)鍵。聯(lián)發(fā)科作為端側AI的率先布局者和引領(lǐng)者以及端側AI生態(tài)的建設者,在A(yíng)I技術(shù)和能力上的巨大投入是必然。
面向AI手機和AI應用智能體化這一關(guān)鍵趨勢,天璣9400集成了MediaTek天璣AI智能體化引擎,可將傳統AI應用程序升級為更先進(jìn)的智能體化AI應用。聯(lián)發(fā)科正在積極與開(kāi)發(fā)者合作,為 AI智能體、第三方應用程序和大模型之間提供統一的標準接口,實(shí)現AI跨應用串聯(lián),從而高效地運行邊緣AI計算和云服務(wù)。天璣AI智能體化引擎具備自主化、推理化和行動(dòng)化三大特性,可以自主感知環(huán)境理解目標,可根據環(huán)境的變化調整策略以及支持多個(gè)智能體交流和協(xié)作,作為集成于天璣9400中的先進(jìn)AI技術(shù),一經(jīng)發(fā)布就受到了行業(yè)的廣泛關(guān)注。
同時(shí),該技術(shù)還可縮短AI產(chǎn)品的開(kāi)發(fā)周期,有利于加速構建應用更豐富、體驗更出色的天璣AI生態(tài)。
不論端側AI技術(shù)發(fā)展的如何快速,能夠落地到端側應用,帶給用戶(hù)最智能、智慧的體驗才是最終目的。在天璣開(kāi)發(fā)者大會(huì )上,聯(lián)發(fā)科聯(lián)合眾多合作伙伴發(fā)布了天璣AI先鋒計劃,用端側AI生態(tài)的基礎設施建設為AI應用大爆發(fā)埋下了第一個(gè)伏筆。天璣AI智能體化引擎則為應用開(kāi)發(fā)者帶來(lái)了更加便捷的解決方案,可以加快移動(dòng)應用大面積智能體化的進(jìn)程。
發(fā)布會(huì )上,聯(lián)發(fā)科發(fā)布天璣AI智能體化引擎先鋒計劃,在未來(lái)將聯(lián)合榮耀、OPPO、vivo、小米、傳音等多個(gè)業(yè)界重磅合作伙伴,攜手打造先進(jìn)的智能體化AI應用體驗。這便是聯(lián)發(fā)科為端側AI應用大爆發(fā)埋下的第二個(gè)伏筆。聯(lián)發(fā)科正在從芯片、開(kāi)發(fā)者解決方案、終端合作構建全鏈路的智能體化AI應用創(chuàng )新環(huán)境。相信很快,在天璣AI生態(tài)深刻而廣泛的推進(jìn)作用下,端側AI應用將迎來(lái)無(wú)比繁榮的景象,各種最懂用戶(hù)的端側智能體化應用將帶來(lái)全面智慧的AI生活體驗。
天璣9400的發(fā)布為聯(lián)發(fā)科在A(yíng)I芯片市場(chǎng)的領(lǐng)導地位奠定了基礎。通過(guò)強大的AI能力和不斷擴展的應用生態(tài),聯(lián)發(fā)科為未來(lái)的智慧生活鋪設了技術(shù)基礎。隨著(zhù)生成式AI在手機端的廣泛應用,天璣9400將成為移動(dòng)設備智能化轉型的核心推動(dòng)力,推動(dòng)智能手機成為全場(chǎng)景智慧生活的中樞設備。
評論