《電子技術應用》
您所在的位置:首頁 > 人工智能 > 業界動態 > 聯發科天璣9300領先行業,支持行業最高330億參數AI大語言模型

聯發科天璣9300領先行業,支持行業最高330億參數AI大語言模型

2023-11-10
來源:聯發科

最新版的聯發科5G生成式AI移動芯片天璣9300已發布,其新穎的全大核架構設計和新一代AI處理器APU以及聯發科獨有的尖端技術,為生成式AI應用提供了強大的性能支持,讓使用者享受多彩豐富的生成式AI體驗。比此,聯發科還與大量AI行業企業加強合作,以在移動端打造豐富的AI生態。

     微信截圖_20231110102951.png

隨著用戶對生成式AI應用需求日益增長,端側生成式AI便捷、安全性等優勢便凸顯出來。當然,部署端側AI大語言模型需要強大的AI算力支撐。

天璣9300搭載聯發科第七代AI處理器APU 790,為生成式AI而設計,擁有硬件級的生成式AI引擎,可以實現更加高速且安全的邊緣AI計算,深度適配Transformer模型進行算子加速,速度是上一代的8倍。

微信截圖_20231110103005.png

同時APU 790的性能和能效得到顯著提升,整數運算和浮點運算能力提升至前一代的2倍,蘇黎世ETHZv5.1 AI-Benchmark Mobile Soc跑分2109 分,AI性能成功霸榜,功耗更是降低了45%。在強大的AI性能支持下,1秒以內即可生成圖片。天璣9300強悍的AI算力、創新的全大核CPU架構和Immortalis-G720 GPU都為端側運行生成式AI打下堅實的性能基礎。

微信截圖_20231110103022.png

同時,基于億級參數大語言模型的特性,聯發科開發了混合精度 INT4 量化技術,結合聯發科特有的內存硬件壓縮技術NeuroPilot Compression,可以更高效地利用內存帶寬,大幅減少AI大模型占用終端內存,為端側運行AI大語言模型突破手機內存限制,助力更大參數模型在端側落地。

基于以上,天璣9300首次在vivo旗艦手機端側落地70億參數AI大語言模型,處理速度可達20 Tokens每秒。不僅如此,聯發科突破了行業極限,已經與vivo成功在端側運行了130億參數的大語言模型。甚至,天璣9300已率先實現在移動芯片上成功運行330億參數的AI大語言模型,領跑業界。

微信截圖_20231110103041.png

天璣9300還支持多模態生成式AI大模型,打造出“文生詩”“文生圖”“文生趣圖”等豐富有趣的端側體驗。

微信截圖_20231110103111.png

可見,天璣9300的AI算力和端側生成式AI能力已領先行業,足以讓用戶隨時隨地AI創造力全飆。

生成式AI模型端側技能擴充,帶來全面、豐富的端側生成式AI體驗

與云側生成式AI解決方案不同,由于硬件環境的差異,部署端側生成式AI也需要考慮手機內存、存儲容量、負載上限等因素。為此,聯發科率先提出了先進的解決方案。

APU 790 支持生成式AI模型端側技能擴充技術NeuroPilot Fusion,它可以基于基礎大模型持續在端側進行低秩自適應(LoRA,Low-Rank Adaptation)融合,在混合式AI的賦能下,可以基于1個基礎大模型,通過云端訓練,在端側完成N個功能的融合,賦予基礎大模型更全面、更豐富的生成式AI應用能力。

微信截圖_20231110103133.png

比如基于AI模型端側技能擴充技術的“圖生GIF動圖”功能,用戶可以根據一張照片更換不同的風格甚至表情,玩出個人專屬風格的表情包,秒變表情包小達人。

微信截圖_20231110103144.png

       AI開發平臺NeuroPilot加速端側生成式AI生態布局

基于強大的AI算力和先進的內存硬件壓縮技術、AI模型端側技能擴充等技術,天璣9300的APU 790將端側生成式AI的速度和廣度提升到了全新的水平。同時,為加速生成式AI在端側部署和普及,聯發科也憑借其AI開發平臺NeuroPilot構建了豐富的AI生態,從底層硬件到工具鏈、模型中心以及開發生態,助力生態快速、高效地部署端側生成式AI應用。

微信截圖_20231110103214.png

AI開發平臺NeuroPilot支持Android、Meta LIama 2、百度文心一言大模型、百川智能百川大模型等前沿主流AI大模型。

微信截圖_20231110103226.png

更為重要的是,NeuroPilot擁有一套完整且先進的工具鏈,除了NeuroPilot Compression低秩自適應融合,還有Speculative Decoding推測解碼加速和模型優化與轉化技術。

微信截圖_20231110103245.png

聯發科的天璣開發者中心還可提供端側生成式AI落地一站式開發者資源,分享端側模型部署案例提升開發效率。目前已有20多個生成式AI合作伙伴加入生態共建。

聯發科還攜手業界合同伙伴打造精彩的生成式AI應用體驗。虹軟的生成式AI超級分辨率技術基于天璣9300 APU 邊緣計算能力,相比前代,性能可提升30%。在25倍放大的拍攝時,利用生成式AI超級分辨率技術,可以拍出細節更真實的圖像效果。

 微信截圖_20231110103258.png

極感科技的生成式AI語意搜索技術也基于天璣9300 APU邊緣計算能力,對比前代,性能可提升260%。比如在手機的相冊中搜索照片,描述照片的內容即可在毫秒內精準搜到對應的照片。而且在斷網狀態下也能搜索,隱私也不會泄露。

微信截圖_20231110103315.png

Morpho的視頻通話實時數字分身生成技術,同樣基于天璣9300 APU邊緣計算能力,對比前代,性能提升26%。一般的虛擬人像生成器需手動選取容貌樣式花費時間。但基于視頻通話實時數字分身生成技術,用戶操作容易,僅需打開攝像頭單幀圖片即可瞬間生成數字分身。

微信截圖_20231110103332.png

基于天璣9300 APU邊緣計算能力,慧鯉生成式AI防眩光技術性能可提升60%。在此技術加持下,無論是室外還是室內,在拍攝時如有眩光,只要輕松一暗即可消除眩光干擾。

微信截圖_20231110103347.png

可以看到,在AI端云融合的趨勢下,天璣9300在AI算力、生成式AI用戶體驗和生態方面展現出全面的優勢,為新一代旗艦級端側生成式AI體驗樹立了新的標桿,強大生成式AI就要用天璣。

微信截圖_20231110103402.png

同時,以聯發科為引領的生成式AI開拓者們正在通過持續技術創新和生態布局大力推動混合式AI計算的發展,為端側生成式AI部署展開了一條獨特且高效的道路,全力將生成式AI在端側進行普及,以實現更多用戶享受到端側AI的個性化體驗,開創全新的全場景智能體驗,將科技的優勢充分惠及大眾。


本站內容除特別聲明的原創文章之外,轉載內容只為傳遞更多信息,并不代表本網站贊同其觀點。轉載的所有的文章、圖片、音/視頻文件等資料的版權歸版權所有權人所有。本站采用的非本站原創文章及圖片等內容無法一一聯系確認版權者。如涉及作品內容、版權和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當措施,避免給雙方造成不必要的經濟損失。聯系電話:010-82306118;郵箱:aet@chinaaet.com。
主站蜘蛛池模板: 成人精品一区二区三区中文字幕 | 河边性xxxxfreexxxxx | 国内自拍第一页 | 欧美成人短视频 | 亚洲一区二区三区成人 | 日韩视频久久 | 亚洲免费一区 | 精品三级网站 | 成人免费观看网欧美片 | 久草在线首页 | 2022年国产精品久久久久 | 欧美一级毛片图 | 欧美国产综合日韩一区二区 | 57pao强力打造手机版 | 国产精品成人久久久久 | 国产日本韩国不卡在线视频 | 亚洲品质自拍视频 | 亚洲三级在线观看 | 久久国产精品99久久久久久牛牛 | 国产成人一区二区三区在线视频 | 我要看三级毛片 | 成人久久18免费网站 | 国产一区二区在线播放 | 日本高清专区一区二无线 | 欧美日本一区二区 | 亚洲综合无码一区二区 | 亚洲一区二区三区福利在线 | 国产大片在线观看 | 亚洲bbbbbxxxxx精品三十七 | 黄色三级在线播放 | 久久精品欧美日韩精品 | 欧美大片毛片aaa免费看 | 成人免费影视网站 | 成视频年人黄网站免费 | 国产成人免费全部网站 | 狠狠综合久久久久综合 | 日本乱人伦在线观看免费 | 一级aaaaa毛片免费视频 | 国产精品综合久成人 | 久草经典视频 | 波多野一区二区三区在线 |