聯發科最近釋出了flagship型号的5G生成式AI移動晶片——天玑9300，這款晶片采用了全新的全大核架構設計，同時結合新一代AI處理器APU和聯發科特有的優秀技術，讓端側生成式AI應用煥發出更強大的性能，提供了多樣且豐富的AI體驗。此外，聯發科還與一衆AI業内公司進行了深入合做，共同塑造了豐富的移動端AI生态。
全新第七代AI處理器APU 790，為生成式AI而生
随着使用者對生成式AI應用需求日益增長，端側生成式AI便捷、安全性等優勢便凸顯出來。當然，部署端側AI大語言模型需要強大的AI算力支撐。
天玑9300搭載聯發科第七代AI處理器APU 790，為生成式AI而設計，擁有硬體級的生成式AI引擎，可以實作更加高速且安全的邊緣AI計算，深度适配Transformer模型進行算子加速，速度是上一代的8倍。
同時APU 790的性能和能效得到顯著提升，整數運算和浮點運算能力提升至前一代的2倍，蘇黎世ETHZv5.1 AI-Benchmark Mobile Soc跑分2109 分，AI性能成功霸榜，功耗更是降低了45%。在強大的AI性能支援下，1秒以内即可生成圖檔。天玑9300強悍的AI算力、創新的全大核CPU架構和Immortalis-G720 GPU都為端側運作生成式AI打下堅實的性能基礎。
同時，基于億級參數大語言模型的特性，聯發科開發了混合精度 INT4 量化技術，結合聯發科特有的記憶體硬體壓縮技術NeuroPilot Compression，可以更高效地利用記憶體帶寬，大幅減少AI大模型占用終端記憶體，為端側運作AI大語言模型突破手機記憶體限制，助力更大參數模型在端側落地。
基于以上，天玑9300首次在vivo旗艦手機端側落地70億參數AI大語言模型，處理速度可達20 Tokens每秒。不僅如此，聯發科突破了行業極限，已經與vivo成功在端側運作了130億參數的大語言模型。甚至，天玑9300已率先實作在移動晶片上成功運作330億參數的AI大語言模型，領跑業界。
天玑9300還支援多模态生成式AI大模型，打造出“文生詩”“文生圖”“文生趣圖”等豐富有趣的端側體驗。
可見，天玑9300的AI算力和端側生成式AI能力已領先行業，足以讓使用者随時随地AI創造力全飙。
生成式AI模型端側技能擴充，帶來全面、豐富的端側生成式AI體驗
與雲側生成式AI解決方案不同，由于硬體環境的差異，部署端側生成式AI也需要考慮手機記憶體、存儲容量、負載上限等因素。為此，聯發科率先提出了先進的解決方案。
APU 790 支援生成式AI模型端側技能擴充技術NeuroPilot Fusion，它可以基于基礎大模型持續在端側進行低秩自适應（LoRA，Low-Rank Adaptation）融合，在混合式AI的賦能下，可以基于1個基礎大模型，通過雲端訓練，在端側完成N個功能的融合，賦予基礎大模型更全面、更豐富的生成式AI應用能力。
比如基于AI模型端側技能擴充技術的“圖生GIF動圖”功能，使用者可以根據一張照片更換不同的風格甚至表情，玩出個人專屬風格的表情包，秒變表情包小達人。
AI開發平台NeuroPilot加速端側生成式AI生态布局
基于強大的AI算力和先進的記憶體硬體壓縮技術、AI模型端側技能擴充等技術，天玑9300的APU 790将端側生成式AI的速度和廣度提升到了全新的水準。同時，為加速生成式AI在端側部署和普及，聯發科也憑借其AI開發平台NeuroPilot建構了豐富的AI生态，從底層硬體到工具鍊、模型中心以及開發生态，助力生态快速、高效地部署端側生成式AI應用。
AI開發平台NeuroPilot支援Android、Meta LIama 2、百度文心一言大模型、百川智能百川大模型等前沿主流AI大模型。
更為重要的是，NeuroPilot擁有一套完整且先進的工具鍊，除了NeuroPilot Compression低秩自适應融合，還有Speculative Decoding推測解碼加速和模型優化與轉化技術。
聯發科的天玑開發者中心還可提供端側生成式AI落地一站式開發者資源，分享端側模型部署案例提升開發效率。目前已有20多個生成式AI合作夥伴加入生态共建。
聯發科還攜手業界合同夥伴打造精彩的生成式AI應用體驗。虹軟的生成式AI超級分辨率技術基于天玑9300 APU 邊緣計算能力，相比前代，性能可提升30%。在25倍放大的拍攝時，利用生成式AI超級分辨率技術，可以拍出細節更真實的圖像效果。
極感科技的生成式AI語意搜尋技術也基于天玑9300 APU邊緣計算能力，對比前代，性能可提升260%。比如在手機的相冊中搜尋照片，描述照片的内容即可在毫秒内精準搜到對應的照片。而且在斷網狀态下也能搜尋，隐私也不會洩露。
Morpho的視訊通話實時數字分身生成技術，同樣基于天玑9300 APU邊緣計算能力，對比前代，性能提升26%。一般的虛拟人像生成器需手動選取容貌樣式花費時間。但基于視訊通話實時數字分身生成技術，使用者操作容易，僅需打開攝像頭單幀圖檔即可瞬間生成數字分身。
基于天玑9300 APU邊緣計算能力，慧鯉生成式AI防眩光技術性能可提升60%。在此技術加持下，無論是室外還是室内，在拍攝時如有眩光，隻要輕松一暗即可消除眩光幹擾。
可以看到，在AI端雲融合的趨勢下，天玑9300在AI算力、生成式AI使用者體驗和生态方面展現出全面的優勢，為新一代旗艦級端側生成式AI體驗樹立了新的标杆，強大生成式AI就要用天玑。
此外，以聯發科為首的生成式AI上司者正在不斷地技術革新和生态布局，大幅度地推進混合式AI計算，為端側生成式AI部署鋪平了一條獨特而高效的道路，毫不松懈地推進生成式AI在端側的普及，讓更多的使用者盡享個性化的端側AI體驗，創造全新的全場景智能體驗，讓科技成果惠及全體大衆。