玩弄放荡人妇系列av在线网站,日韩黄片,人人妻人人添人人爽,欧美一区,日本一区二区三区在线 |观看,日本免费a级毛一片

您當(dāng)前的位置: 首頁 > 新聞 > 其他

天璣9300 AI能力飆升:最高支持330億參數(shù)的AI大語言模型

來源:快科技 編輯:非小米 時間:2023-11-06 20:33人閱讀

快科技11月6日消息,聯(lián)發(fā)科今晚正式發(fā)布天璣9300旗艦5G生成式AI移動芯片,支持在端側(cè)生成式AI、游戲、影像等方面定義旗艦新體驗。

據(jù)介紹,天璣9300集成MediaTek第七代AI處理器APU 790,為生成式AI而設(shè)計,其性能和能效得到顯著提升,整數(shù)運算和浮點運算的性能是前一代的2倍,功耗降低了45%。

天璣9300 AI能力飆升:最高支持330億參數(shù)的AI大語言模型

APU 790內(nèi)置了硬件級的生成式AI引擎,可實現(xiàn)更加高速且安全的邊緣AI計算,深度適配Transformer模型進(jìn)行算子加速,處理速度是上一代的8倍,1秒內(nèi)可生成圖片。

同時,基于億級參數(shù)大語言模型特性,MediaTek開發(fā)了混合精度INT4量化技術(shù),結(jié)合MediaTek特有的內(nèi)存硬件壓縮技術(shù)NeuroPilot Compression,可以更高效地利用內(nèi)存帶寬,大幅減少AI大模型對終端內(nèi)存的占用,支持終端運行10億、70億、130億、最高可達(dá)330億參數(shù)的AI大語言模型。

天璣9300 AI能力飆升:最高支持330億參數(shù)的AI大語言模型

APU 790還支持生成式 AI 模型端側(cè)“技能擴(kuò)充”技術(shù)NeuroPilot Fusion,可以基于基礎(chǔ)大模型持續(xù)在端側(cè)進(jìn)行低秩自適應(yīng)(LoRA,Low-Rank Adaptation)融合,進(jìn)而賦予基礎(chǔ)大模型更加全面的能力。

天璣9300 AI能力飆升:最高支持330億參數(shù)的AI大語言模型

此外,MediaTek的AI開發(fā)平臺NeuroPilot構(gòu)建了豐富的AI生態(tài),支持Android、Meta LIama 2、百度文心一言大模型、百川智能百川大模型等前沿主流AI大模型,完整的工具鏈助力開發(fā)者在端側(cè)快速且高效地部署多模態(tài)生成式AI應(yīng)用,為用戶提供文字、圖像、音樂等終端側(cè)生成式AI創(chuàng)新體驗。

天璣9300 AI能力飆升:最高支持330億參數(shù)的AI大語言模型

天璣9300 AI能力飆升:最高支持330億參數(shù)的AI大語言模型

本站所有文章、數(shù)據(jù)、圖片均來自互聯(lián)網(wǎng),一切版權(quán)均歸源網(wǎng)站或源作者所有。

如果侵犯了你的權(quán)益請來信告知我們刪除。郵箱:business@qudong.com

相關(guān)文章