在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

天璣9300內存硬件壓縮技術大幅降低手機AI大模型內存占用 行業第一

科技快報 ? 2023-11-09 19:17 ? 次閱讀

近期,聯發科發布了全新一代旗艦級5G生成式AI移動芯片天璣9300。創新的全大核架構設計結合新一代AI處理器APU和聯發科特有的前沿技術,為端側生成式AI應用提供強勁性能,帶來精彩、豐富的端側生成式AI體驗。聯發科還與眾多業內AI企業深度合作,在移動端構建了豐富的AI生態。

wKgZomVMv8eADU9oAAQ3TenYVuU744.png

全新第七代AI處理器APU 790,為生成式AI而生

隨著用戶對生成式AI應用需求日益增長,端側生成式AI便捷、安全性等優勢便凸顯出來。當然,部署端側AI大語言模型需要強大的AI算力支撐。

天璣9300搭載聯發科第七代AI處理器APU 790,為生成式AI而設計,擁有硬件級的生成式AI引擎,可以實現更加高速且安全的邊緣AI計算,深度適配Transformer模型進行算子加速,速度是上一代的8倍。

wKgZomVMv8eAKzkoAACAKjC3qno04.jpeg

同時APU 790的性能和能效得到顯著提升,整數運算和浮點運算能力提升至前一代的2倍,蘇黎世ETHZv5.1 AI-Benchmark Mobile Soc跑分2109 分,AI性能成功霸榜,功耗更是降低了45%。在強大的AI性能支持下,1秒以內即可生成圖片。天璣9300強悍的AI算力、創新的全大核CPU架構和Immortalis-G720 GPU都為端側運行生成式AI打下堅實的性能基礎。

wKgaomVMv8eAcpkNAADeRBHfMik961.png

同時,基于億級參數大語言模型的特性,聯發科開發了混合精度 INT4 量化技術,結合聯發科特有的內存硬件壓縮技術NeuroPilot Compression,可以更高效地利用內存帶寬,大幅減少AI大模型占用終端內存,為端側運行AI大語言模型突破手機內存限制,助力更大參數模型在端側落地。

基于以上,天璣9300首次在vivo旗艦手機端側落地70億參數AI大語言模型,處理速度可達20 Tokens每秒。不僅如此,聯發科突破了行業極限,已經與vivo成功在端側運行了130億參數的大語言模型。甚至,天璣9300已率先實現在移動芯片上成功運行330億參數的AI大語言模型,領跑業界。

wKgZomVMv8eAPVkxAAPPtwbJuWc216.png

天璣9300還支持多模態生成式AI大模型,打造出“文生詩”“文生圖”“文生趣圖”等豐富有趣的端側體驗。

wKgaomVMv8iALhwxAAGaCv5Plyo949.png

可見,天璣9300的AI算力和端側生成式AI能力已領先行業,足以讓用戶隨時隨地AI創造力全飆。

生成式AI模型端側技能擴充,帶來全面、豐富的端側生成式AI體驗

與云側生成式AI解決方案不同,由于硬件環境的差異,部署端側生成式AI也需要考慮手機內存、存儲容量、負載上限等因素。為此,聯發科率先提出了先進的解決方案。

APU 790 支持生成式AI模型端側技能擴充技術NeuroPilot Fusion,它可以基于基礎大模型持續在端側進行低秩自適應(LoRA,Low-Rank Adaptation)融合,在混合式AI的賦能下,可以基于1個基礎大模型,通過云端訓練,在端側完成N個功能的融合,賦予基礎大模型更全面、更豐富的生成式AI應用能力。

wKgZomVMv8iAXe4XAABaWKSYnzQ756.png

比如基于AI模型端側技能擴充技術的“圖生GIF動圖”功能,用戶可以根據一張照片更換不同的風格甚至表情,玩出個人專屬風格的表情包,秒變表情包小達人。

wKgaomVMv8iAB9DsAACRrudsS3I16.jpeg

AI開發平臺NeuroPilot加速端側生成式AI生態布局

基于強大的AI算力和先進的內存硬件壓縮技術、AI模型端側技能擴充等技術,天璣9300的APU 790將端側生成式AI的速度和廣度提升到了全新的水平。同時,為加速生成式AI在端側部署和普及,聯發科也憑借其AI開發平臺NeuroPilot構建了豐富的AI生態,從底層硬件到工具鏈、模型中心以及開發生態,助力生態快速、高效地部署端側生成式AI應用。

wKgZomVMv8mATCMQAAFtyqnYvf435.jpeg

AI開發平臺NeuroPilot支持Android、Meta LIama 2、百度文心一言大模型、百川智能百川大模型等前沿主流AI大模型。

wKgaomVMv8mAVVuWAAA8z6By0Gs810.png

更為重要的是,NeuroPilot擁有一套完整且先進的工具鏈,除了NeuroPilot Compression低秩自適應融合,還有Speculative Decoding推測解碼加速和模型優化與轉化技術。

wKgZomVMv8mAMIU0AADSWumX36o46.jpeg

聯發科的天璣開發者中心還可提供端側生成式AI落地一站式開發者資源,分享端側模型部署案例提升開發效率。目前已有20多個生成式AI合作伙伴加入生態共建。

聯發科還攜手業界合同伙伴打造精彩的生成式AI應用體驗。虹軟的生成式AI超級分辨率技術基于天璣9300 APU 邊緣計算能力,相比前代,性能可提升30%。在25倍放大的拍攝時,利用生成式AI超級分辨率技術,可以拍出細節更真實的圖像效果。

wKgaomVMv8mAcNmRAABQdQkk4sE020.png

wKgZomVMv8mAE3uwAADJITZjfH073.jpeg

極感科技的生成式AI語意搜索技術也基于天璣9300 APU邊緣計算能力,對比前代,性能可提升260%。比如在手機的相冊中搜索照片,描述照片的內容即可在毫秒內精準搜到對應的照片。而且在斷網狀態下也能搜索,隱私也不會泄露。

wKgaomVMv8yAeF-ZAALKHNuCuvQ896.png

wKgZomVMv9GAfTyQAAMO0P_Neg4228.png

Morpho的視頻通話實時數字分身生成技術,同樣基于天璣9300 APU邊緣計算能力,對比前代,性能提升26%。一般的虛擬人像生成器需手動選取容貌樣式花費時間。但基于視頻通話實時數字分身生成技術,用戶操作容易,僅需打開攝像頭單幀圖片即可瞬間生成數字分身。

wKgaomVMv9OACoRKAAL1idTB22s222.png

基于天璣9300 APU邊緣計算能力,慧鯉生成式AI防眩光技術性能可提升60%。在此技術加持下,無論是室外還是室內,在拍攝時如有眩光,只要輕松一暗即可消除眩光干擾。

wKgZomVMv9iAKGkGAAfDwZZa-OU845.png

可以看到,在AI端云融合的趨勢下,天璣9300在AI算力、生成式AI用戶體驗和生態方面展現出全面的優勢,為新一代旗艦級端側生成式AI體驗樹立了新的標桿,強大生成式AI就要用天璣。

wKgaomVMv9iAMO1oAAQBOXjl-Yk675.png

其同時,聯發科等領軍生成式AI的公司無時無刻不在通過技術創新和生態建造,積極推進混合式AI計算,開創出具有特色和效率的途徑來推動端側生成式AI部署的發展,以期將生成式AI在端側普及,讓越來越多的用戶享有特色化的端側AI體驗,構建智能全域新體驗,讓科技更普惠大眾。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 聯發科
    +關注

    關注

    56

    文章

    2721

    瀏覽量

    256126
  • 內存
    +關注

    關注

    8

    文章

    3109

    瀏覽量

    75000
  • AI
    AI
    +關注

    關注

    87

    文章

    34274

    瀏覽量

    275450
  • 大模型
    +關注

    關注

    2

    文章

    3030

    瀏覽量

    3832
  • 天璣9300
    +關注

    關注

    3

    文章

    53

    瀏覽量

    481
  • AI大模型
    +關注

    關注

    0

    文章

    364

    瀏覽量

    505
收藏 人收藏

    評論

    相關推薦
    熱點推薦

    HarmonyOS優化應用內存占用問題性能優化

    、 概述 用戶功能的不斷增強,應用越來越復雜,占用內存也在不斷膨脹,而內存作為系統的稀缺資源比較有限,當應用程序占用過多
    發表于 05-21 11:27

    首創開源架構,AI開發套件讓端側AI模型接入得心應手

    、內存帶寬占用量大幅降低50%,讓端側AI推理更聰明、響應更迅速。
    發表于 04-13 19:52

    硅基覺醒已至前夜,聯發科攜手生態加速智能體化用戶體驗時代到來

    支持DeepSeek四大關鍵技術,為端側推理提升2倍token生成速度,同時可節省50%內存帶寬占用。
    發表于 04-13 19:51

    MediaTek發布7400和6400移動芯片

    的游戲和 AI 相機技術, 6400 可提供物有所值的出色性能和增強的 5G 功能。繼
    的頭像 發表于 02-25 17:34 ?841次閱讀

    9400拿下AI性能榜冠軍,最強NPU引領手機AI應用變革

    蘇黎世AI Benchmark榜單冠軍,以稱霸行業AI性能,加速智能手機的智能體化進程。 在蘇黎世 ETHZ AI Benchmark榜單
    的頭像 發表于 12-30 20:09 ?595次閱讀
    <b class='flag-5'>天</b><b class='flag-5'>璣</b> 9400拿下<b class='flag-5'>AI</b>性能榜冠軍,最強NPU引領<b class='flag-5'>手機</b><b class='flag-5'>AI</b>應用變革

    8400全大核、端側AI,續寫“神U”傳奇!

    的緩存大幅提升,相比上代,二級緩存增加倍,三級緩存增加50%。 ? 借助精準的能效調控技術,
    的頭像 發表于 12-24 15:15 ?1364次閱讀
    <b class='flag-5'>天</b><b class='flag-5'>璣</b>8400全大核、端側<b class='flag-5'>AI</b>,續寫“神U”傳奇!

    9400首發端側AI訓練,在手機上就把AI變聰明

    隨著AI技術的快速發展,聯發科通過天9400芯片進步鞏固了其在手機端側AI市場的領導地位。作
    的頭像 發表于 10-14 18:25 ?615次閱讀
    <b class='flag-5'>天</b><b class='flag-5'>璣</b>9400首發端側<b class='flag-5'>AI</b>訓練,在<b class='flag-5'>手機</b>上就把<b class='flag-5'>AI</b>變聰明

    9400權威測試AI性能跑分第一,領跑行業

    聯發科近日隆重推出其最新旗艦芯片——9400,這款芯片是家族的第二代全大核SoC,并且成為首款集成智能體AI的5G旗艦芯片。在繼
    的頭像 發表于 10-14 14:57 ?845次閱讀
    <b class='flag-5'>天</b><b class='flag-5'>璣</b>9400權威測試<b class='flag-5'>AI</b>性能跑分<b class='flag-5'>第一</b>,領跑<b class='flag-5'>行業</b>

    9400生成式AI技術太牛了!打造最強AI體驗

    聯發科技再度突破技術前沿,推出全新天9400旗艦芯片,這是業界首款集成智能體AI的5G SoC。繼
    的頭像 發表于 10-14 14:06 ?630次閱讀
    <b class='flag-5'>天</b><b class='flag-5'>璣</b>9400生成式<b class='flag-5'>AI</b><b class='flag-5'>技術</b>太牛了!打造最強<b class='flag-5'>AI</b>體驗

    極客灣絕區零實測發布,全大核9300+戰斗場景幀率“同級第一

    《絕區零》作為繼《原神》和《崩壞:星穹鐵道》之后的又現象級游戲大作,不僅在玩家中引發了熱潮,也對手機芯片的性能提出了新的挑戰。極客灣的最新測試結果顯示,
    的頭像 發表于 07-23 15:36 ?1265次閱讀
    極客灣絕區零實測發布,全大核<b class='flag-5'>天</b><b class='flag-5'>璣</b><b class='flag-5'>9300</b>+戰斗場景幀率“同級<b class='flag-5'>第一</b>”

    什么是滿級性能?9400和10.7Gbps LPDDR5X內存強強結合

    9400不僅在制程技術、CPU架構和內存速度上實現了全面的升級,更是展示了聯發科在行業競爭中的領先地位。隨著年底的臨近,全球各大廠商將陸
    的頭像 發表于 07-16 14:31 ?605次閱讀
    什么是滿級性能?<b class='flag-5'>天</b><b class='flag-5'>璣</b>9400和10.7Gbps LPDDR5X<b class='flag-5'>內存</b>強強結合

    9300+叕贏麻了!紅米K70至尊版性能實測大獲全勝!

    Redmi K70至尊版的性能評測,趕緊來探究竟吧! 處理器方面,作為全大核CPU架構9300的承續之作,
    的頭像 發表于 07-11 15:34 ?1738次閱讀
    <b class='flag-5'>天</b><b class='flag-5'>璣</b><b class='flag-5'>9300</b>+叕贏麻了!紅米K70至尊版性能實測大獲全勝!

    mesh的內存占用能否優化?

    我測試到esp_mesh在開啟的情況下,即打開wifi和打開mesh,DRAM會占用大約130kb內存。且測試發現esp32剩余內存不足大約60kb的時候系統會重啟。這樣來說300KB內存
    發表于 06-28 15:32

    MediaTek9300憑借強大性能與算力,賦能端側AI語音游戲教學

    指導和指令反饋,加速玩家對游戲機制的理解,從而進步提升戰術運用能力。目前,AI Coaching 已率先在 9300 旗艦芯
    的頭像 發表于 06-27 09:54 ?1585次閱讀

    MediaTek9300+旗艦芯賦能iQOO Pad2 Pro超強性能

    終端帶來高效與個性化兼具的生成式 AI 體驗,進步解放生產力。與此同時,通過 MediaTek 與藍晶芯片技術棧的聯合研發,
    的頭像 發表于 06-24 09:41 ?1088次閱讀
    主站蜘蛛池模板: 奇米影视777狠狠狠888不卡 | 久久电影福利 | 第一页综合 | 亚洲成av人片在线观看无码 | 精品国产自在现线看久久 | 久久黄网站| 久久九色 | 色噜噜亚洲精品中文字幕 | 亚洲国产美女精品久久 | 免费又爽又黄禁片视频在线播放 | 久久涩精品 | 黄 色 片免费观看 | 亚色最新网址 | 伊人狼人在线 | 日本黄色免费观看 | 高清成年美女黄网站色大 | 天天干夜夜做 | 亚洲人成人77777网站 | 欧美黄免在线播放 | 99久久精品免费看国产 | 思思久久96热在精品不卡 | 亚洲无吗在线视频 | 99热久久国产精品 | 国产成人亚洲日本精品 | 免费v片网站 | 在线视频影院 | 四虎在线最新地址公告 | 色多多免费观看在线 | 亚洲午夜一区 | 扒开末成年粉嫩的小缝强文 | 深点再深一点好爽好多水 | 四虎影视免费 | 三级在线观看视频网站 | 视频在线高清完整免费观看 | 又粗又爽又色男女乱淫播放男女 | 额去鲁97在线观看视频 | 天天干夜操 | 九九福利 | 亚洲邪恶天堂影院在线观看 | 国产美女在线免费观看 | 手机福利片 |