在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

在算力魔方上本地部署Phi-4模型

jf_23871869 ? 來源:jf_23871869 ? 作者:jf_23871869 ? 2025-01-15 11:05 ? 次閱讀

?作者:算力魔方創始人/英特爾邊緣計算創新大使 劉力

前面我們分享了《Meta重磅發布Llama 3.3 70B:開源AI模型的新里程碑》,Llama 3.3 70B模型的發布,標志著開源AI模型在智能水平上的一大飛躍。它不僅達到了之前只有Llama 3.1 405B模型才具備的智能水平,而且還超越了11月發布的GPT-4o模型。

wKgZPGeHLW-ABC3FAAFm4cCBsoA793.png

本文我們將分享微軟剛剛發布的Phi-4模型,其模型參數只有14B,是Llama3.3 70B的五分之一,但性能卻跟Llama 3.3 70B模型差不多,甚至在GPQA和MATH兩項上還超越了Llama3.3 70B!

參考鏈接:https://arxiv.org/pdf/2412.08905

本文將分享Phi-4 14B模型在算力魔方4060版上的部署過程。

一,算力魔方?簡介

算力魔方?是一款可以DIY的迷你主機,采用了抽屜式設計,后續組裝、升級、維護只需要拔插模塊。通過選擇不同算力的計算模塊,再搭配不同的 IO 模塊可以組成豐富的配置,適應不同場景。

性能不夠時,可以升級計算模塊提升算力;IO 接口不匹配時,可以更換 IO 模塊調整功能,而無需重構整個系統。

本文以下所有步驟將在帶有英特爾i7-1265U處理器算力魔方?上完成驗證。

二,安裝Ollama

請按照《Gemma 2+Ollama在算力魔方上幫你在LeetCode解題》安裝Ollama。

wKgZPGeHJcmAGKTfAAPzdFi2bXk106.png

三,運行Phi-4

使用下面的命令完成運行Phi-4:

ollama run phi4
wKgZPGeHJeuAN609AAGomLXNOs0320.png

四,測試Phi-4數學能力

輸入下面的數學問題,測試Phi-4的數學能力:

A farmer has a rectangular field with a length of 2x + 5 meters and a width of x - 3 meters.

Part A: Find the area of the field in terms of x.

Part B: If the area of the field is 150 square meters, determine the value of x.

Part C: Calculate the perimeter of the field.

五,總結

使用Ollama可以方便快捷的將Phi-4模型本地化部署在算力魔方?上。

如果你有更好的文章,歡迎投稿!

稿件接收郵箱:nami.liu@pasuntech.com

更多精彩內容請關注“算力魔方?”!

?審核編輯 黃宇

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 模型
    +關注

    關注

    1

    文章

    3500

    瀏覽量

    50128
  • 算力
    +關注

    關注

    2

    文章

    1166

    瀏覽量

    15508
收藏 人收藏

    評論

    相關推薦
    熱點推薦

    基于魔方與PP-OCRv5的OpenVINO智能文檔識別方案

    )團隊最新推出的PP-OCRv5模型精度和效率實現了顯著突破,結合Intel OpenVINO工具套件的硬件加速能力,能夠為各類文檔處理場景提供更強大的支持。 二,
    的頭像 發表于 06-12 21:19 ?178次閱讀
    基于<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>魔方</b>與PP-OCRv5的OpenVINO智能文檔識別方案

    基于魔方的智能文檔信息提取方案

    的進步,使得自動化和智能化的文檔信息提取成為現實。本方案結合了Intel OpenVINO平臺的性能優化優勢與百度飛槳(PaddlePaddle)提供的PP-OCRv4模型,旨在開發一款高性能、高精度的智能文檔處理系統。
    的頭像 發表于 05-15 10:37 ?163次閱讀
    基于<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>魔方</b>的智能文檔信息提取方案

    DeepSeek R1模型本地部署與產品接入實操

    針對VS680/SL1680系列大芯片,我們的研發團隊正在研究將蒸餾后的輕量級DeepSeek模型(DeepSeek-R1-Distill-Qwen-1.5B)部署到SOC
    的頭像 發表于 04-19 16:32 ?210次閱讀
    DeepSeek R1<b class='flag-5'>模型</b><b class='flag-5'>本地</b><b class='flag-5'>部署</b>與產品接入實操

    魔方IO擴展模塊介紹 網絡篇1

    一,魔方簡介 魔方?AIPC是目前市面上唯一的模塊化迷你電腦,
    的頭像 發表于 04-09 14:33 ?266次閱讀
    <b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>魔方</b>IO擴展模塊介紹 網絡篇1

    添越智創基于 RK3588 開發板部署測試 DeepSeek 模型全攻略

    DeepSeek 模型部署與測試,開啟這場充滿挑戰與驚喜的技術探索之旅。 RK3588 開發板:AI 性能擔當 RK3588 開發板基于先進的 8nm LP 制程工藝精心打造,其硬件配置堪稱豪華, AI
    發表于 02-14 17:42

    使用OpenVINO C# API輕松部署飛槳PP-OCRv4模型

    ? 作者:魔方創始人/英特爾創新大使劉 《超4萬6千星的開源OCR黑馬登場,PaddleOCR憑什么脫穎而出?》 收到了讀者熱烈反響,
    的頭像 發表于 02-12 10:42 ?1345次閱讀
    使用OpenVINO C# API輕松<b class='flag-5'>部署</b>飛槳PP-OCRv<b class='flag-5'>4</b><b class='flag-5'>模型</b>

    趕緊本地運行與OpenAI-o1能力近似的DeepSeek-R1模型

    ?作者:魔方創始人/英特爾邊緣計算創新大使 劉 前面我們分享了《
    的頭像 發表于 01-21 14:29 ?3755次閱讀
    趕緊<b class='flag-5'>在</b><b class='flag-5'>本地</b>運行與OpenAI-o1能力近似的DeepSeek-R1<b class='flag-5'>模型</b>

    如何在邊緣端獲得GPT4-V的能力:魔方+MiniCPM-V 2.6

    作者:魔方創始人/英特爾邊緣計算創新大使 劉 前面我們分享了《
    的頭像 發表于 01-20 13:40 ?566次閱讀
    如何在邊緣端獲得GPT<b class='flag-5'>4</b>-V的能力:<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>魔方</b>+MiniCPM-V 2.6

    科技云報到:要更要“利”,“精裝”觸發大模型產業新變局?

    科技云報到:要更要“利”,“精裝”觸發大模型產業新變局?
    的頭像 發表于 01-16 10:24 ?411次閱讀

    魔方本地部署Phi-4模型

    模型
    jf_23871869
    發布于 :2025年01月15日 11:06:15

    用Ollama輕松搞定Llama 3.2 Vision模型本地部署

    Ollama 是一個開源的大語言模型服務工具,它的核心目的是簡化大語言模型(LLMs)的本地部署和運行過程,請參考《Gemma 2+Ollama
    的頭像 發表于 11-23 17:22 ?3630次閱讀
    用Ollama輕松搞定Llama 3.2 Vision<b class='flag-5'>模型</b><b class='flag-5'>本地</b><b class='flag-5'>部署</b>

    使用OpenVINO 2024.4魔方部署Llama-3.2-1B-Instruct模型

    前面我們分享了《三步完成Llama3魔方本地量化和部署》。2024年9月25日,Meta
    的頭像 發表于 10-12 09:39 ?1380次閱讀
    使用OpenVINO 2024.4<b class='flag-5'>在</b><b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>魔方</b>上<b class='flag-5'>部署</b>Llama-3.2-1B-Instruct<b class='flag-5'>模型</b>

    英特爾酷睿Ultra7處理器優化和部署Phi-3-min模型

    2024年4月23日,微軟研究院公布Phi-3系列AI大模型,包含三個版本:mini(3.8B參數)、small(7B參數)以及medium(14B參數)。phi-3-mini是一個擁
    的頭像 發表于 08-30 16:58 ?1274次閱讀
    <b class='flag-5'>在</b>英特爾酷睿Ultra7處理器<b class='flag-5'>上</b>優化和<b class='flag-5'>部署</b><b class='flag-5'>Phi</b>-3-min<b class='flag-5'>模型</b>

    模型時代的需求

    現在AI已進入大模型時代,各企業都爭相部署模型,但如何保證大模型,以及相關的穩定性和性能
    發表于 08-20 09:04
    主站蜘蛛池模板: 无遮挡高清一级毛片免费 | 成人剧场| 911国产自产精选 | 久久天天躁狠狠躁夜夜躁综合 | 午夜免费理论片在线看 | 天天干夜夜躁 | 激情网址在线观看 | 欧美精品成人久久网站 | aaaa级日本片免费视频 | 网站毛片 | 国内啪啪| 午夜性| 在线看片成人免费视频 | 免费人成网站在线高清 | 国产精品美女免费视频大全 | 视频在线观看一区二区 | 三级在线观看网站 | 亚洲色图欧美色 | 男人都懂得网址 | 二区久久国产乱子伦免费精品 | 国产成人午夜片在线观看 | 李老汉和小花的性生生活 | 啪啪伊人网 | 色婷婷在线观看视频 | 91无毒不卡 | 国产精品欧美一区二区三区不卡 | 日本媚薬痉挛在线观看免费 | 免费一级特黄视频 | 一级特级女人18毛片免费视频 | a资源在线观看 | 色涩在线观看 | 国产特黄一级毛片特黄 | 特级黄一级播放 | 狠狠干天天 | 天堂中文字幕在线 | 免费看啪啪的网站 | 美女被免费网站在线视频九色 | 美女视频黄a全部免费看小说 | 免费看色视频 | 一级特黄aa大片免费播放视频 | 天天躁天天狠天天透 |