在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

云服務器 Flexus X 實例:one-api 部署,支持眾多大模型

jf_94205927 ? 來源:jf_94205927 ? 作者:jf_94205927 ? 2025-02-06 17:35 ? 次閱讀

本文通過 Flexus 云服務器 X 實例 部署 one-api。Flexus 云服務器 X 實例是新一代面向中小企業和開發者打造的柔性算力云服務器,可智能感知業務負載,適用于電商直播、企業建站、開發測試環境、游戲服務器、音視頻服務等中低負載場景。相較于 Flexus 應用服務器 L 實例,Flexus 云服務器 X 實例的優勢包含:提供豐富的公共鏡像、可靈活自定義 vCPU 內存配比、智能感知業務動態升降配,負載范圍更高等。

Flexus 云服務器 X 實例 能夠支持電商直播、企業建站、個人開發測試、游戲服務器等。

wKgZO2dtK_eAc7kIAACbHKe18ok616.png

一、one-api 介紹

one-api 是一個 OpenAI 接口管理 &分發系統,目前支持 Azure、Anthropic Claude、Google PaLM 2 & Gemini、智譜 ChatGLM、百度文心一言、訊飛星火認知、阿里通義千問、360 智腦以及騰訊混元,可用于二次分發管理 key,僅單可執行文件,已打包好 Docker 鏡像,一鍵部署,開箱即用。

wKgZPGdtK_iAc3ayAACrqFqjHuo018.png

one-api 特性:

(1)支持多種大模型;

(2)支持配置鏡像以及眾多第三方代理服務;

(3)支持通過負載均衡的方式訪問多個渠道;

(4)支持 stream 模式,可以通過流式傳輸實現打字機效果;

(5)支持多機部署,支持令牌管理,設置令牌的過期時間、額度、允許的 IP 范圍以及允許的模型訪問;

(6) 支持兌換碼管理,支持批量生成和導出兌換碼,可使用兌換碼為賬戶進行充值;

(7)支持渠道管理,批量創建渠道。 支持用戶分組以及渠道分組,支持為不同分組設置不同的倍率;

(8) 支持渠道設置模型列表,支持查看額度明細。 支持用戶邀請獎勵。 支持以美元為單位顯示額度等。

二、部署 one-api

2.1 拉取鏡像

首先,先從遠程鏡像倉庫中拉取 one-api 鏡像,執行如下命令拉取。

root@flexusx-7305:~#dockerpull swr.cn-north-4.myhuaweicloud.com/ddn-k8s/docker.io/justsong/one-api:v0.6.0

v0.6.0: Pulling from ddn-k8s/docker.io/justsong/one-api

4abcf2066143: Pull complete

c2f30ece0032: Pull complete

213fae9f6ab5: Pull complete

f2605c032589: Pull complete

Digest: sha256:416dc625c8c5a905e70db79b40bed5325fa0bc26aecf9cf9181e89b653595e14

Status: Downloaded newer image for swr.cn-north-4.myhuaweicloud.com/ddn-k8s/docker.io/justsong/one-api:v0.6.0

swr.cn-north-4.myhuaweicloud.com/ddn-k8s/docker.io/justsong/one-api:v0.6.0

one-api 鏡像拉取成功。

2.2 部署 one-api

拉取完 one-api 鏡像后,one-api 鏡像會存儲到本地,如下所示。

root@flexusx-7305:~# docker images

REPOSITORY TAG IMAGE ID CREATED SIZE

swr.cn-north-4.myhuaweicloud.com/ddn-k8s/docker.io/gitea/gitea 1.22.1 b3de72970178 2 months ago 167MB

swr.cn-north-4.myhuaweicloud.com/ddn-k8s/docker.io/justsong/one-api v0.6.0 36bd98ce5a7c 6 months ago 48.4MB

daocloud.io/library/mysql 8 26d0ac143221 3 years ago 546MB

daocloud.io/library/mysql latest 8457e9155715 3 years ago 546MB

root@flexusx-7305:~#

復制鏡像名稱,通過 docker 部署 one-api,執行如下命令。

root@flexusx-7305:~# docker run --name one-api -d --restart always -p 3002:3000 -e TZ=Asia/Shanghai -v /root/data/one-api:/data swr.cn-north-4.myhuaweicloud.com/ddn-k8s/docker.io/justsong/one-api:v0.6.0

89bb9f7a3dd119008c678243464bdf10df377dc4d482b123be3c077d7a675ac8

root@flexusx-7305:~# docker ps

CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES

89bb9f7a3dd1 swr.cn-north-4.myhuaweicloud.com/ddn-k8s/docker.io/justsong/one-api:v0.6.0 "/one-api" 2 seconds ago Up 2 seconds 0.0.0.0:3002->3000/tcp, [::]:3002->3000/tcp one-api

ef512af0c1c5 swr.cn-north-4.myhuaweicloud.com/ddn-k8s/docker.io/gitea/gitea:1.22.1 "/usr/bin/entrypoint…" 2 days ago Up 2 days 0.0.0.0:3000->3000/tcp, :::3000->3000/tcp, 0.0.0.0:222->22/tcp, [::]:222->22/tcp gitea

65fe1c102df6 daocloud.io/library/mysql:8 "docker-entrypoint.s…" 2 days ago Up 2 days 3306/tcp, 33060/tcp root_db_1

root@flexusx-7305:~#

通過 docker ps 可以查看正在運行的容器,可以看到 one-api 已運行,端口是 3002,對應容器內部端口 3000。

三、運行 one-api

通過上面的步驟,one-api 已經部署成功,下面就來詳細看下 one-api 的功能。

3.1 添加規則

one-api 對應的端口是 3002,需要將 3002 端口加入到準入規則中。

首先,在基本信息中,找到安全組,點擊進入安全組,如下所示。

wKgZO2dtK_iAcX22AABSMFpa2To274.png

然后,點擊配置規則配置 3002 端口,如下所示。

wKgZPGdtK_iAITNsAAClNKC6DOw774.png

設置優先級,然后在協議端口中添加端口,點擊確定,如下所示。

wKgZO2dtK_iAKGaCAACdB5kY2u0367.png

可以看到 3002 端口已經被加入到安全規則中,如下所示。

wKgZPGdtK_qAUTpaAADrNel8ql4859.png

3.2 運行 one-api

在瀏覽器中,訪問 http://服務器 IP 地址:3002,one-api 界面如下所示。

wKgZO2dtK_qAPhgaAACntc2Mgmo121.png

然后,點擊右上角登錄按鈕,默認用戶名為 root,默認密碼為 123456,登錄后可以修改密碼,如下所示。

wKgZPGdtK_qAPzkYAACG8_k-8V8559.png

wKgZO2dtK_uAWzNWAADTXB9fS2Y701.png

四、添加大模型 API

4.1 添加大模型 API

添加大模型 API 是在渠道里面,如下所示。

wKgZPGdtK_uACRr2AACqHBrn_lg032.png

點擊添加新渠道,如下所示。

wKgZO2dtK_uAAeSxAAEftk5zhCg828.png

加完成后可以點擊測試按鈕測試添加是否成功。

4.2 添加令牌

添加完大模型后,點擊令牌生成密鑰。

wKgZPGdtK_uAaCf8AACB9QU3uvs670.png

點擊添加新的令牌,輸入令牌名稱,過期時間可以默認,表示永不過期,如下所示。

wKgZO2dtK_yAFO_1AACusGn_DCQ642.png

添加完成后,點擊復制即可復制密鑰,用于通過 one-api 連接大模型時填寫密鑰。

wKgZPGdtK_yAAoyxAACgcEJwHWU782.png

五、總結

通過 Flexus 云服務器 X 實例 上部署 one-api,能夠流暢支持多種大模型接入,方便了大模型的開發工作。而且,Flexus 云服務器 X 實例提供了豐富的公共鏡像,可靈活自定義鏡像版本,支持智能感知業務動態升降配,負載范圍更高,支持靈活自定義 vCPU、內存實例規格,支持按需計費更精細和靈活的定價模式,可基于實際負載畫像智能推薦規格。趕緊用起來吧!

審核編輯 黃宇

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 云服務器
    +關注

    關注

    0

    文章

    739

    瀏覽量

    13432
  • 大模型
    +關注

    關注

    2

    文章

    2603

    瀏覽量

    3215
收藏 人收藏

    評論

    相關推薦

    華為 Flexus X 實例服務器部署即時通訊 IM 項目

    @TOC ? 寫在前面 手里拿到了一臺 華為 Flexus X 實例服務器
    的頭像 發表于 02-07 10:15 ?89次閱讀
    華為<b class='flag-5'>云</b> <b class='flag-5'>Flexus</b> <b class='flag-5'>X</b> <b class='flag-5'>實例</b><b class='flag-5'>云</b><b class='flag-5'>服務器</b><b class='flag-5'>部署</b>即時通訊 IM 項目

    Flexus 服務器 X 實例實踐:部署思源筆記工具

    服務器,它為各種應用的部署提供了堅實的基礎,就如我們即將探討的思源筆記工具的部署一樣。 一、Flexus
    的頭像 發表于 02-06 15:37 ?101次閱讀
    <b class='flag-5'>Flexus</b> <b class='flag-5'>云</b><b class='flag-5'>服務器</b> <b class='flag-5'>X</b> <b class='flag-5'>實例</b>實踐:<b class='flag-5'>部署</b>思源筆記工具

    華為 Flexus 服務器 X 實例部署 Mininote 輕量級筆記工具

    @TOC ? 一、Flexus 服務器 X 實例介紹 1.1 Flexus
    的頭像 發表于 01-23 17:56 ?140次閱讀
    華為<b class='flag-5'>云</b> <b class='flag-5'>Flexus</b> <b class='flag-5'>云</b><b class='flag-5'>服務器</b> <b class='flag-5'>X</b> <b class='flag-5'>實例</b><b class='flag-5'>部署</b> Mininote 輕量級筆記工具

    Flexus 服務器 X 實例實踐:安裝 SimpleMindMap 思維導圖工具

    引言 在當今數字化時代,高效的工具對于工作和學習至關重要。華為以其卓越的品質和服務,成為眾多用戶的首選。本次我們將在華為 Flexus
    的頭像 發表于 01-17 09:44 ?309次閱讀
    <b class='flag-5'>Flexus</b> <b class='flag-5'>云</b><b class='flag-5'>服務器</b> <b class='flag-5'>X</b> <b class='flag-5'>實例</b>實踐:安裝 SimpleMindMap 思維導圖工具

    Flexus 服務器 X 實例實踐:部署 Alist 文件列表程序

    引言 在當今數字化時代,華為以其卓越的技術實力和可靠的服務品質成為眾多企業和開發者的首選。華為 Flexus
    的頭像 發表于 01-14 09:31 ?401次閱讀
    <b class='flag-5'>Flexus</b> <b class='flag-5'>云</b><b class='flag-5'>服務器</b> <b class='flag-5'>X</b> <b class='flag-5'>實例</b>實踐:<b class='flag-5'>部署</b> Alist 文件列表程序

    服務器 Flexus X 實例:RAG 開源項目 FastGPT 部署,玩轉大模型

    本篇文章主要通過 Flexus 服務器 X 實例 部署 RAG 開源項目 FastGPT,通過
    的頭像 發表于 01-08 11:49 ?333次閱讀
    <b class='flag-5'>云</b><b class='flag-5'>服務器</b> <b class='flag-5'>Flexus</b> <b class='flag-5'>X</b> <b class='flag-5'>實例</b>:RAG 開源項目 FastGPT <b class='flag-5'>部署</b>,玩轉大<b class='flag-5'>模型</b>

    基于華為 Flexus 服務器 X 實例快速搭建 Halo 博客平臺

    前言 ????????華為作為領先的服務提供商,一直致力于為企業提供卓越的計算服務,其中,Flex
    的頭像 發表于 01-08 11:46 ?223次閱讀
    基于華為<b class='flag-5'>云</b> <b class='flag-5'>Flexus</b> <b class='flag-5'>云</b><b class='flag-5'>服務器</b> <b class='flag-5'>X</b> <b class='flag-5'>實例</b>快速搭建 Halo 博客平臺

    華為 Flexus 服務器 X 實例之 openEuler 系統下部署 dufs 文件服務器

    一、Flexus 服務器 X 實例介紹 1.1 Flexus
    的頭像 發表于 01-08 11:45 ?249次閱讀
    華為<b class='flag-5'>云</b> <b class='flag-5'>Flexus</b> <b class='flag-5'>云</b><b class='flag-5'>服務器</b> <b class='flag-5'>X</b> <b class='flag-5'>實例</b>之 openEuler 系統下<b class='flag-5'>部署</b> dufs 文件<b class='flag-5'>服務器</b>

    華為 Flexus 服務器 X 實例之 openEuler 系統下部署 Joplin 筆記工具

    前言 作為 IT 技術人員,在工作與學習中,服務器的使用頻率極高。華為 Flexus 服務器
    的頭像 發表于 01-08 11:39 ?217次閱讀
    華為<b class='flag-5'>云</b> <b class='flag-5'>Flexus</b> <b class='flag-5'>云</b><b class='flag-5'>服務器</b> <b class='flag-5'>X</b> <b class='flag-5'>實例</b>之 openEuler 系統下<b class='flag-5'>部署</b> Joplin 筆記工具

    服務器 Flexus X 實例:輕量級 http 服務器 Tinyhttpd 部署

    Flexus 服務器 X 實例?是華為推出的一款高性能、高可靠性的
    的頭像 發表于 01-07 16:59 ?164次閱讀
    <b class='flag-5'>云</b><b class='flag-5'>服務器</b> <b class='flag-5'>Flexus</b> <b class='flag-5'>X</b> <b class='flag-5'>實例</b>:輕量級 http <b class='flag-5'>服務器</b> Tinyhttpd <b class='flag-5'>部署</b>

    華為 Flexus 服務器 X 實例部署 Trilium Notes 知識庫工具

    一、Flexus 服務器 X 實例介紹 1.1 Flexus
    的頭像 發表于 01-02 20:45 ?236次閱讀
    華為<b class='flag-5'>云</b> <b class='flag-5'>Flexus</b> <b class='flag-5'>云</b><b class='flag-5'>服務器</b> <b class='flag-5'>X</b> <b class='flag-5'>實例</b><b class='flag-5'>部署</b> Trilium Notes 知識庫工具

    華為 Flexus 服務器 X 實例部署 Note Mark 筆記工具

    前言 華為 Flexus 服務器 X 實例作為專為中小企業和開發者設計的新一代柔性算力
    的頭像 發表于 01-02 13:42 ?119次閱讀
    華為<b class='flag-5'>云</b> <b class='flag-5'>Flexus</b> <b class='flag-5'>云</b><b class='flag-5'>服務器</b> <b class='flag-5'>X</b> <b class='flag-5'>實例</b><b class='flag-5'>部署</b> Note Mark 筆記工具

    華為 Flexus 服務器 X 實例的使用教程

    引言 選擇一款性價比高、性能強勁的服務器是 IT 技術人員常面臨的問題。華為Flexus 服務
    的頭像 發表于 12-30 09:16 ?295次閱讀
    華為<b class='flag-5'>云</b> <b class='flag-5'>Flexus</b> <b class='flag-5'>云</b><b class='flag-5'>服務器</b> <b class='flag-5'>X</b> <b class='flag-5'>實例</b>的使用教程

    華為 Flexus 服務器 X 實例之 openEuler 系統下部署 Discuz 論壇網站

    支持。該實例不僅提供了靈活可擴展的計算資源,還特別優化了對于 openEuler 等開源操作系統的支持,確保用戶能夠享受到更加高效、安全且易于管理的
    的頭像 發表于 12-30 09:12 ?259次閱讀
    華為<b class='flag-5'>云</b> <b class='flag-5'>Flexus</b> <b class='flag-5'>云</b><b class='flag-5'>服務器</b> <b class='flag-5'>X</b> <b class='flag-5'>實例</b>之 openEuler 系統下<b class='flag-5'>部署</b> Discuz 論壇網站

    基于 Flexus 服務器 X 實例體驗大模型部署體驗測評

    也很快。但是大家目前都是在體驗,能不能部署一下試試呢? 今天,我們就以華為 Flexus 服務器 X
    的頭像 發表于 12-24 12:27 ?278次閱讀
    基于 <b class='flag-5'>Flexus</b> <b class='flag-5'>云</b><b class='flag-5'>服務器</b> <b class='flag-5'>X</b> <b class='flag-5'>實例</b>體驗大<b class='flag-5'>模型</b><b class='flag-5'>部署</b>體驗測評
    主站蜘蛛池模板: 玖玖精品国产 | 天天爱添天天爱添天天爱添 | 日韩欧美卡一卡二卡新区 | 人人爽人人看 | 你懂的福利网站 | 8888四色奇米在线观看不卡 | 美女扒开尿口给男人桶爽视频 | 在线天堂资源www中文在线 | 97视频人人| 国产成人精品一区二区仙踪林 | 色妞影视| 色视频在线观看在线播放 | 四虎4hu影库永久地址 | 午夜一级| 日本不卡一区二区三区视频 | 91成人免费视频 | 黄色毛片免费看 | 狼人久久尹人香蕉尹人 | 视频在线观看免费网站 | 天天插天天摸 | 午夜色图 | 国产20岁美女一级毛片 | 天堂8中文在线bt | 亚洲综合成人在线 | 免费a级午夜绝情美女视频 免费jlzzjlzz在线播放视频 | 色视频在线观看在线播放 | 种子天堂bt磁力在线资源 | 亚洲成人77777| 一区二区午夜 | 六月丁香婷婷激情 | 又粗又大的机巴好爽欧美 | 五月激情电影 | 久久伊人精品青青草原高清 | www四虎| 男女交性永久免费视频播放 | 亚洲精品在线视频观看 | xx在线观看 | 欧美大黄 | 四虎亚洲国产成人久久精品 | 日本69sex护士hd | 国产免费糟蹋美女视频 |