2024年5月,躍昉科技正式加入“甲辰計(jì)劃”,旨在與各生態(tài)伙伴合作,致力于在下一個(gè)丙辰年(2036龍年)之前,基于RISC-V架構(gòu)實(shí)現(xiàn)從數(shù)據(jù)中心到桌面辦公、從移動(dòng)穿戴到智能物聯(lián)網(wǎng)全信息產(chǎn)業(yè)覆蓋的開放標(biāo)準(zhǔn)體系及開源系統(tǒng)軟件棧,使RISC-V軟硬件生態(tài)達(dá)到作為主流指令集架構(gòu)所需的生態(tài)成熟度。
近日,躍昉科技宣布了一項(xiàng)重大技術(shù)突破:Transformer、Gradio等PyTorch生態(tài)核心大語言模型(LLM)軟件棧,已在RISC-V高性能平臺(tái)上成功完成移植及適配驗(yàn)證。這一里程碑式的成就標(biāo)志著RISC-V架構(gòu)在AI和大語言模型領(lǐng)域的應(yīng)用上邁出了重要一步。
Transformer是一種深度學(xué)習(xí)模型框架,最早由 Vaswani 等人在 2017 年提出,專門用于處理序列數(shù)據(jù)(如自然語言、時(shí)間序列等)的任務(wù)。Transformer 通過引入自注意力機(jī)制(Self-Attention Mechanism) 來捕捉序列中不同位置之間的依賴關(guān)系,并通過并行處理大大提高了訓(xùn)練效率。
RISC-V計(jì)算架構(gòu)以其簡(jiǎn)潔、開放、靈活、低功耗、模塊化及可擴(kuò)展性等特點(diǎn),正逐步成為AI時(shí)代的原生計(jì)算架構(gòu)。作為RISC-V架構(gòu)SoC芯片設(shè)計(jì)與產(chǎn)業(yè)應(yīng)用的開拓者,躍昉科技專注于研發(fā)基于RISC-V的高端芯片及配套軟件棧核心技術(shù),不斷探索其在高性能計(jì)算領(lǐng)域的潛力。
在此次與開源社區(qū)的合作中,躍昉團(tuán)隊(duì)深入鉆研,攻克了多個(gè)技術(shù)難題,確保了Transformer等LLM軟件棧在RISC-V高性能平臺(tái)上流暢運(yùn)行,降低了LLM軟件棧對(duì)特定硬件的依賴,為其帶來了更加多元化的運(yùn)行環(huán)境選擇,提高了系統(tǒng)的靈活性和可擴(kuò)展性。
移植案例展示
1創(chuàng)建LLM應(yīng)用-中英文翻譯的訪問鏈接
2使用RISC-V CPU執(zhí)行LLM應(yīng)用-中英文翻譯
3創(chuàng)建LLM應(yīng)用-圖生文的訪問鏈接
4使用RISC-V CPU執(zhí)行LLM應(yīng)用-圖生文
移植案例中,中英文翻譯和圖生文等LLM應(yīng)用在RISC-V高性能平臺(tái)上的順利實(shí)施,充分展示了RISC-V在AI領(lǐng)域的應(yīng)用潛力,進(jìn)一步完善了RISC-V高性能軟件棧。
未來,躍昉科技將繼續(xù)攜手各生態(tài)伙伴,助力RISC-V高性能軟件生態(tài)建設(shè),拓展RISC-V的高性能應(yīng)用場(chǎng)景,共同推動(dòng)RISC-V生態(tài)系統(tǒng)的發(fā)展,為全球用戶帶來更多創(chuàng)新高效的產(chǎn)品和解決方案!
廣東躍昉科技有限公司聚焦研發(fā)基于RISC-V架構(gòu)的SoC芯片產(chǎn)品及系統(tǒng)解決方案,并提供從操作系統(tǒng)到云平臺(tái)的全棧基礎(chǔ)智能軟件服務(wù),通過融合人工智能、物聯(lián)網(wǎng)、區(qū)塊鏈等交叉領(lǐng)域技術(shù)為中國(guó)數(shù)字經(jīng)濟(jì)的創(chuàng)新應(yīng)用賦能。
躍昉科技作為RISC-V架構(gòu)SOC芯片設(shè)計(jì)及產(chǎn)業(yè)應(yīng)用的開拓者,已推出系列基于RISC-V架構(gòu)的高性能SOC芯片及產(chǎn)品,覆蓋AIoT邊端物聯(lián)、控制和計(jì)算等應(yīng)用領(lǐng)域,集高效能計(jì)算資源、豐富工業(yè)接口、穩(wěn)定可靠品質(zhì)等特性于一體。依托于全棧技術(shù)能力,躍昉科技正持續(xù)深耕于智慧能源、智慧物流、智慧城市、智慧工廠等領(lǐng)域,旨在為客戶帶來專業(yè)化、高品質(zhì)的產(chǎn)品和服務(wù)。
-
RISC-V
+關(guān)注
關(guān)注
46文章
2537瀏覽量
48571 -
躍昉科技
+關(guān)注
關(guān)注
0文章
76瀏覽量
2502 -
大模型
+關(guān)注
關(guān)注
2文章
3105瀏覽量
3999
原文標(biāo)題:躍·動(dòng)態(tài)|躍昉科技攜手開源社區(qū),大模型生態(tài)成功適配RISC-V高性能平臺(tái)
文章出處:【微信號(hào):躍昉科技LeapFive,微信公眾號(hào):躍昉科技LeapFive】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
RISC-V架構(gòu)下AI融合算力及其軟件棧實(shí)踐

躍昉科技推動(dòng)數(shù)字化云平臺(tái)落地應(yīng)用

賽昉科技RISC-V家庭云解決方案:NAS存儲(chǔ)性能升級(jí),隱私安全雙保障

首屆RISC-V產(chǎn)業(yè)發(fā)展大會(huì)成功舉辦,賽昉攜手產(chǎn)業(yè)伙伴共繪RISC-V新藍(lán)圖

賽昉科技將亮相RISC-V產(chǎn)業(yè)發(fā)展大會(huì),帶來應(yīng)用、軟件、人才三大核心主題分享

RISC-V廠商躍昉科技榮獲橫琴粵澳深度合作區(qū)“潛力獨(dú)角獸企業(yè)”認(rèn)定
SiFive 推出高性能 Risc-V CPU 開發(fā)板 HiFive Premier P550

賽昉科技亮相世界互聯(lián)網(wǎng)大會(huì),精彩呈現(xiàn)RISC-V創(chuàng)新成果

賽昉聯(lián)合國(guó)芯推出高性能AI MCU芯片,實(shí)現(xiàn)RISC-V+AI新應(yīng)用

躍昉科技正式加入openGauss社區(qū)
Banana Pi BPI-F3 進(jìn)迭時(shí)空RISC-V架構(gòu)下,AI融合算力及其軟件棧實(shí)踐

RISC-V Summit China 2024 | 青稞RISC-V+接口PHY,賦能RISC-V高效落地
如何讓RISC-V企業(yè)賺錢?賽昉科技展現(xiàn)全場(chǎng)景RISC-V解決方案

Imagination CPU 系列研討會(huì) | RISC-V 平臺(tái)的性能分析和調(diào)試

報(bào)名開啟!賽昉科技全場(chǎng)景RISC-V解決方案交流會(huì)重磅來襲

評(píng)論