6月11日機(jī)智云攜手火山引擎、扣子發(fā)起,聯(lián)合CSDN、GitCode、廣和通、奕斯偉、愛灣學(xué)院舉辦的“開源智聯(lián)·具身同行”字節(jié)豆包AIoT開源生態(tài)沙龍圓滿成功,正式推出基于豆包的 OpenEmbodied AI技術(shù)、產(chǎn)品及開源方案的落地與應(yīng)用,致力于降低AIoT開發(fā)門檻,推動具身智能在設(shè)備端的廣泛應(yīng)用。
開源AIoT核心能力矩陣
機(jī)智云宣布全面開源其AIoT開發(fā)的核心組件,覆蓋硬件、固件、應(yīng)用框架與示例代碼全鏈條。此次開源的核心目標(biāo)是賦能開發(fā)者“跳過技術(shù)壁壘”,快速為IoT硬件注入AI能力。
開源核心內(nèi)容
AI小程序框架:提供設(shè)備端構(gòu)建AI交互應(yīng)用的基礎(chǔ)框架。
AIGagent固件:實(shí)現(xiàn)AI智能體在資源受限的嵌入式設(shè)備(如ESP32系列)上高效運(yùn)行的關(guān)鍵固件。
AI開發(fā)板資料:豐富的硬件參考設(shè)計(jì)、代碼,支持快速硬件原型搭建。
“小智”項(xiàng)目示例:完整開源的端到端AI語音聊天機(jī)器人參考實(shí)現(xiàn)。包含語音喚醒、流式對話、多語言識別、大模型集成、TTS、物聯(lián)網(wǎng)控制等核心功能代碼。
【代碼倉庫見文末鏈接】
可量產(chǎn)方案:機(jī)智云AIoT + Coze 協(xié)同開發(fā)
項(xiàng)目提供了一套成熟可立即投入商用的開發(fā)方案,核心是機(jī)智云AIoT平臺與Coze平臺的深度協(xié)同。
喚醒與打斷:BOOT鍵(點(diǎn)擊/長按),離線語音喚醒 (ESP-SR)。
語音交互:流式對話(WebSocket),支持國語、粵語、英語、日語、韓語等多語言識別。
大模型集成:LLM (Qwen, DeepSeek, Doubao等),大模型TTS。
智能體能力:可配置提示詞與音色(自定義角色),短期記憶與對話總結(jié)。
顯示交互:支持OLED/LCD顯示信號、對話內(nèi)容、圖片表情;支持多語言顯示(中/英)。
多模態(tài):支持?jǐn)z像頭接入。
廣泛硬件兼容:核心支持ESP32系列主流芯片平臺
ESP32-S3
ESP32-C3
ESP32-P4
ESP32-C2
二次開發(fā)便利:開發(fā)者可在機(jī)智云平臺便捷完成AI設(shè)備的二次開發(fā)與功能部署。
智能體端(Coze平臺):
靈活智能體編排:開發(fā)者可在Coze平臺上,利用其強(qiáng)大的工作流和插件能力,輕松定制和編排專業(yè)化的AI智能體,定義其知識、技能與交互邏輯。
無縫對接設(shè)備:定制好的智能體可高效部署到運(yùn)行機(jī)智云AIGagent固件的設(shè)備上。
該方案優(yōu)勢:硬件功能完善、平臺成熟度高、智能體定制靈活、支持多種連接方式,為開發(fā)者提供了一條快速通向可量產(chǎn)AIoT產(chǎn)品的路徑。
文末查看可量產(chǎn)AI方案詳細(xì)開發(fā)指南
自定義開發(fā)板指南
手把手教你如何為AI語音機(jī)器人項(xiàng)目適配新的ESP32系列開發(fā)板。
支持超過50種ESP32開發(fā)板變種,每種板型都有獨(dú)立的初始化代碼目錄。
文末查看自定義開發(fā)板指南
物聯(lián)網(wǎng)控制模塊指南
深入解析OpenEmbodied技術(shù)中實(shí)現(xiàn)設(shè)備控制的核心模塊。
實(shí)現(xiàn)了AI語音聊天機(jī)器人的物聯(lián)網(wǎng)控制功能,使用戶可以通過語音指令控制接入到ESP32開發(fā)板的各種物聯(lián)網(wǎng)設(shè)備。
文末查看物聯(lián)網(wǎng)控制模塊指南
立即獲取資源,邁向開發(fā)新機(jī)遇
開源項(xiàng)目的所有代碼、文檔、硬件資料和示例均已開源,開發(fā)者可通過以下渠道獲取:
GitHub的鏈接:
https://github.com/gizwits/OpenEmbodied
GitCode的鏈接:
https://gitcode.com/org/GizwitsIoT/repos
-
AI
+關(guān)注
關(guān)注
88文章
34589瀏覽量
276236 -
開源
+關(guān)注
關(guān)注
3文章
3634瀏覽量
43585 -
機(jī)智云
+關(guān)注
關(guān)注
3文章
611瀏覽量
26762
發(fā)布評論請先 登錄
機(jī)智云亮相字節(jié)豆包AIoT開源生態(tài)沙龍
大象機(jī)器人攜手進(jìn)迭時空推出 RISC-V 全棧開源六軸機(jī)械臂產(chǎn)品
英特爾? 具身智能大小腦融合方案發(fā)布:構(gòu)建具身智能落地新范式

?具身智能(Embodied AI)?解析
激活具身智能創(chuàng)新加速度,九章云極DataCanvas公司領(lǐng)航CEAI 2025中國具身智能大會

Banana Pi 與瑞薩電子攜手共同推動開源創(chuàng)新:BPI-AI2N
機(jī)智云推出集成Deepseek和豆包大模型的AIoT開發(fā)平臺
【「具身智能機(jī)器人系統(tǒng)」閱讀體驗(yàn)】1.初步理解具身智能
【「具身智能機(jī)器人系統(tǒng)」閱讀體驗(yàn)】+初品的體驗(yàn)
《具身智能機(jī)器人系統(tǒng)》第1-6章閱讀心得之具身智能機(jī)器人系統(tǒng)背景知識與基礎(chǔ)模塊
名單公布!【書籍評測活動NO.51】具身智能機(jī)器人系統(tǒng) | 了解AI的下一個浪潮!
字節(jié)豆包推出AI智能體耳機(jī)
廣和通榮登36氪具身智能創(chuàng)新應(yīng)用案例及《2024年具身智能產(chǎn)業(yè)發(fā)展研究報告》

廣和通榮登36氪具身智能創(chuàng)新應(yīng)用案例及2024年具身智能產(chǎn)業(yè)發(fā)展研究報告

評論