日前,商湯科技日日新大模型SenseNova即將正式上線聲網云市場,開發者和企業用戶可通過聲網的實時互動云服務進行調用,將商湯領先的模型能力集成到各類應用場景中,快速構建基于日日新大模型的實時音視頻對話產品和應用,實現穩定、流暢、無延遲的音視頻對話體驗。
打造穩定、實時、極低延遲的實時音視頻對話體驗
2024年7月,商湯科技推出了國內首個具備實時音視頻交互大模型。今年,全新升級的日日新大模型SenseNova,擁有更加強大的實時交互、視覺識別、記憶思考、持續對話、復雜推理,以及情緒感知和表達等能力,還可隨時打斷,讓人機對話擺脫一問一答的刻板模式,互動體驗更自然、更流暢、更絲滑。
在今年1月實時音視頻中文測評基準 SuperCLUE-Live 中,商湯日日新大模型以總分 68.59 位列國內首位,展現了強大的多模態信息感知和理解及記憶能力。
在實時音視頻交互場景中,對話響應速度、語音清晰度等是衡量模型能力和產品體驗的重要指標。在級聯方案中,聲網已經將端到端延時降低到650ms。
商湯基于日日新大模型SenseNova的多模態推理與交互能力,結合聲網領先的產品優勢,更實現了500ms的端到端超低傳輸延時,與人類日常對話交互極為接近。同時,還可支持全雙工通信,在弱網環境下也可有效保障傳輸質量,并可智能消除對話中的噪聲、回聲、背景人聲,做到精準的人聲識別,讓人與AI的交互自然流暢。
合作賦能用戶,解鎖更多應用新場景
商湯日日新大模型SenseNova與聲網實時互動云服務的結合,有望打開更多人機交互場景,滿足兒童陪伴、同聲傳譯、視頻面試、電話客服、口語陪練、心理療愈、虛擬主播、個人助理等多元化場景的用戶需求,拓展大模型的落地與應用寬度。
此外,商湯科技與聲網還將攜手通過開放社區 RTE開發者社區,向有潛力的個人開發者及中小企業開放商湯日日新的深度體驗,旨在持續擴大生態伙伴體系,并為開發者提供豐富的資源和平臺支持。目前,雙方已與40家中小企業達成深度體驗合作,共同探索大模型在實時音視頻交互領域的更多應用潛能。
自2018年以來,商湯科技與聲網一直保持著緊密合作,在數字人、美顏特效、人力資源大模型等場景為不同行業客戶提供多種、差異化的產品和服務。未來,雙方還將繼續合作拓展日日新大模型的應用場景,共同將中國原創AI技術推向全球。
-
音視頻
+關注
關注
4文章
509瀏覽量
30276 -
商湯科技
+關注
關注
8文章
537瀏覽量
36495 -
大模型
+關注
關注
2文章
2890瀏覽量
3618
原文標題:商湯日日新上線聲網云市場,與四十家企業開啟合作
文章出處:【微信號:SenseTime2017,微信公眾號:商湯科技SenseTime】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
商湯“日日新”融合大模型榮獲雙料冠軍
商湯科技推出“日日新”融合大模型
商湯日日新多模態大模型權威評測第一
商湯日日新大模型中標上海電信訂單
商湯科技"日日新SenseNova 5.5"大模型閃耀WAIC,引領AI新紀元
商湯“日日新”大模型全面賦能2024 WAIC
商湯科技發布日日新5.5大模型體系
商湯發布日日新大模型5.0粵語版
中文大模型測評基準SuperCLUE:商湯日日新5.0,刷新國內最好成績

評論