字節跳動發布OmniHuman 多模態框架
2 月 6 日消息，字節跳動近日發布了一項重大成果 ——OmniHuman 多模態框架，其優勢在于其強大的視頻生成能力。用戶只需提供一張任意尺寸和人物占比的單張圖片，再結合一段輸入音頻，就能生成栩栩如生的人物視頻。
與傳統 AI 模型不同，OmniHuman-1 能夠生成逼真的全身動畫，并且可以精準地將手勢和面部表情與語音或音樂同步，打破了以往只能生成面部或上半身動畫的局限。
基于約 19000 小時的人類運動數據訓練，OmniHuman-1 模型支持不同的體型和畫面比例，能在內存限制內生成任意長度的視頻，并適應不同輸入信號，在真實性和準確性方面超越其他同類動畫工具。值得一提的是，它還支持卡通角色、人工物體、動物以及復雜姿勢的輸入，確保生成的動作特征與每種風格的獨特特點相匹配。
在實際應用場景中，OmniHuman 潛力巨大。在影視制作領域，創作者能輕松為虛擬角色打造全身動作戲份；虛擬直播里，主播動作更加自然，可增強直播的趣味性與吸引力；游戲世界中，數字人 NPC 的動作和表情更豐富，能提升玩家的沉浸感。
聲明：本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人，不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用，如有內容侵權或者其他違規問題，請聯系本站處理。
舉報投訴
-
AI
+關注
關注
88文章
34779瀏覽量
277082 -
人工智能
+關注
關注
1805文章
48899瀏覽量
247949 -
字節跳動
+關注
關注
0文章
347瀏覽量
9425
發布評論請先 登錄
相關推薦
熱點推薦
海康威視發布多模態大模型文搜存儲系列產品
多模態大模型為安防行業帶來重大技術革新，基于觀瀾大模型技術體系，海康威視將大參數量、大樣本量的圖文多模態大模型與嵌入式智能硬件深度融合，發布
字節跳動否認趙明加盟及自研手機傳聞
近日，市場傳出榮耀前CEO趙明即將加盟字節跳動，并可能主導其手機業務的消息。與此同時，還有傳聞稱字節跳動有意推出主打AI概念的手機產品，這一系列傳聞引發了業界的廣泛關注。 針對這些傳聞
字節跳動即將推出多模態視頻生成模型OmniHuman
字節跳動旗下一站式AI創作平臺即夢AI即將迎來重大更新，全新多模態視頻生成模型OmniHuman即將上線。這款模型是
快訊：字節跳動否認120億美元投資AI
對于傳聞中的字節跳動計劃2025年在人工智能基礎設施上投入超120億美元的消息，字節跳動回應稱消息并不準確。 ? ?
字節跳動豆包大模型1.5 Pro發布
近日，字節跳動旗下的豆包大模型迎來了全新的升級——豆包大模型1.5 Pro正式發布。這款全新模型在知識、代碼、推理、中文等多個測評基準上表現出色，綜合得分優于GPT-4o、Claude 3.5 Sonnet等業界知名模型，標志著
字節跳動發布豆包大模型1.5 Pro
字節跳動正式發布了豆包大模型1.5 Pro。 全新的Doubao -1.5 - pro模型綜合能力顯著增強，在知識、代碼、推理、中文等多個測評基準上，綜合得分優于GPT - 4o、Claude
字節跳動發布海外AI中文開發環境IDE：Trae
近日，字節跳動正式推出了一款全新的AI Coding產品——Trae(trae.ai)，該產品專為海外專業開發者設計，旨在實現從Copilot向Autopilot的跨越式演進。這款創新工具由字節
字節跳動與努比亞合作開發AI手機
近日，有消息稱字節跳動已經選擇努比亞作為其合作伙伴，共同開發AI手機。據悉，雙方已經簽訂了框架協議，明確了合作的具體內容和時間表。 根據協議內容，字節
字節跳動否認與中興通訊合作傳聞
近日，有關字節跳動旗下豆包大模型將內嵌手機并與中興通訊探討成立新品牌的消息引發了市場的廣泛關注。然而，字節跳動方面對此明確予以否認，稱并未與中興通訊就上述事宜展開討論。 據
字節跳動自研視頻生成模型Seaweed開放
近日，字節跳動旗下的AI內容平臺即夢AI傳來新消息，宣布自研的視頻生成模型Seaweed即日起正式面向平臺用戶開放使用。這一舉措標志著字節跳動在AI視頻領域邁出了堅實的一步。
字節跳動計劃在歐洲設立AI研發中心
字節跳動正積極布局歐洲市場，計劃在該地區設立AI研發中心。據知情人士透露，字節跳動已開始在歐洲尋找LLM(Large Language Model，大語言模型)和AI領域的技術大牛，積
字節跳動開啟新一輪股權回購
字節跳動近日向員工發布了新一輪股權回購的郵件通知。此次回購中，在職員工的稅前回購價定為每股180.7美元，而離職員工的回購價則為153.6美元。
字節跳動否認與臺積電合作AI芯片
近日，關于字節跳動計劃與臺積電攜手開發AI芯片的報道引發關注。對此，字節跳動迅速作出回應，明確表示該報道不實。字節方面透露，公司確實在芯片領
字節跳動發布豆包MarsCo智能開發工具
在數字時代的浪潮中，編程已成為推動科技進步和創新的核心動力。為了助力國內開發者更高效、智能地進行編程工作，字節跳動公司近日發布了全新的智能開發工具——豆包 MarsCode。這款工具基于強大的豆包大模型打造，全面免費開放使用，旨
工商網監
評論