字节跳动展示 OmniHuman 多模态框架:图片 + 音频 = 逼真动画,半身全身均可生成

发布时间:2025-02-07 02:33:04 来源:互联网

本站 2 月 6 日消息,字节跳动的研究人员近日展示了一款 AI 模型,可以通过一张图片和一段音频生成半身、全身视频。

字节跳动表示,和一些只能生成面部或上半身动画的深度伪造技术不同,OmniHuman-1 能够生成逼真的全身动画,且能将手势和面部表情与语音或音乐精准同步。

字节跳动在其 OmniHuman-lab 项目页面发布了多个测试视频,包括 AI 生成的 TED 演讲和一个会说话的阿尔伯特・爱因斯坦。

在周一发布的一篇论文中,字节跳动指出,OmniHuman-1 模型支持不同的体型和画面比例,从而使视频效果更自然。

据本站了解,字节跳动表示,OmniHuman-1 模型基于约 19000 小时的人类运动数据训练而成,能够在内存限制内生成任意长度的视频,并适应不同的输入信号。

研究人员还表示,OmniHuman-1 在真实性和准确性方面,超越了其他同类动画工具。目前,该工具暂不提供下载或有关服务。

本周热门教程

1
鸿蒙智行智界 R7 汽车获今年 1 月 25 万以上中国品牌纯电 SUV 销量冠军,上市 4 月累计交付超 4 万台

鸿蒙智行智界 R7 汽车获今年 1 月 25 万以上中国品牌纯电 SUV 销量冠军,上市 4 月累计交付超 4 万台

2025/02/07

2
云顶之弈s10超粉女枪巴德阵容攻略 s10超粉女枪巴德阵容怎么搭配

云顶之弈s10超粉女枪巴德阵容攻略 s10超粉女枪巴德阵容怎么搭配

2025/02/06

3
华为 ModelEngine AI 平台支持 DeepSeek 全系列本地部署

华为 ModelEngine AI 平台支持 DeepSeek 全系列本地部署

2025/02/06

4
OPPO 马新:ColorOS 后续版本将增加热区规避方案,减少用户横屏状态操控浮窗误触情况

OPPO 马新:ColorOS 后续版本将增加热区规避方案,减少用户横屏状态操控浮窗误触情况

2025/02/07

5
黑暗寓言4小红帽骑士团攻略第二章1 微型城堡获得方法

黑暗寓言4小红帽骑士团攻略第二章1 微型城堡获得方法

2025/02/08

6
PayPal支付为什么如此受欢迎?它的优势和使用技巧有哪些?

PayPal支付为什么如此受欢迎?它的优势和使用技巧有哪些?

2025/02/15

7
如何挑选适合自己需求的国产“又粗又长”产品:有哪些关键因素值得注意?

如何挑选适合自己需求的国产“又粗又长”产品:有哪些关键因素值得注意?

2025/02/19

8
如何克服新婚之夜的紧张与不适:让两个人的亲密时光更顺利

如何克服新婚之夜的紧张与不适:让两个人的亲密时光更顺利

2025/03/03

9
巫师之昆特牌王权的陨落第一章解密合集

巫师之昆特牌王权的陨落第一章解密合集

2025/03/07

10
航海王壮志雄心海域探险沉船打捞方法

航海王壮志雄心海域探险沉船打捞方法

2025/03/17