字节跳动OmniHuman数字人模型即将上线:图音频结合,轻松生成视频!

字节跳动OmniHuman数字人模型即将上线:图音频结合,轻松生成视频!

作者: 发表时间:2026-07-15 12:51:27
丽水市灾害救助app 中山市安全宣传app 赤峰市第一中学app 庆阳市政府信息公开指南app 南京市工商局app 嘉兴市第二中学app 邢台市电视台广播app 辽源市土木工程app 新乡市农业补贴app 巴中市台风监控中心app 石嘴山市公共文化服务app 吴忠市第二中学app 泰州市第三小学app 三门峡市粮食管理app 本溪市防火app 永州市第五中学app 苏州市通讯协会app 酒泉市风力发电app 达州市非物质文化遗产app 那曲市防火app 海口市消费协会app 巴中市公共文化服务app 那坡县建设局信息app 古田县环境保护协会app 略阳县第二中学app 通化县人社管理app 定安县政务服务app 金塔县应急管理app 沈丘县第二高中app 桃源县政府公报app 贵定县消防宣传app 涉县教研app 广饶县建设局信息app 盐源县森林消防app 民和回族土族自治县特殊家庭关爱协会app 上犹县教研app 永登县专题专栏app 集贤县应急管理app 玉龙纳西族自治县第四小学app 齐河县政要信息app 沭阳县重大建设公开app 泗县第一高中app 宝应县农业app 阳曲县第二中学app

近期,抖音集团旗下备受瞩目的图片视频工具即梦AI在官方社交媒体上重磅发布了一条新功能上线预告片,预示着即梦AI又将带来全新的精彩体验!

字节跳动OmniHuman数字人模型即将上线:图音频结合,轻松生成视频!

视频显示,新功能采用了全新的多模态视频生成模型OmniHuman,让用户仅需输入一张图片和一段音频,就可以生成一条生动的AI视频,有望大幅提升AI短片的制作效率和质量。

OmniHuman技术主页信息显示,该模型为字节跳动自研的闭源模型,可支持肖像、半身以及全身等不同尺寸的图片输入,并根据输入的音频,在视频中让人物生成与之匹配的动作,包括演讲、唱歌、乐器演奏以及移动。

对于人物视频生成中常见的手势崩坏,也相比现有方法取得了显著的改善。

此外,对动漫、3D卡通等非真人图片输入的支持效果也较为出色,生成的视频能保持特定风格和原有的运动模式。

根据技术主页展示的演示效果来看,OmniHuman的生成效果已经具有较高的自然度。为防止该项技术被不当利用,字节跳动技术团队在主页中特别标注称,OmniHuman将不会对外提供下载。

即梦AI相关负责人透露,该模型目前已具备较好的表现,但在生成影视真实级别的视频上仍存在一定的提升空间。

由其支持的多模态视频生成功能会在即梦上以小范围内测的形式进行调优调整,并逐步开放。

该负责人同时表示,即梦还会对这一功能设置严格的安全审核机制,并且对输出的视频标注水印以作提醒,从而确保AI发挥正面、积极的作用,助力视频创作者更好地实现想象力的表达。

相关文章