近日,字节跳动携手浙江大学科研团队,在AI技术领域再次迈出坚实步伐,其研发的Loopy对口型技术正式在即梦平台上线,标志着数字人表演进入了一个全新的纪元。这一创新技术不仅实现了声音与画面的完美同步,更通过智能算法让数字人在不同语境下展现出细腻的表情和情绪,为用户带来了前所未有的沉浸式体验。
传统对口型视频往往因声音与画面不匹配而饱受诟病,观众在观看时难以产生共鸣,甚至产生割裂感。而Loopy技术的问世,则彻底打破了这一僵局。该技术基于音频驱动的视频扩散模型,能够精准捕捉声音中的每一个细微变化,并驱动数字人的面部肌肉、眉毛、眼睛乃至头部进行自然运动,使得对口型表演更加生动、真实。
在即梦平台上,用户可轻松体验Loopy技术的魅力。平台提供了两种对口型方式:文本朗读和上传本地配音。用户只需上传角色图片或视频,输入文本并选择配音,即可生成一段栩栩如生的对口型视频。无论是高冷御姐的沉稳对话,还是抖音热门歌曲的欢快演唱,Loopy都能让数字人展现出最符合语境的情感表达。
值得一提的是,Loopy技术还注重细节处理。在测试过程中,我们发现数字人在说话时不仅口型准确,连法令纹等细微处的动态变化也极为真实。此外,该技术还能根据配音内容自动调整数字人的眼神方向、头部运动等,进一步增强了视频的代入感和观赏性。
即梦平台的这一创新举措,无疑为数字人产业注入了新的活力。随着Loopy技术的不断成熟和完善,相信未来将有更多优秀的数字人作品涌现出来,为观众带来更多惊喜和感动。
即梦平台作为字节跳动旗下的重要项目之一,一直致力于推动数字人技术的创新与发展。此次Loopy技术的上线,不仅是即梦平台技术实力的一次展现,也是其对未来数字人表演趋势的深刻洞察和把握。我们期待即梦平台能够继续引领行业潮流,为数字人产业的繁荣发展贡献更多力量。