蚂蚁集团开源 EchoMimic:支持为人像照片对口型、生成肖像动画视频
来源: 投稿 作者: 菠萝的海子 2024-07-12 11:22:00 2蚂蚁集团发布了开源项目 EchoMimic。据介绍,EchoMimic 不仅能根据人像面部特征和音频来帮人物对口型,还可以结合面部标志点和音频内容生成较为稳定、自然的视频。
EchoMimic 具备较高的稳定性和自然度,通过融合音频和面部标志点(面部关键特征和结构,通常位于眼、鼻、嘴等位置)的特征,可生成更符合真实面部运动和表情变化的视频。
其支持单独使用音频或面部标志点生成肖像视频,也支持将音频和人像照片相结合做出 “对口型” 一般的效果。
下图是 EchoMimic 的工作原理:
EchoMimic 支持多语言(包含中文普通话、英语)及多风格,也可应对唱歌等场景。
访问主页查看更多示例:https://badtobest.github.io/echomimic.html
本站新闻禁止未经授权转载,违者依法追究相关法律责任。授权请联系:oscbianji#oschina.cn
本文标题:蚂蚁集团开源 EchoMimic:支持为人像照片对口型、生成肖像动画视频
本文地址:https://www.oschina.net/news/301682
标签:视频,音频,面部,EchoMimic,对口型,开源 From: https://www.cnblogs.com/sexintercourse/p/18312064