GitHub 项目:Moore-AnimateAnyone
仓库地址:https://github.com/MooreThreads/Moore-AnimateAnyone
星级:3501 | 作者:摩尔线程
项目描述:角色动画(AnimateAnyone,面部重演)
===================================================
自述文件内容:
#?简介
**更新** ??? 我们提出了一种基于 AnimateAnyone 管道的面部重演方法:使用驾驶视频的面部标志来控制给定源图像的姿势,并保持源图像的身份。特别是,我们将头部姿态(包括眨眼)和嘴部运动从驾驶视频的标志中分离出来,可以精确控制源面部的表情和动作。我们发布了我们的推理代码和预训练的面部重现模型!
**更新** ?️?️?️ 我们发布了我们的训练代码!现在您可以训练自己的 AnimateAnyone 模型。有关更多详细信息,请参阅[此处](#train)。玩得开心!
**更新**:??? 我们在[此处](https://huggingface.co/spaces/xunsong/Moore-AnimateAnyone) 推出了 Moore-AnimateAnyone 的 HuggingFace Spaces 演示!
此存储库重现了 [AnimateAnyone](https://github.com/HumanAIGC/AnimateAnyone)。为了对齐原始论文演示的结果,我们采用了各种方法和技巧,这些方法和技巧可能与论文和另一个[实现](https://github.com/guoqincode/Open-AnimateAnyone)有所不同。
值得注意的是,这是一个非常初步的版本,旨在接近 [AnimateAnyone](https://github.com/HumanAIGC/AnimateAnyone) 中显示的性能(在我们的测试下大约为 80%)。
我们将继续开发它,也欢迎社区的反馈和想法。增强版也将在我们的[MoBi MaLiang](https://maliang.mthreads.com/) AIGC平台上推出,运行在我们自己的全功能GPU S4000云计算平台上。
# ? 发布计划
- [x] AnimateAnyone 的推理代码和预训练权重
- [x] AnimateAnyone 的训练脚本
- [x] 人脸重现的推理代码和预训练权重
- [ ] 人脸重现训练脚本
- [ ] 音频驱动肖像视频生成的推理脚本
- [ ] 音频驱动肖像视频生成的训练脚本
# ?️ 示例
## 动画任何人
以下是我们生成的一些 AnimateAnyone 结果,分辨率为 512x768。
https://github.com/MooreThreads/Moore-AnimateAnyone/assets/138439222/f0454f30-6726-4ad4-80a7-5b7a15619057
https://github.com/MooreThreads/Moore-AnimateAnyone/assets/138439222/337ff231-68a3-4760-a9f9-5113654acf48
<表类=“中心”>
|
<视频控制自动播放循环 src="https://github.com/MooreThreads/Moore-AnimateAnyone/assets/138439222/9c4d852e-0a99-4607-8d63-569a1f67a8d2" muted="false">
|
<视频控制自动播放循环 src="https://github.com/MooreThreads/Moore-AnimateAnyone/assets/138439222/722c6535-2901-4e23-9de9-501b22306ebd" muted="false">
|
|
<视频控制自动播放循环 src="https://github.com/MooreThreads/Moore-AnimateAnyone/assets/138439222/17b907cc-c97e-43cd-af18-b646393c8e8a" muted="false">
|
这篇文章对您有帮助吗?
微信扫一扫分享
打开微信扫描二维码
|