宁航 发自 凹非寺
量子位 报道 | 公众号 QbitAI

有没有想过让蒙娜丽莎跟着你的表情动，来一番亲切的交流？

Aliaksandr的一阶运动模型（First Order Motion Model）可以实现，但是实现过程非常复杂且繁琐。

一阶运动模型功能强大，可以在未经预训练的数据集上对图像和视频进行特效生成，但代价是安装配置比较繁琐。

能不能简单一点，再简单一点？

印度一位程序员阿南德·帕瓦拉（Anand Pawara）设计了基于OpenCV实现的实时动画特效。

毕竟OpenCV是成名已久的跨平台视觉库，是事实上的计算机视觉领域的标准库。

项目中涉及的人脸识别、动作识别和运动跟踪，均在OpenCV库中原生支持。

几天前，阿南德在GitHub上开源了完整代码，并给出实现具体过程。

走过路过，不要错过。

安装过程

1、安装依赖模块

安装依赖模块：

pip install -r requirements.txt

安装pytorch 1.0.0 :

pip install torch===1.0.0 torchvision===0.2.1 -f https://download.pytorch.org/whl/cu100/torch_stable.html

2、下载配置文件（如果不能下载，文件链接在文末）

gdown —id 1wCzJP1XJNB04vEORZvPjNz6drkXm5AUK

3、运行程序

运行文件 :

python image_animation.py -i path_to_input_file -c path_to_checkpoint

针对摄像头的实时特效生成 :

python .\image_animation.py -i .\Inputs\Monalisa.png -c .\checkpoints\vox-cpk.pth.tar Run application from video file : python image_animation.py -i path_to_input_file -c path_to_checkpoint -v path_to_video_file

针对既有视频的特效生成 :

python .\image_animation.py -i .\Inputs\Monalisa.png -c .\checkpoints\vox-cpk.pth.tar -v .\video_input\test1.mp4

如果你想上手试试，只需要调整相关配置文件即可。

模型分为两种使用模式，一种是较为常规的导入视频常规方法，另外一种就是实时生成视频特效。

但是，请注意，一定要使用pytorch 1.0.0版本，因为更高的版本在后端依赖的一阶模型上存在问题。

按照作者的后续计划，会推出客户端程序，并且会增加假声（deepfake voice）功能。

立足OpenCV的优化

阿南德所做的工作是简化现有的一阶运动模型（First Order Motion Model），使用OpenCV对视频进行特效生成。

项目的后端支持由OpenCV库完成，避免使用复杂的模型，降低使用门槛。

按照作者观点，使用这个模型只需要对一类数据集进行训练后，便可应用到对其全部事物上去，即具有较好的泛化能力。

不同于原一阶模型的多个数据集测试效果，现在阿南德实时动态特效模型还只在人脸数据集上进行测试，后续后持续增加其他数据集。

这个模型的特点是易用，配置非常简单，基本可以开箱即用，即使是训练自己的数据集也会比较简单。

因为立足于对现有资源进行优化配置，操作简易，功能强大。

当然，简单也会带来问题，比如现在数据集较为单一，针对的主要是人脸数据集。

此外，对人脸的轮廓识别效果还不那么令人满意，需要加以改造。

作者简介

项目作者阿南德·帕瓦拉（Anand Pawara）是印度AvenDATA公司的一名深度学习工程师，现居孟买。

繁琐的工作自动化，大幅度降低上手的难度。

完整实现过程连接在下面，如果有兴趣，欢迎自己去试试哟~

参考链接：
https://github.com/anandpawara/Real_Time_Image_Animation
https://m.weibo.cn/1402400261/4508119667605445

— 完 —

量子位 QbitAI · 头条号签约

关注我们，第一时间获知前沿科技动态

dobe Character Animator 2021免费版是一款由知名产商Adobe公司精心推出的一款简单实用且专业强大的2D角色动画制作程序应用。软件整体的界面风格卡通简约，功能齐全，其主要常用于为卡通片、动画片和现场直播制作动画，以及社交媒体构建卡通形象等，旨在帮助广大用户可以使用自己的作品将生动的表现力带给人们。且使用简单快捷，用户只需要有一个摄像头，加上一个麦克风，再根据需要做出各种不同的表情，它能够跟踪你的口型、眼部细节等，在几秒钟就能够生成一个具有真实的表情、动作的人物角色动画，表情丰富而自然！

内容来源：http://www.32r.com/soft/95098.html

dobe Animate 是一款强大的动画制作软件，使用可轻松创建各种动画内容，为游戏、应用程序和 Web 设计交互式矢量和位图动画。让卡通和横幅广告栩栩如生。并为教程和信息图表添加操作。借助 Animate CC，您可以快速发布到多个平台并覆盖桌面、移动设备和电视上的观众。

需 要软件 的可以 复 制 链 接 再 打 开 获取

https://www.xxrjm.com/14521.html?aff=lmj3ql

Adobe Animate 2022软件介绍

动画几乎任何东西。

行业领先的动画工具集可让您创建可在任何屏幕上移动的应用程序、广告和令人惊叹的多媒体内容。

开始你的游戏。

使用强大的插图和动画工具为游戏和广告创建基于 Web 的交互式内容。构建游戏环境、设计开始屏幕和界面、创建交互式玩家精灵，甚至集成音频。借助 Animate，您可以直接在应用程序内进行所有资产设计和编码。

创建栩栩如生的角色。

使用对压力和倾斜敏感的矢量画笔来草绘和绘制更具表现力的角色，效果与真实作品相似。通过简单的逐帧动画让您的角色眨眼、说话和行走。并创建响应用户交互（例如鼠标移动、触摸和点击）的交互式 Web 横幅。

发布到任何平台。

通过将动画导出到多个平台（包括 HTML5 Canvas、WebGL、Flash/Adobe AIR 和 SVG 等自定义平台），在桌面、移动和电视上吸引观众。您可以在项目中直接包含代码，甚至无需编写代码即可添加操作。

资产雕刻

使用网格变形为矢量或光栅内容创建新姿势。

更好的图层控制

在父子层次结构中组织您的图层，以便更轻松地在姿势之间制作动画。

自动口型同步

感谢 Adobe Sensei，Animate 现在可以自动将嘴巴姿势与声音变化相匹配。

VR 创作和发布（测试版）

使用您的 2D 技能导出 360 VR 动画并为虚拟漫游创建身临其境的体验。