Record speech video with a camera and convert it into a facial animation.
PoseRecorder:
Installer
SetupPoseRecorder.msi
Use:
Record a facial video file, for instance with a smartphone
Open the video file and save it as DAZ animation to a material folder
Possible to mirror parts of the face
You can leave something out so you can do the part with some other method. For instance, you might decide to do pupil movement manually
You can adjust the timing so you can make the animation slow motion
功能:使用相机录制语音视频并将其转换为面部动画。
安装:绿色版本解压后双击PoseRecorder.exe启动,解压路径如果有中文请改为英文或者拼音。
启动后如果因为无法连接国外服务器下载opencv深度学习数据集,可以手动解压PoseRecorder data.zip,把里边的所有文件(不带文件夹)移动到C:\Users\XX\AppData\Local\PoseRecorder\data路径下,XX改为你自己的电脑用户名。
用法:1,用手机或者相机录制一段头部固定视角的说话视频(可以带个头盔将相机固定到你头上)。2,启动PoseRecorder,点File菜单下的Open选项浏览到你录制的视频,等待几秒解析后视图出现视频图像,再点File菜单下的Save选项保存,保存路径不要用中文目录和中文名字。3,启动daz软件,输入人物模型,把步骤2保存的表情数据文件直接拖到你daz视图中的人物角色身上,点击动画面板的播放即可预览。
注意,这是基于opencv的开源算法,因为数据集精度不够,所以只能识别一些简单的表情。
评论1