10.16451/j.cnki.issn1003-6059.202106009
基于关键点表示的语音驱动说话人脸视频生成
针对现有语音生成说话人脸视频方法忽略说话人头部运动的问题,提出基于关键点表示的语音驱动说话人脸视频生成方法.分别利用人脸的面部轮廓关键点和唇部关键点表示说话人的头部运动信息和唇部运动信息,通过并行多分支网络将输入语音转换到人脸关键点,通过连续的唇部关键点和头部关键点序列及模板图像最终生成面部人脸视频.定量和定性实验表明,文中方法能合成清晰、自然、带有头部动作的说话人脸视频,性能指标较优.
说话人脸、人脸关键点、唇部动作、头部动作、人脸视频
34
TP391.4(计算技术、计算机技术)
协同创新项目;国家自然科学基金;安徽省自然科学基金;安徽省高等学校自然科学研究项目;合肥学院人才科研基金项目
2021-07-19(万方平台首次上网日期,不代表论文的发表时间)
共9页
572-580