申请/专利权人：腾讯科技(深圳)有限公司

申请日：2024-04-11

公开（公告）日：2024-06-25

公开（公告）号：CN118037608B

主分类号：G06T5/80

分类号：G06T5/80;G06T17/00;G06T19/20

优先权：

专利状态码：有效-授权

法律状态：2024.06.25#授权;2024.05.31#实质审查的生效;2024.05.14#公开

摘要：本申请公开一种人脸矫正模型的训练方法、姿态矫正方法及相关产品。通过待训练人脸矫正模型对第二人脸图像帧进行渲染，获得第二人脸图像帧对应的渲染图像，并对渲染图像和第二人脸图像帧进行结合，获得第二人脸图像帧对应的人脸矫正图像帧；由待训练人脸矫正模型对第一人脸图像帧和渲染图像进行处理，获得第一人脸图像帧对应的矫正图像预测帧。可见，本申请通过使待训练人脸矫正模型学习生成真实矫正图像帧的方式，来矫正人脸图像，从而使得训练成功的人脸矫正模型可以生成更加真实的矫正图像帧，避免了利用相关技术对图像进行变换及旋转的方式导致的矫正效果较差的问题，进而提高了图像矫正效果。

主权项：1.一种人脸矫正模型的训练方法，其特征在于，包括：获取人脸视频中的第一人脸图像帧和第二人脸图像帧；将所述第一人脸图像帧和所述第二人脸图像帧输入至待训练人脸矫正模型中，以通过所述待训练人脸矫正模型对所述第二人脸图像帧进行渲染，获得所述第二人脸图像帧对应的渲染图像，并对所述渲染图像和所述第二人脸图像帧进行结合，获得所述第二人脸图像帧对应的人脸矫正图像帧，其中所述人脸矫正图像帧为所述第二人脸图像帧的真实矫正图像帧；由所述待训练人脸矫正模型对所述第一人脸图像帧和所述渲染图像进行处理，获得所述第一人脸图像帧对应的矫正图像预测帧；由所述待训练人脸矫正模型对所述人脸矫正图像帧和所述矫正图像预测帧进行判别，确定所述人脸矫正图像帧属于真实矫正图像帧的第一概率，以及确定所述矫正图像预测帧属于真实矫正图像帧的第二概率；基于所述第一概率和所述第二概率，对所述待训练人脸矫正模型的参数进行调整，直至调整后的模型满足模型训练截止条件，训练结束获得人脸矫正模型；所述待训练人脸矫正模型包括3D矫正模块，所述通过所述待训练人脸矫正模型对所述第二人脸图像帧进行渲染，获得所述第二人脸图像帧对应的渲染图像，包括：通过所述待训练人脸矫正模型中的3D矫正模块对所述第二人脸图像帧进行特征提取，获得所述第二人脸图像帧对应的面部姿态特征和图像身份特征；由所述待训练人脸矫正模型中的3D矫正模块对所述面部姿态特征进行矫正，获得矫正后的面部姿态特征；根据所述矫正后的面部姿态特征，获得所述第二人脸图像帧对应的渲染图像；所述对所述渲染图像和所述第二人脸图像帧进行结合，获得所述第二人脸图像帧对应的人脸矫正图像帧，包括：将所述矫正后的面部姿态特征和所述图像身份特征进行特征融合，获得所述第二人脸图像帧对应的人脸矫正图像帧。

全文数据：

权利要求：

百度查询： 腾讯科技(深圳)有限公司 一种人脸矫正模型的训练方法、姿态矫正方法及相关产品

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD