首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

一种基于Transformer和AdaIN的人脸交换算法 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:广东烟草河源市有限责任公司

摘要:一种基于Transformer和AdaIN的人脸交换算法,本发明法采用Self‑IN级联模块,结合自注意力机制和AdaIN算法,精确建模源人脸与目标人脸之间的全局关系和局部特征,以完成更高效的身份替换;一个端到端的人脸交换算法,通过人脸分割模型,实现更精确的Source身份嵌入和融合,从而提升面部交换结果的身份交换程度,和背景保持程度。

主权项:1.一种基于Transformer和AdaIN的人脸交换算法,其特征在于,包括编码器,解码器、辨别器和生成器,处理步骤如下:S1:定义目标图片和源图片;S2:从目标图片中检测人脸,获得仿射变换矩阵,将检测得到的人脸图像进行关键点矫正后读取为RGB三通道图并经过数据增强;S3:从源图片中检测人脸,将人脸按照VGGFACE的对齐点位方式,进行仿射变换,将得到的人脸图片进一步的通过双三次插值的方式调整大小,将人脸图片传入人脸分割模型获得只包含面部的人脸图片,将人脸图片传入身份提取模型获取得到身份向量;S4:结合经过处理好的目标图片和源图片的身份向量传入Self-IN网络中;S5:通过编码器提取目标图片的非身份特征和背景特征并将目标图片编码为高维特征;S6:将目标图片的高维特征和源图片的身份向量经过Self-IN身份模块和AdaIN模块完成身份特征嵌入,得到身份-背景属性融合的混合属性;S7:将混合属性输入解码器中,生成Swap图片;S8:将Swap图片和步骤S1目标图片得到的仿射变换矩阵进行逆变换并贴回源图片。

全文数据:

权利要求:

百度查询: 广东烟草河源市有限责任公司 一种基于Transformer和AdaIN的人脸交换算法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

AdaIN相关技术