买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:厦门美图之家科技有限公司
摘要:本发明提供了一种基于扩散模型的人像写真生成方法、系统、设备及存储介质,包括:采集用户人像图和风格训练图并分别进行预处理,获得用户人像数据和风格训练数据;将用户人像数据输入至用户LoRA模型中,获得用户特征信息,将风格训练数据输入至风格LoRA模型中,获得风格特征信息,其中,用户LoRA模型和风格LoRA模型通过参数自适应预算分配策略进行改进;采用图像编码器对用户人像图进行特征提取,获得人脸特征信息;根据使用场景调整用户LoRA模型和风格LoRA模型之间的权重比例,将用户特征信息、风格特征信息以及人脸特征信息输入至扩散模型中,最终获得人像写真图。本申请能够实现输出真实、自然、相似度与美观度兼具、风格可控的人像写真图。
主权项:1.一种基于扩散模型的人像写真生成方法,其特征在于,包括以下步骤:S1、采集用户人像图和风格训练图并分别进行预处理,获得用户人像数据和风格训练数据;S2、将所述用户人像数据输入至用户LoRA模型中,获得用户特征信息,将所述风格训练数据输入至风格LoRA模型中,获得风格特征信息,其中,所述用户LoRA模型和所述风格LoRA模型通过参数自适应预算分配策略进行改进;S3、采用图像编码器对所述用户人像图进行特征提取,获得人脸特征信息;S4、根据使用场景调整所述用户LoRA模型和所述风格LoRA模型之间的权重比例,将所述用户特征信息、风格特征信息以及所述人脸特征信息输入至扩散模型中,最终获得人像写真图。
全文数据:
权利要求:
百度查询: 厦门美图之家科技有限公司 基于扩散模型的人像写真生成方法、系统、设备及存储介质
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。