首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

视频生成方法以及装置 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:阿里巴巴(中国)有限公司

摘要:本说明书实施例提供视频生成方法以及装置,其中所述视频生成方法包括:接收供虚拟对象参考的给定文本以及包含有所述虚拟对象形象的参考视频;根据所述参考视频获得参考面部模型以及所述参考面部模型的表情分量;提取所述给定文本的语音内容特征,并将所述语音内容特征与所述参考面部模型的表情分量进行拟合得到目标面部驱动模型;基于所述目标面部驱动模型和所述给定文本创建目标视频,实现了自动化的产出用户指定形象、指定文稿的虚拟对象视频,生成的虚拟对象视频真实自然,同时因为无需人工进行模型创建,所以极大降低了传统媒体行业视频制作的周期和成本,降低虚拟对象创建的门槛,为虚拟对象形象视频创作带去高效的流程和新体验。

主权项:1.一种视频生成方法,包括:接收供虚拟对象参考的给定文本以及包含有所述虚拟对象形象的参考视频,其中,所述参考视频为包含需要生成的目标视频中所述虚拟对象的形象的视频;对所述参考视频进行面部特征提取,获得参考面部参数,基于所述参考面部参数创建初始面部模型,对所述初始面部模型的面部像素点进行标记,得到参考面部模型,根据所述参考视频获得所述参考面部模型的表情分量,其中,所述参考面部参数为记载所述虚拟对象形象的面部特征的参数,初始面部模型为通过面部建模策略对所述虚拟对象形象进行面部建模后,得到的面部模型,所述面部像素点为所述初始面部模型中,面部区域所对应的全局像素点;提取所述给定文本的语音内容特征,并将所述语音内容特征与所述参考面部模型的表情分量进行拟合得到目标面部驱动模型,其中,所述语音内容特征通过提取所述给定文本的语义获得,所述目标面部驱动模型的获得:通过所述语音内容特征驱动所述参考面部模型的口型、表情和姿态发生变化,完成对所述语音内容特征到所述参考面部模型中面部特征的映射,根据映射结果获得所述目标面部驱动模型;基于所述目标面部驱动模型和所述给定文本创建目标视频。

全文数据:

权利要求:

百度查询: 阿里巴巴(中国)有限公司 视频生成方法以及装置

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。