买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:湖南三岳数维科技有限公司
摘要:本申请涉及图像处理技术领域,具体涉及基于文本信息借助三维渲染生成视频的方法及系统,该方法包括:通过大语言模型剧本生成器将用户文本转化为格式剧本,根据格式剧本结合大模型驱动的3D模型生成运动3D场景,获得格式剧本描述的3D场景中各3D模型和摄像机视角数据,得到未渲染视频;获取各3D模型对应的格式剧本中的名词,确定各3D模型对应的名词;确定每帧图像中各3D模型的所有映射数据对;确定每帧图像中各3D模型的渲染权重和最短边长,对所有3D模型进行重构,通过渲染引擎的方式对未渲染视频进行渲染,最终获得文生视频。本申请可对不同3D模型的差别化渲染,加快视频渲染速度,解决渲染时间过长的问题。
主权项:1.基于文本信息借助三维渲染生成视频的方法,其特征在于,该方法包括以下步骤:获取用户文本,并采用大语言模型剧本生成器,获得格式剧本,基于格式剧本描述的3D场景中各3D模型和摄像机视角数据,获得未渲染视频;基于格式剧本和未渲染视频中所有图像的各3D模型,获取各3D模型对应的格式剧本中的名词;根据各3D模型对应的格式剧本中的名词与用户文本的名词的匹配情况,确定各3D模型对应的名词;根据各3D模型内像素点的数量,各3D模型与摄像机视角数据的距离,及其对应的每个名词与每帧图像的映射关系,确定每帧图像中各3D模型的所有映射数据对;基于所述映射数据对,分析每帧图像中各3D模型对应的每个名词在用户文本中的位置分布情况,确定每帧图像中各3D模型的渲染权重;基于所述渲染权重,确定每帧图像中各3D模型的最短边长,对所有3D模型进行重构,通过渲染引擎的方式对未渲染视频进行渲染,最终获得文生视频。
全文数据:
权利要求:
百度查询: 湖南三岳数维科技有限公司 基于文本信息借助三维渲染生成视频的方法及系统
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。