买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：天津萨图芯科技有限公司;绍兴数鸿科技有限公司

摘要：本发明公开了一种截取引擎渲染内容的虚拟制片视频重映方法及系统。本发明采用的虚拟制片环境重映方式，通过将包含视频画面帧和视频增强信息SEI帧的母片以及虚拟引擎渲染画面存储于服务器上，可通过对母片进行剪辑然后解码得到母片中隐藏的视频增强信息。拍摄子片时用户可以无需通过引擎来进行背景环境的复现，背景的播放仅仅需要和硬件在统一的时间流下完成同步即可，且虚拟制片设备可利用解码得到的视频增强信息自动进行设备控制。本发明可采用的机器人来降低虚拟制片的拍摄门槛和成本，在子片拍摄过程中机器人可以完全代替摄影师所需要完成的工作。

主权项：1.一种截取引擎渲染内容的虚拟制片视频重映方法，其特征在于，包括：S1、从服务器上读取用户指定的视频母片；所述视频母片包含视频画面帧和视频增强信息SEI帧，拍摄过程中出现的每一组新的视频增强信息均被编码为SEI帧并在视频码流中插入对应时间戳的视频画面帧之前；且所述服务器上预先存储有视频母片中的每一帧图像所对应背景的虚拟引擎渲染画面；S2、获取用户针对视频母片的剪辑操作，删除视频码流中的所有被剪除片段，并对视频码流中每一段被剪除片段之前的第一帧赋予暂停标志符，对视频码流中每一段被剪除片段之后的第一帧赋予开始标志符，且如果任意一段被剪除片段中间含有至少一帧视频增强信息SEI帧，则将这一段被剪除片段中最后一帧视频增强信息SEI帧插入这一段被剪除片段之后的第一帧视频画面帧之前，最终形成带有标志符的剪辑后母片；S3、逐帧遍历剪辑后母片，根据帧头信息判断帧类型，若为视频画面帧则从服务器上获取该视频画面帧所对应的虚拟引擎渲染画面，若为视频增强信息SEI帧则通过解码从中提取视频增强信息；剪辑后母片中所有视频画面帧的虚拟引擎渲染画面以及所有视频增强信息SEI帧的视频增强信息均存储至本地端；S4、监听用户发出的母片播放指令，在收到用户发出的母片播放指令后，开始逐帧播放剪辑后母片，播放过程中从本地端逐帧读取虚拟引擎渲染画面显示到虚拟制片的背景显示屏中，同时按照视频增强信息SEI帧的时间戳从本地端读取对应的视频增强信息发送给虚拟制片设备，虚拟制片设备解析收到的视频增强信息后做出相应的设备控制动作；播放过程中，若剪辑后母片中出现暂停标志符，则需要暂停母片播放并向用户发出暂停提示，同时向虚拟制片设备发送下一个开始标志符出现时刻对应的视频增强信息，并监控虚拟制片设备是否完成设备控制动作的切换，待完成后向用户发出继续拍摄提示；在所述S3中，还需要扫描剪辑后母片中成对的暂停标志符和开始标志符，并计算虚拟制片设备从暂停标志符出现时刻对应的视频增强信息转换到开始标志符出现时刻对应的视频增强信息所需的转换时间，并将每一对标志符对应的转换时间存储至本地端，在向用户发出暂停提示时需将对应的转换时间显示为暂停所需时间；所述视频增强信息包含摄像机的空间位置、摄像机的姿态信息、摄像机自身控制参数、灯光控制参数和音效控制参数；所述摄像机通过能自行移动和姿态调整的拍摄机器人进行控制，所述转换时间为拍摄机器人从暂停标志符出现时刻所处的空间位置移动到开始标志符出现时刻所处的空间位置所需的时间，通过最短路径规划算法进行路径规划后结合拍摄机器人移动速度计算得到。

全文数据：

权利要求：

百度查询： 天津萨图芯科技有限公司 绍兴数鸿科技有限公司 截取引擎渲染内容的虚拟制片视频重映方法及系统