买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：湖北微模式科技发展有限公司

摘要：本发明公开一种视频分区布局分析方法及装置，涉及视频分区布局分析技术领域，包括模型训练阶段和模型推理阶段；模型推理阶段包括以下步骤：步骤21，获取待检测视频，对待检测视频进行抽帧，采用每隔step秒抽一帧的方式进行抽帧，并且记录每幅抽帧图像的帧号；步骤22，对步骤21获得的每帧图像进行分区检测，得到每帧图像的人物分区、文档证件展示分区；步骤23，把视频进行分段，每一段内的视频帧具备相同的分区布局。本发明智能化地把视频分段，每段的视频帧具有相同的分区布局，并且把每帧的每个分区标记为人物分区、文档证件展示分区；实现金融行业录像视频资料的智能化质检稽核。

主权项：1.一种视频分区布局分析方法，其特征在于：包括模型训练阶段和模型推理阶段；模型训练阶段包括以下步骤：步骤11，获取样本生成需要的素材；步骤12，利用步骤11获取的素材生成训练样本，并且获得人物分区和文档证件展示分区的外接矩形坐标；步骤13，训练分区目标检测模型；模型推理阶段包括以下步骤：步骤21，获取待检测视频，对待检测视频进行抽帧，采用每隔step秒抽一帧的方式进行抽帧，并且记录每幅抽帧图像的帧号；步骤22，对步骤21获得的每帧图像进行分区检测，得到每帧图像的人物分区和文档证件展示分区；步骤23，把视频进行分段，每一段内的视频帧具备相同的分区布局；步骤22包括以下子步骤：步骤221，使用步骤13获得的分区目标检测模型对步骤21获得的每幅抽帧图像进行分区检测，获得人物分区和文档证件展示分区；步骤222，若步骤221获得的人物分区数量和文档证件展示分区数量的总和大于等于2，则记录人物分区和文档证件展示分区；步骤223，如果步骤221只检测到一个人物分区且没有文档证件展示分区，计算该分区的外接矩形内包含的像素数与抽帧图像的像素数的比值，如果比值大于阈值thr_rate，则把整张图像标记为人物分区；步骤224，如果步骤221只检测到一个文档证件展示分区且没有人物分区，计算该分区的外接矩形内包含的像素数与抽帧图像的像素数的比值，如果比值大于阈值thr_rate，则把整张图像标记为文档证件展示分区；步骤23包括以下子步骤：步骤231，对于步骤21获得的抽帧图像，利用步骤22获得的分区检测结果，逐一计算相邻抽帧图像的分区布局相似度，如果相似度大于阈值thr_area，则获得粗分段结果，并且记录对应的相邻抽帧的帧号，记为m，n；步骤232，获得第m帧和第n帧之间的所有图像帧，逐帧计算相邻图像帧的分区布局相似度，如果相似度大于阈值thr_area，则获得精分段结果，并且记录对应的相邻帧的帧号；步骤233，重复步骤231和步骤232，获得视频的分区布局的精分段结果，记录所有分区布局发生变化的精确视频帧号，直至对整个视频处理完成；步骤231和步骤232中计算分区布局相似度的方法是：设视频的第t帧的分区布局表示为其中为为第i个分区，为第i个分区的类别，表示分区为人物分区，表示分区为文档证件展示分区，为分区个数，表示第i个分区的外接矩形；第s帧和第t帧的分区布局相似度Similaritys,t计算方法是：若两帧的分区数量不同，则分区布局相似度为零；若两帧的分区数量相同，则对第s帧的每一个分区，在第t帧的所有分区中寻找与最为相似的分区并获得相应的最大分区相似度；把所有的最大分区相似度的平均值作为第s帧和第t帧的分区布局相似度。

全文数据：

权利要求：

百度查询： 湖北微模式科技发展有限公司 一种视频分区布局分析方法及装置