申请/专利权人:厦门大学
申请日:2022-04-07
公开(公告)日:2024-06-04
公开(公告)号:CN114821399B
主分类号:G06V20/40
分类号:G06V20/40;G06N3/0464;G06N3/08;G06V10/82
优先权:
专利状态码:有效-授权
法律状态:2024.06.04#授权;2022.08.16#实质审查的生效;2022.07.29#公开
摘要:本发明涉及视频教学领域,具体是一种面向智慧课堂的板书自动提取方法,包括S1:以视频流输入的第一帧作为初始化背景进行缓存;S2:从视频第二帧开始,将每个输入帧输入已训练好的人物分割网络,以获取人物遮罩的输出;S3:根据输出的人物遮罩,分别对视频输入帧和背景缓存进行抠像处理,分离出前景、后景图像;S4:将得到的视频输入帧的背景图像与背景缓存的前景图像进行叠加,并将叠加后的图像作为背景缓存,对背景缓存进行逐帧更新;S5:将视频输入帧的前景图像与背景缓存进行线性结合,以获得手写内容强化后的输出图像。
主权项:1.一种面向智慧课堂的板书自动提取方法,其特征在于,包括:S1:以视频流输入的第一帧作为初始化背景进行缓存;S2:从视频第二帧开始,将每个输入帧输入已训练好的人物分割网络,以获取人物遮罩的输出;S3:根据输出的人物遮罩,分别对视频输入帧和背景缓存进行抠像处理,分离出前景、后景图像;S4:将得到的视频输入帧的背景图像与背景缓存的前景图像进行叠加,并将叠加后的图像作为背景缓存,对背景缓存进行逐帧更新;具体通过以下公式更新背景缓存: 其中,为更新后的背景缓存图像矩阵;为视频输入帧分离出的背景图像矩阵;为在背景缓存上应用与视频输入帧相同的人物遮罩所提取的前景图片矩阵;S5:将视频输入帧的前景图像与背景缓存进行线性结合,以获得手写内容强化后的输出图像;具体通过以下公式对视频输入帧的前景图像及背景缓存进行线性结合: +其中,为输出图像矩阵;为透明度系数;为分离后的视频输入帧的前景图像矩阵,为在背景缓存上应用与视频输入帧相同的人物遮罩所提取的前景图片矩阵;为视频输入帧分离出的背景图像矩阵。
全文数据:
权利要求:
百度查询: 厦门大学 一种面向智慧课堂的板书自动提取方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。