首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

【发明公布】一种基于时空注意力的双流网络课堂行为识别方法_武汉纺织大学_202410578650.8 

申请/专利权人:武汉纺织大学

申请日:2024-05-11

公开(公告)日:2024-06-07

公开(公告)号:CN118155294A

主分类号:G06V40/20

分类号:G06V40/20;G06V20/40;G06V10/80;G06V10/82;G06N3/045;G06N3/09;G06Q50/20

优先权:

专利状态码:在审-公开

法律状态:2024.06.07#公开

摘要:本发明公开了一种基于时空注意力的双流网络课堂行为识别方法,所述方法包括以下步骤:S1:设计适用于课堂行为识别的行为检测模型;所述行为检测模型包括空间信息提取模块、时间信息提取模块、侧向链接模块和预测模块;S2:使用损失函数和时空注意力模块训练设计好的行为检测模型,得到训练好的行为检测模型;S3:使用训练好的行为检测模型对视频流进行实时监测,生成带有人物框和动作标签的矩形框。该方法能够有效解析视频帧中的行为特征信息,提高对视频中各类学习行为的检测准确率和速度。

主权项:1.一种基于时空注意力的双流网络课堂行为识别方法,其特征在于,所述方法包括以下步骤:S1:设计适用于课堂行为识别的行为检测模型;所述行为检测模型包括空间信息提取模块、时间信息提取模块、侧向链接模块和预测模块,包括如下步骤:S11:将视频按照固定的取帧步长和取帧次数,将视频帧送入空间信息提取模块进行空间语义信息的提取;S12:同时将视频按照固定的取帧步长和取帧次数,将提取的视频帧送入时间信息提取模块进行时间语义信息的提取;S13:通过所述侧向链接模块,将提取到的空间语义信息和时间语义信息进行融合,得到包含时空语义信息的特征图;S14:在所述预测模块之前加入时空注意力模块,包含时空语义信息的特征图经过时空注意力模块之后送入预测模块进行检测,完成行为识别;S2:使用损失函数和时空注意力模块训练设计好的行为检测模型,得到训练好的行为检测模型;S3:使用训练好的行为检测模型对视频流进行实时监测,生成带有人物框和动作标签的矩形框。

全文数据:

权利要求:

百度查询: 武汉纺织大学 一种基于时空注意力的双流网络课堂行为识别方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。