首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

一种人物交互关系检测方法及系统 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:华中科技大学

摘要:本发明公开了一种人物交互关系检测方法及系统,属于计算机视觉技术领域。现有的人物交互关系检测方法需要用一个共享的预测器同时检测人、物体和它们对应的交互关系,会造成实例级和交互关系级在注意力视野上的不一致。为此,本发明提出一种并行推理网络,其同时包含了两个分别针对实例级定位和交互关系级语义理解的独立预测器。前者通过感知实例的末端区域从而聚焦于实例级的定位;后者扩散视野到交互关系区域,从而更好地理解交互关系级语义。并且本发明的实例级预测器的实例级查询向量和关系级预测器的交互关系级查询向量是一一对应的关系,因此它们之间并不需要任何实例与关系的匹配程序,从而大大减轻了计算负担。

主权项:1.一种人物交互关系检测方法,其特征在于,包括:提取待识别图像的特征,并利用Transformer编码器对提取的特征进行全局上下文信息编码;将编码后的特征同时输入并行的实例级预测器和交互关系级预测器,并将所述实例级预测器和交互关系级预测器的输出一一对应进行组合,得到至少一组人物交互关系;其中:所述实例级预测器包括第一Transformer解码器和三个前馈神经网络,所述第一Transformer解码器利用第一查询向量对编码后的特征进行解码,并将解码得到的特征向量分别输入所述三个前馈神经网络,分别得到人体边界框、物体边界框和物体类别;所述交互关系级预测器包括第二Transformer解码器和两个前馈神经网络,所述第二Transformer解码器利用第二查询向量对编码后的特征进行解码,并将解码得到的特征向量分别输入所述两个前馈神经网络,分别得到交互关系边界框和交互关系类别;所述第一查询向量和第二查询向量一一对应。

全文数据:

权利要求:

百度查询: 华中科技大学 一种人物交互关系检测方法及系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。