买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:中国人民解放军国防科技大学
摘要:本发明公开了基于注意力交集感知的视觉关系抽取方法,所述方法包括:构建视觉关系抽取模型,包括预训练视觉模型、注意力交集感知模块和关系预测层;使用预训练视觉模型提取图片特征;根据图片特征和目标区域标注获得所有目标的特征表示;使用注意力交集感知模块,对每对目标计算共同关注特征;把每对目标的特征表示和共同关注特征输入关系预测层,进行关系预测;计算关系预测损失函数,并用关系预测损失函数优化视觉关系抽取模型,用优化后的视觉关系抽取模型进行视觉关系抽取。本发明利用视觉注意力感知机制,创新性地提出了注意力交集感知模块,提取出每对视觉目标的共同关注特征,使模型能够关注到图片的关键信息,提高视觉关系抽取准确率。
主权项:1.基于注意力交集感知的视觉关系抽取方法,其特征在于,所述方法包括:步骤1,构建视觉关系抽取模型,包括预训练视觉模型、注意力交集感知模块和关系预测层;步骤2,使用预训练视觉模型提取图片特征;步骤3,根据图片特征和目标区域标注获得所有目标的特征表示;步骤4,使用注意力交集感知模块,对每对目标计算共同关注特征;步骤5,把每对目标的特征表示和共同关注特征输入关系预测层,进行关系预测;步骤6,计算关系预测损失函数,并用关系预测损失函数优化视觉关系抽取模型,用优化后的视觉关系抽取模型进行视觉关系抽取。
全文数据:
权利要求:
百度查询: 中国人民解放军国防科技大学 基于注意力交集感知的视觉关系抽取方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。