龙图腾网&IPTOP
- 微信扫码登录
- 账号密码登录
- 短信登录/注册
买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！
申请/专利权人：西安电子科技大学
摘要：本发明提供基于提示学习的遥感领域的图像‑文本检索方法及装置，涉及遥感图像技术领域。此方法包括：将输入文本和多层文本提示输入文本编码器，输出文本特征向量；根据输入图像、各层文本提示、提示学习模块和图像编码器，确定图像特征向量；将可学习提示、文本特征向量和图像特征向量分别输入适配器模块，对应的输出最终文本特征向量和最终图像特征向量；根据最终文本特征向量、最终图像特征向量，计算图文对比损失和对称性损失，并根据对比损失和对称性损失进行反向传播优化，得到优化的检索模型；将测试数据集输入优化的检索模型，输出相似度矩阵。这样，使得检索所消耗的算力更少和时间更短，使得检索的灵活性较好。
主权项：1.一种基于提示学习的遥感领域的图像-文本检索方法，其特征在于，所述图像-文本检索方法包括：对图像模态数据和文本模态数据分别进行预设处理，对应的得到输入图像和输入文本；将所述输入文本和多层文本提示输入文本编码器，输出文本特征向量；根据所述输入图像、各层文本提示、提示学习模块和图像编码器，确定图像特征向量，所述提示学习模块包括Transformer模块和全连接层；将可学习提示、所述文本特征向量和所述图像特征向量分别输入适配器模块，对应的输出最终文本特征向量和最终图像特征向量；根据所述最终文本特征向量、所述最终图像特征向量，计算图文对比损失和对称性损失，并根据所述对比损失和所述对称性损失进行反向传播优化，得到优化的检索模型；将测试数据集输入所述优化的检索模型，输出相似度矩阵，以根据所述相似度矩阵确定所述测试数据集中图像与文本的匹配结果。
全文数据：
权利要求：
百度查询： 西安电子科技大学 基于提示学习的遥感领域的图像-文本检索方法及装置
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
主营中国专利交易买卖与专利转让许可,高校科技成果推广与科技成果转化,知识产权运营管理与平台开发,科技人才专家库与科技猎头等科技服务
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号