首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

一种多模态元数据检索增强生成方法及系统 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:山东浪潮科学研究院有限公司

摘要:本发明涉及人工智能技术领域,特别是涉及一种多模态元数据检索增强生成方法及系统,本发明通过确定查询内容的数据模态,基于确定的数据模态对各模态的数据进行特征提取,并将提取的特征转换为特征向量,各模态的特征向量进行融合,生成多模态特征向量,并从查询内容的各模态数据中提取各模态数据的关键元数据,将关键元数据转换为关键元数据向量与多模态特征向量相连接,构建增强向量,通过增强向量进行检索,有助于提升知识覆盖范围和信息利用效率,提高生成内容的准确性、相关性和可信度。

主权项:1.一种多模态元数据检索增强生成方法,其特征在于,包括:步骤一:输入查询内容;步骤二:确定查询内容的数据模态,并基于所确定查询内容的数据模态进行处理,以生成多模态特征融合向量;步骤三:利用大语言模型提取查询内容中各模态数据的关键元数据,并对关键元数据进行扩展,将扩展后的关键元数据转换为元数据向量;步骤四:将元数据向量与多模态特征融合向量相连接,以生成增强向量;步骤五:基于增强向量,使用Faiss库在GPU上进行并行检索,并输出最终检索结果;步骤六:根据输出的最终检索结果,使用大语言模型生成初始回答,并对生成的初始回答进行事实性优化,以生成最终回答。

全文数据:

权利要求:

百度查询: 山东浪潮科学研究院有限公司 一种多模态元数据检索增强生成方法及系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。