买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:深圳市金大智能创新科技有限公司
摘要:本发明公开了多模态知识图谱和多模态大语言模型的信息检测方法,包括有S1多模态知识图谱设计;S2知识图谱推理;S3、多模态大语言模型预测,将多模态知识图谱以及新闻文本模态和图像模态一起输入到多模态大语言模型中,多模态大语言模型根据判断新闻真假的问题,推理知识图谱的哪些关系和三元组对产生预测的答案有利,把线性化的多模态知识图谱和文本,图像输入到多模态大语言模型,进行最终的预测,解决大语言模型可能会产生与已知事实不符的信息,且无法掌握特定领域信息的问题。
主权项:1.结合多模态知识图谱和多模态大语言模型的信息检测方法,其特征在于:包括有S1、多模态知识图谱设计,包括有图像子图和文本子图,文本子图描述新闻文本中实体之间的关系,结点表示实体,边表示实体关系,图像子图描述新闻图像中的视觉实体;S2、知识图谱推理,对多模态大语言模型的问题,使用多模态大语言模型从多模态知识图谱中提取与问题有关的证据,作为有效判断新闻真假的证据;S3、多模态大语言模型预测,对多模态知识图谱提取的证据信息进行线性化处理,并转换为多模态大语言模型可理解的文本,设计提示学习模板以生成预测依据和最终分类结果。
全文数据:
权利要求:
百度查询: 深圳市金大智能创新科技有限公司 结合多模态知识图谱和多模态大语言模型的信息检测方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。