申请/专利权人：广州方舟信息科技有限公司

申请日：2023-11-28

公开（公告）日：2024-05-28

公开（公告）号：CN117649933B

主分类号：G16H50/20

分类号：G16H50/20;G06V40/16;G06V10/74;G06V10/82;G06N3/045;G06N3/082;G06N3/096;G10L15/26;G10L25/63

优先权：

专利状态码：有效-授权

法律状态：2024.05.28#授权;2024.03.22#实质审查的生效;2024.03.05#公开

摘要：本发明公开了一种在线问诊辅助方法、装置、电子设备和存储介质，包括：获取就诊患者的就诊目标科室ID，加载与就诊目标科室ID匹配的微表情识别模型，获取就诊患者的视频数据，将视频数据输入微表情识别模型中得到就诊患者的表情标签，根据表情标签和就诊目标科室ID确定辅助文本，并在医生终端显示辅助文本，通过辅助文本辅助医生对就诊患者进行问诊，使得医生在有限的问诊时间内可以通过就诊患者的语音描述和就诊患者的表情进行问诊，能够获取到就诊患者准确有效的信息，在一定程度上辅助提高医生对就诊患者问诊的准确度，以及提高在线问诊的效率。

主权项：1.一种在线问诊辅助装置，其特征在于，包括：目标科室ID获取模块，用于获取就诊患者的就诊目标科室ID；微表情识别模型加载模块，用于加载与所述就诊目标科室ID匹配的微表情识别模型；视频数据获取模块，用于获取所述就诊患者的视频数据；表情标签识别模块，用于将所述视频数据输入所述微表情识别模型中，得到所述就诊患者的表情标签；辅助文本确定和显示模块，用于根据所述表情标签和所述就诊目标科室ID确定辅助文本，并在医生终端显示所述辅助文本；所述表情标签识别模块包括：相似度计算单元，用于计算所述视频数据中相邻两帧视频图像的相似度；目标视频图像确定单元，用于将相似度小于预设阈值的两帧视频图像确定为目标视频图像；第一表情识别单元，用于将所述目标视频图像输入所述微表情识别模型中，得到所述就诊患者的各个表情标签的第一概率；目标表情标签确定单元，用于基于所述第一概率确定所述就诊患者的目标表情标签；所述表情标签识别模块还包括：语音数据提取单元，用于从所述视频数据中提取所述就诊患者的语音数据；第二表情识别单元，用于将所述语音数据分别输入预置的频率识别模型和语音识别模型中，得到所述就诊患者的各个表情标签的第二概率和第三概率，所述频率识别模型用于基于所述语音数据的频率识别所述就诊患者的表情标签，所述语音识别模型用于将所述语音数据转换为文本后识别所述就诊患者的表情标签；所述目标表情标签确定单元包括：概率计算子单元，用于针对每个表情标签，根据所述表情标签的第一概率、第二概率和第三概率计算所述表情标签的目标概率；目标表情标签确定子单元，用于将目标概率最高的表情标签确定为所述就诊患者的目标表情标签；所述概率计算子单元包括：权重确定子单元，用于基于所述就诊目标科室ID确定所述微表情识别模型的第一权重、所述频率识别模型的第二权重以及所述语音识别模型的第三权重；权值计算子单元，用于计算所述第一概率与所述第一权重的第一乘积、第二概率与所述第二权重的第二乘积、第三概率与所述第三权重的第三乘积；概率计算子单元，用于计算所述第一乘积、第二乘积、第三乘积的和值，作为所述表情标签的概率。

全文数据：

权利要求：

百度查询： 广州方舟信息科技有限公司 在线问诊辅助方法、装置、电子设备和存储介质

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD