买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网恭喜上海武桐树高新技术有限公司申请的专利一种用于驱动二次元数字人实时互动的多模态大模型系统获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN119251885B 。

龙图腾网通过国家知识产权局官网在2025-04-04发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202411307492.9，技术领域涉及：G06V40/16；该发明授权一种用于驱动二次元数字人实时互动的多模态大模型系统是由陈亮;郭超;陈少平设计研发完成，并于2024-09-19向国家知识产权局提交的专利申请。

本一种用于驱动二次元数字人实时互动的多模态大模型系统在说明书摘要公布了：本发明公开了一种用于驱动二次元数字人实时互动的多模态大模型系统，涉及数字人大模型技术领域，包括数据采集模块、多模态处理模块、实时互动模块，所述数据采集模块用于使用计算机视觉技术对用户的面部进行区域划分和特征提取，并对头部晃动幅度和频率进行检测，以及在用户之间视频交流时对用户的瞳孔注视点进行检测，所述多模态处理模块用于对采集到的面部特征数据和瞳孔注视点数据进行分析，评估各个面部区域的吸引力，决定各个区域采用实时捕捉还是表情模板的方式，所述实时互动模块用于根据呈现表情的方式对用户对应的数字人表情加以控制，进行各个用户之间的互动，本发明，具有结合两者优点的特点。

本发明授权一种用于驱动二次元数字人实时互动的多模态大模型系统在权利要求书中公布了：1.一种用于驱动二次元数字人实时互动的多模态大模型系统，其特征在于：包括数据采集模块、多模态处理模块、实时互动模块，所述数据采集模块用于使用计算机视觉技术对用户的面部进行区域划分和特征提取，并对头部晃动幅度和频率进行检测，以及在用户之间视频交流时对用户的瞳孔注视点进行检测，所述多模态处理模块用于对采集到的面部特征数据和瞳孔注视点数据进行分析，评估各个面部区域的吸引力，决定各个区域采用实时捕捉还是表情模板的方式，所述实时互动模块用于根据呈现表情的方式对用户对应的数字人表情加以控制，进行各个用户之间的互动；所述数据采集模块包括摄像单元、面部区域识别模块、表情特征提取模块、数据库、头部晃动检测模块、计时模块、瞳孔注视点捕捉模块，所述摄像单元与面部区域识别模块电连接，所述面部区域识别模块与表情特征提取模块电连接，所述表情特征提取模块与数据库电连接，所述头部晃动检测模块与计时模块和面部区域识别模块电连接，所述摄像单元用于拍摄用户的面部，所述面部区域识别模块用于识别面部并将面部划分为多个区域，所述表情特征提取模块用于提取与面部各个区域的表情特征，所述数据库用于储存各个用户的表情特征数据，所述头部晃动检测模块用于检测用户头部的晃动频率和幅度，所述计时模块用于统计时间，所述瞳孔注视点捕捉模块用于在用户之间视频交流时对用户的瞳孔注视点进行检测；所述多模态处理模块包括吸引力评估模块、预先设定模块、自动设定模块，所述吸引力评估模块与瞳孔注视点捕捉模块电连接，所述预先设定模块与面部区域识别模块电连接，所述自动设定模块与吸引力评估模块、头部晃动检测模块和面部区域识别模块电连接，所述吸引力评估模块用于根据其他用户普遍的瞳孔注视点数据来评估当前用户各个面部区域的吸引力，所述预先设定模块用于根据吸引力数据设定哪些面部区域采用实时捕捉，哪些面部区域采用表情模板，所述自动设定模块用于结合用户的头部晃动频率和各个面部区域的吸引力决定采用实时捕捉的面部区域比例；所述实时互动模块包括表情定性模块、表情模板库、模板化显示模块、实时捕捉显示模块，所述表情定性模块与表情特征提取模块电连接，所述表情模板库用于储存数字人的表情模板，所述模板化显示模块用于在数字人面部特征上采用表情模板来显示对应的面部区域，所述实时捕捉显示模块用于在数字人面部特征上利用实时捕捉的方式来显示对应的面部区域。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人上海武桐树高新技术有限公司，其通讯地址为：200120 上海市浦东新区红枫路288号三层A3-20室；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。