龙图腾网&IPTOP
- 微信扫码登录
- 账号密码登录
- 短信登录/注册
申请/专利权人：聚好看科技股份有限公司
申请日：2022-07-20
公开（公告）日：2024-06-14
公开（公告）号：CN115049016B
主分类号：G06F18/25
分类号：G06F18/25;G06V10/80;G06V40/16;G10L25/63
优先权：
专利状态码：有效-授权
法律状态：2024.06.14#授权;2022.09.30#实质审查的生效;2022.09.13#公开
摘要：本申请涉及三维重建技术领域，提供一种基于情绪识别的模型驱动方法及设备，对获取的目标对象的人脸图像和语音数据进行了完整性判断，当人脸图像和语音数据只有一个数据完整时，基于完整的人脸图像或语音数据进行情绪识别，从而解决由于面部遮挡或语音数据传输失败，导致的面部情绪识别准确率较低或者无法识别出面部情绪的问题；当人脸图像和语音数据两个均完整时，基于完整的人脸图像和语音数据进行情绪识别，提高情绪识别的准确性，进而用情绪识别得到的情绪参数优化参数化头部模型的初始驱动参数，从而将面部情绪引入目标驱动参数中，使得基于目标驱动参数进行参数化头部模型的重建和驱动时，能够提高模型的真实感和重建精度。
主权项：1.一种基于情绪识别的模型驱动方法，其特征在于，包括：获取目标对象的人脸图像和语音数据；分别确定所述人脸图像和所述语音数据是否完整；若所述人脸图像不完整，但所述语音数据完整，则对所述语音数据进行情绪识别，得到情绪参数；若所述人脸图像完整，但所述语音数据不完整，则对所述人脸图像进行情绪识别，得到情绪参数；若所述人脸图像完整，且所述语音数据完整，则分别对所述人脸图像和所述语音数据进行情绪识别，得到融合后的情绪参数；根据所述情绪参数调整预先构建的所述目标对象对应的参数化头部模型的初始驱动参数，得到目标驱动参数；对所述人脸图像进行语义分割，得到头部的各个组件，所述组件至少包括眼睛、鼻子、眉毛和嘴巴区域；将所述目标驱动参数中从所述人脸图像中提取的第一子情绪参数，与所述眼睛、鼻子、和眉毛区域分别进行关联，以及，将所述目标驱动参数中从所述语音数据中提取的第二子情绪参数与所述嘴巴区域进行关联；将所述各个组件分别关联的子情绪参数和所述目标驱动参数传输给渲染终端，以使所述渲染终端根据所述目标驱动参数对所述参数化头部模型进行整体驱动，以及，根据各子情绪参数，分别驱动所述参数化头部模型中的相应组件以实现微调。
全文数据：
权利要求：
百度查询： 聚好看科技股份有限公司 基于情绪识别的模型驱动方法及设备
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
主营中国专利交易买卖与专利转让许可,高校科技成果推广与科技成果转化,知识产权运营管理与平台开发,科技人才专家库与科技猎头等科技服务
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号