买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：北京航空航天大学

摘要：本发明提出一种基于虚拟现实技术的沉浸式表演情感增强系统，本发明解决了现有沉浸式表演中观众和表演者间存在缺少可用且具备情感反馈的交互应用系统，为传统沉浸式表演中因虚拟现实设备遮挡而导致观众和表演者的情感沟通障碍、无法实现自适应性反馈产生表演运行不畅或中断的问题，设计具有自适应性的情感反馈，更为情感反馈提供了可视化的系统支持，具有实用、适用性强的特点的优势技术效果。

主权项：1.一种基于虚拟现实技术的沉浸式表演情感增强方法，其特征在于，沉浸式表演情感增强系统（C10）前端接入虚拟现实情感融合模块（D10），所述虚拟现实情感融合模块（D10）一端接入现实环境构造模块（A30），其另一端接入虚拟世界构造模块（B60）；所述虚拟世界构造模块（B60）包括动作数据采集模块（B10），心率数据采集模块（B20），3D虚拟化身构造模块（B30），心率数据显示模块（B40），虚拟基础构建模块（B50）；所述现实环境构造模块（A30）包括脑电数据采集模块（A10），脑电数据可视化呈现模块（A20）；所述动作数据采集模块（B10），包括十七个身体关节点位置数据采集单元，具体为：头部动作采集单元（B101）、胸部动作采集单元（B110）、腰部动作采集单元（B111）；左肩部动作采集单元（B102）、左大臂动作采集单元（B104）、左前臂动作采集单元（B106）、左手动作采集单元（B108）、右肩部动作采集单元（B103）、右大臂动作采集单元（B105）、右前臂动作采集单元（B107）、右手动作采集单元（B109）；左大腿动作采集单元（B112）、左小腿动作采集单元（B114）、左脚动作采集单元（B116）、右大腿动作采集单元（B113）、右小腿动作采集单元（B115）、右脚动作采集单元（B117）；所述3D虚拟化身构造模块（B30）输入端接入动作数据采集模块（B10），获取十七个身体关节点位置数据，所述3D虚拟化身构造模块（B30）输出端连接虚拟世界构造模块（B60）；将获取到的十七个身体关节点位置数据通过动作采集模块（B10）与三维引擎平台连接，基于FinalIK反动力学插件创建FullBodyBipedIK，控制手肘、肩部、腰部、膝部、胯部部位，实现实时驱动表演者的虚拟化身模型；所述心率数据显示模块（B40）输入端接入心率数据采集模块（B20），获取心率数据，计算心率变异性数据，以及呼吸频率数据，将心率数据实时映射至虚拟环境中进行数值显示，输出端连接虚拟世界构造模块（B60），具体为：在PC端蓝牙匹配心率传感器，在三维引擎平台调用蓝牙传输模块Bluetooth+LE库进行初始化，执行蓝牙搜索；连接心率传感器，并通过设备的UUID订阅蓝牙的服务或自行通过蓝牙调试助手获取心率数据；返回接收到的心率数据并进行数据解析和输出，获取心率数据、心率变异性数据和呼吸频率数据；所述脑电数据可视化呈现模块（A20），输入端接入脑电数据采集模块（A10），包括对alpha、belta、theta三类脑波的数据采集及分发处理，连接可视化编程开发平台进行可视化图形，输出端连接现实环境构造模块（A30）；脑电数据采集模块包括非侵入式脑电设备及数据分发处理功能，首先将脑电设备接触点置于所佩戴的虚拟现实头盔之下紧贴额头及耳后皮肤，以获得持续性脑电数据传输效果；通过Bluetooth+LE和OSC传输协议将采集到的观众的alpha、belta、theta三种具有情绪特征的脑波数值传输至可视化编程开发平台；提取三种脑波的可视化情感特征元素，设定时域数据取值及可视化图形体积变形方式，将三种脑波数值转换为自适应性的情感可视化图形；所述虚拟现实情感融合模块（D10），一端接入现实环境构造模块（A30），其另一端接入虚拟世界构造模块（B60），具体为：将基于观众三种脑波的情感可视化图形透视投影至现实环境表演空间中，供表演者在表演过程中查看；将基于表演者心率数据的可视化数值传输至三维引擎平台，显示在虚拟世界中，供观众在表演过程中查看。

全文数据：

权利要求：

百度查询： 北京航空航天大学 一种基于虚拟现实技术的沉浸式表演情感增强系统