买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：上海顺诠科技有限公司;英业达股份有限公司

摘要：一种元宇宙个人化数字歌手生成系统及其方法，通过服务端装置接收用户人声以存储为个人化声音，以及拍摄用户脸部以产生脸部图像，进而通过3D成像技术生成显示在虚拟场景的个人化数字歌手，并将个人化声音转换为声音特征向量以与个人化声音一并作为训练数据输入至生成式AI模型进行训练，以便训练出具有个人特色的生成式预训练模型，当用户选择原唱歌曲且进行歌唱时，将原唱歌曲与用户歌声及提示词一并输入至生成式预训练模型，使其输出与原唱歌曲的风格相匹配的混音歌曲，以及根据提示词生成导唱教学，藉以达到提高虚拟分身的个性化及趣味性的技术功效。

主权项：1.一种元宇宙个人化数字歌手生成系统，所述系统包含：显示器，用以显示虚拟场景；声音数据库主机，用以存储多笔个人化声音及其相应的一组声音特征向量，以及存储多首原唱歌曲；以及服务端装置，用以连接所述显示器及所述声音数据库主机，所述服务端装置包含：非暂态计算机可读存储介质，用以存储多个计算机可读指令；以及硬件处理器，电性连接所述非暂态计算机可读存储介质，用以执行所述多个计算机可读指令，使所述硬件处理器被配置为：持续通过收音元件接收用户人声以存储为所述个人化声音，以及通过摄像元件拍摄用户脸部以产生脸部图像，并且基于所述脸部图像以3D成像技术生成相应的个人化数字歌手；先将所述个人化声音进行去噪及标准化，再执行音频处理以获取特征且转换为所述一组声音特征向量；持续将所述原唱歌曲与所述个人化声音及其相应的所述一组声音特征向量一并作为训练数据输入至生成式人工智能模型进行训练，并且在训练完成后形成生成式预训练模型；当载入所述原唱歌曲其中之一且通过所述收音元件接收到用户歌声时，将载入的所述原唱歌曲、接收到的所述用户歌声及至少一提示词一并输入至所述生成式预训练模型以输出混音歌曲，其中，所述提示词用以在所述一组声音特征向量的基础上，调整所述混音歌曲中的所述用户歌声的音量、音高及音色至少其中之一以与所述原唱歌曲相匹配；以及在所述虚拟场景中显示所述个人化数字歌手，同时播放所述混音歌曲，以及根据使用的所述提示词生成导唱教学并进行显示。

全文数据：

权利要求：

百度查询： 上海顺诠科技有限公司 英业达股份有限公司 元宇宙个人化数字歌手生成系统及其方法