龙图腾网&IPTOP
- 微信扫码登录
- 账号密码登录
- 短信登录/注册
买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！
申请/专利权人：南京大学;江苏万维艾斯网络智能产业创新中心有限公司
摘要：本发明公开了一种基于综合面部属性分析和视觉信息解析的情感音乐生成方法，涉及音乐生成领域。该方法包括：从输入的视频中提取关键场景信息，用于视觉信模型搭建；分析脸部关键信息，用于综合面部分析模型搭建；对自然语言模型抽取的场景信息和脸部情感进行整合，作为音乐生成基础文本输入；情绪音乐生成，根据音乐‑文本对学习音乐文本特征，用于音乐生成模型搭建；在预测阶段，使用音乐生成模型，生成符合视频场景的情感音乐生成。本发明结合了视觉，人脸，和自然语言模型，通过多模态构架作为基础文本输入，模型可以正确选择相应的音乐元素生成表达相应情感的音乐作品，提高音乐创作的效率和质量，适用于影视配乐、个性化音乐生成等领域。
主权项：1.一种基于综合面部属性分析和视觉信息解析的情感音乐生成方法，其特征在于，包括以下步骤：步骤1，视觉信息提取，基于输入的视频中使用视觉信模型提取多重关键视觉元素描述为文本；步骤2，综合面部属性分析，基于视频中检测到的人脸，使用综合面部分析模型分析多重面部信息将其描述为文本；步骤3，数据整合，基于视觉信息和综合面部分析模型每帧描述出的文本调用大语言模型将其整合成一段完整的事情发生经过；步骤4，音乐元素选择，基于整合文本，选择与所确定情绪相匹配的音乐元素，至少包含旋律、和声和节奏；步骤5，音乐生成，结合所选音乐元素和音乐生成规则，生成表达相应情感的音乐作品。
全文数据：
权利要求：
百度查询： 南京大学 江苏万维艾斯网络智能产业创新中心有限公司 基于综合面部属性分析和视觉信息解析的情感音乐生成方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
主营中国专利交易买卖与专利转让许可,高校科技成果推广与科技成果转化,知识产权运营管理与平台开发,科技人才专家库与科技猎头等科技服务
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号