买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：北京华视风行集团有限公司

摘要：本发明公开了一种字幕及其显示图形实时生成系统，涉及字幕生成技术领域，包括音视频导入模块、音频提取模块、语音转换模块、角色识别模块、情感识别模块、字体图形模块、字幕显示控制模块、字幕图形控制模块；该字幕及其显示图形实时生成系统，通过设置音视频导入模块、音频提取模块、语音转换模块、角色识别模块、情感识别模块等，可识别出角色的情感，并使用设置的不同的字体和装饰图形，显示、装饰不同情感的字幕，使得观众可通过字幕了解角色的情感，更具趣味性；控制每个字幕的字数，基于时间间隔控制弹幕显示的位置，使得每个字幕信息不会过长，并保证了每个字幕信息的显示时间，保证观众来得及观看。

主权项：1.一种字幕及其显示图形实时生成系统，其特征在于：包括音视频导入模块、音频提取模块、语音转换模块、角色识别模块、情感识别模块、字体图形模块、字幕显示控制模块、字幕图形控制模块；所述音视频导入模块用于导入音视频文件待处理；所述音频提取模块用于从所述音视频文件中提取出音频信息；所述语音转换模块用于识别所述音频信息，基于端点检测算法将音频信息划分为一句一句的音频信息段，基于语音识别算法；所述角色识别模块用于基于第一深度学习模型识别所述音频信息段中不同角色的音频信息；所述角色识别模块还用于使用不同的标注内容，对不同角色的音频信息段对应的字幕信息进行标注；所述情感识别模块用于设置多个情感标签，并将所述情感标签与对应的音频信息段情感匹配的字幕信息关联；所述情感识别模块还用于基于各字幕信息对应的音频信息段，和与字幕信息关联的情感标签，训练第二深度学习模型，得到情感识别模型，用于基于输入的音频信息段，输出预测情感标签；所述字体图形模块用于设置与各情感标签对应的多种字体样式和装饰图形样式，所述字体样式为字幕信息的显示样式，所述装饰图形样式用于显示字幕信息附近，装饰所述字幕信息；所述字幕显示控制模块用于获取各字幕信息对应的音频信息段的音频时长，得到字幕音频时长，基于字幕信息的字幕音频时长控制所述字幕信息的字幕显示时长；所述字幕显示控制模块还用于获取字幕信息的字数，得到字幕长度；获取字幕信息对应的音频信息段在音频信息中时间，计算各字幕信息对应的音频信息段的时间间隔，基于所述时间间隔控制字幕信息的位置，所述时间间隔为开始在后的音频信息段的开始时间减去开始在先的音频信息段的结束时间得到的时长；所述字幕图形控制模块用于基于字幕信息的情感标签控制字幕信息以对应的字体样式显示，并控制字幕信息附近显示对应的装饰图形样式。

全文数据：

权利要求：

百度查询： 北京华视风行集团有限公司 一种字幕及其显示图形实时生成系统