龙图腾网&IPTOP
- 微信扫码登录
- 账号密码登录
- 短信登录/注册
买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！
申请/专利权人：晶诺微(上海)科技有限公司
摘要：本发明提供一种超大数据流的实时处理方法以及数据处理系统，通过主控进程将由实时采集的超大数据流分割获得的预设数据大小的多个数据块写入共享内存，并将各数据块的数据信息分别发送至空闲的辅助计算进程，再由辅助计算进程根据接收的数据块的数据信息读取写入所述共享内存中的对应数据块，并将对该数据块数据进行分析计算后获得的计算结果发送至所述主控进程。本发明通过设置的一主控进程以及多个辅助计算进程实现了超大数据流的实时处理，使得超大数据流实时分析处理变的简单易操作；并且相比其他方法，成本降低明显，显著减少了超大数据由于传输而带来的各种损耗；还解决了单个进程长时间占用超大内存块和CPU资源而引起的系统不稳定的问题。
主权项：1.一种超大数据流的实时处理方法，其特征在于，应用于数据处理系统，包括：一主控进程以及多个辅助计算进程，所述方法包括：通过主控进程将由实时采集的超大数据流分割获得的预设数据大小的多个数据块写入共享内存，并将各数据块的数据信息分别发送至空闲的辅助计算进程；所述主控进程包括：数据采集线程以及数据传递线程；通过所述数据采集线程实时采集超大数据流，并将其分割为预设数据大小的多个数据块；通过所述数据传递线程将每个数据块分别写入共享内存中空闲的共享内存空间，并将对应的数据块的共享内存句柄以及数据块参数通过Remote模式传送给一空闲的辅助计算进程；由接收到数据块的数据信息的辅助计算进程根据对应的数据信息读取写入所述共享内存中的对应数据块，并将对该数据块数据进行分析计算后获得的计算结果发送至所述主控进程；通过对应的辅助计算进程根据接收的数据块的共享内存句柄以及数据块参数读取在所述共享内存中对应的共享内存空间读取对应的数据块，并对数据块数据进行分析计算，将分析计算完成后获得的计算结果通过Remote模式发送至所述主控进程。
全文数据：
权利要求：
百度查询： 晶诺微(上海)科技有限公司 超大数据流的实时处理方法以及数据处理系统
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
主营中国专利交易买卖与专利转让许可,高校科技成果推广与科技成果转化,知识产权运营管理与平台开发,科技人才专家库与科技猎头等科技服务
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号