申请/专利权人：中国舰船研究设计中心

申请日：2024-03-19

公开（公告）日：2024-06-28

公开（公告）号：CN118259833A

主分类号：G06F3/06

分类号：G06F3/06;G06F16/13;G06F16/182;H04L67/1097;H04L69/22

优先权：

专利状态码：在审-公开

法律状态：2024.06.28#公开

摘要：本发明公开了一种船用数据中心的高速数据存储、处理与访问方法，该方法包括：数据存储目录规则、文件存储和自动分片规则、文件名与文件信息描述的对应规则、数据存储与处理的异步协同规则、数据自动处理规则、数据去重规则、适配协议变化的规则、紧急任务优先处理规则以及多用户并发数据访问机制。本发明通过这些规则和机制实现了船用数据中心大流量网络数据的存储、处理与使用的分离，在保证数据存储完整性的同时，大幅提升了处理效率，最大限度的缩短用户等待时间，并同时支持多个用户使用，提升了用户体验，广泛适用于有船舶高速数据采集、存储、处理及使用需求的应用场景。

主权项：1.一种船用数据中心的高速数据存储、处理与访问方法，其特征在于，该方法包括：按照年月日时的4级目录结构创建数据存储文件目录；其中，4级目录仅包含时间信息，不包含文件名信息；执行数据录取时，设置本次录取的录取文件名，输入录取文件信息描述；按照设置的录取文件名创建数据录取子目录，并进行文件自动分片；将录取文件名和对应的文件信息描述写入到索引文件中；当生成一个录取文件后，以消息形式通知数据处理任务将该文件纳入文件处理队列；当一个子文件生成后，即对该子文件进行处理，实现存储与处理的异步协同；对已经处理过的数据文件进行标识，避免数据的重复处理；数据处理时，按照IP、单元标识对报文进行分类，对同类报文进行MD5码生成并将该MD5码按照IP、单元标识作为索引特征进行暂存；当新的同类报文过来时，也生成MD5码；如果两个MD5码相同，表示该两个报文的数据内容完全一致，为重复数据，则不予处理；如果MD5码发生变化，表示为新的数据，则更新暂存的MD5码，并继续处理下一数据；按照报文的发方IP、收方IP、信息单元标识作为表名来建立该报文类型的数据库表，同时将该表的字段结构形成一个MD5码；当该报文的字段定义发生变化时，表结构会发生变化，因此新的表结构会形成不同的MD5码；在进行数据处理前，比较表结构的MD5码，当发现当前MD5码和之前不同时，表明该报文的字段定义发生变化；将之前的表重命名，然后将新建的表命名，由此原来的数据依然被保留，而新的数据进入当前最新格式的数据库表中；建立BS数据访问机制，通过BS架构实现多个用户同时对数据进行访问使用。

全文数据：

权利要求：

百度查询： 中国舰船研究设计中心 一种船用数据中心的高速数据存储、处理与访问方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD