买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：中邮消费金融有限公司

摘要：本申请属于数据处理技术领域，公开了一种基于JDBC的数据库文件上传方法、装置、设备及存储介质。本申请基于数据库表上传指令调用导出接口读取目标属性文件配置信息；基于目标属性文件配置信息以及预设异步批量导出机制开启多线程导出任务，并基于JDBC的预编译机制以及预设自动分页执行方式从数据库中读取待导出数据库数据；基于预处理函数对待导出数据库数据进行预处理，获得目标数据格式的文本文件；将文本文件上传至文件服务器。本申请通过建立灵活可配置、可自定义数据处理的数据库表导出机制，引入SQL传入和导出字段定义，将文件导出任务从应用系统解耦出来，通过多线程处理机制提升文件导出并发处理能力，提升了数据处理效率。

主权项：1.一种基于JDBC的数据库文件上传方法，其特征在于，所述的基于JDBC的数据库文件上传方法包括：基于数据库表上传指令调用导出接口读取目标属性文件配置信息；基于所述目标属性文件配置信息以及预设异步批量导出机制开启多线程导出任务，并基于JDBC的预编译机制以及预设自动分页执行方式从数据库中读取待导出数据库数据；基于预处理函数对所述待导出数据库数据进行预处理，获得目标数据格式的文本文件；将所述文本文件上传至文件服务器；所述基于所述目标属性文件配置信息以及预设异步批量导出机制开启多线程导出任务，并基于JDBC的预编译机制以及预设自动分页执行方式从数据库中读取待导出数据库数据的步骤包括：基于文件头信息配置信息以及文件内容信息配置信息确定待上传数据库文件大小；基于重试配置信息确定导出任务数量；根据所述待上传数据库文件大小和导出线程池配置信息确定待开启线程参数；基于JDBC的预编译机制、导出任务数量、所述待开启线程参数、预设异步批量导出机制以及预设自动分页执行方式开启多线程导出任务，获取待导出数据库数据；所述基于预处理函数对所述待导出数据库数据进行预处理，获得目标数据格式的文本文件的步骤之前，还包括：判断导出任务执行过程是否存在异常；若导出任务执行过程不存在异常，则判断是否需要对所述待导出数据库数据进行预处理；若是，则基于预处理函数对所述待导出数据库数据进行预处理，获得目标数据格式的文本文件；若导出任务执行过程存在异常，则根据时间戳确定任务执行步骤，并根据所述任务执行步骤对应的异常码、导出任务详情、出现异常的代码行数、错误的详情信息生成异常信息；根据导出任务对应的配置编号、调用方法的入参、所述任务执行步骤生成导出信息；根据所述异常信息以及所述导出信息判断是否需要发送失败结果；若需要发送失败结果，则发送kafka通知结果；所述将所述文本文件上传至文件服务器的步骤之后，还还包括：定时从数据库中导出任务执行失败的记录，并根据所述记录中记载失败步骤作为重试操作的起始步骤；调用导出接口读取所述记录中的配置参数，并根据所述记录中记载的调用方法的入参覆盖，并根据所述起始步骤执行文件上传流程。

全文数据：

权利要求：

百度查询： 中邮消费金融有限公司 基于JDBC的数据库文件上传方法、装置、设备及存储介质