买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网恭喜苏州国双软件有限公司申请的专利爬虫任务报错的处理方法及装置获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN114661972B 。

龙图腾网通过国家知识产权局官网在2025-04-29发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202011545965.0，技术领域涉及：G06F16/951；该发明授权爬虫任务报错的处理方法及装置是由满悦设计研发完成，并于2020-12-23向国家知识产权局提交的专利申请。

本爬虫任务报错的处理方法及装置在说明书摘要公布了：本发明公开了一种爬虫任务报错的处理方法及装置，涉及爬虫技术领域，主要为解决目前爬虫任务报错的处理过程中，人工成本过高的问题。该方法包括：在获取到报错任务后，将所述报错任务按照任务参数进行分组，得到任务分组，其中，每个所述任务分组中至少包括一个所述报错任务，所述报错任务为爬虫执行爬取任务后反馈爬取失败的任务；通过爬虫按照所述任务分组执行所述报错任务，并得到每个任务分组的分组任务结果；根据所述分组任务结果，判断所述报错任务是否执行成功；若不成功，则将所述报错任务确定为异常任务并输出。本发明用于爬虫任务报错的处理过程。

本发明授权爬虫任务报错的处理方法及装置在权利要求书中公布了：1.一种爬虫任务报错的处理方法，其特征在于，包括：在获取到报错任务后，将所述报错任务按照任务参数进行分组，得到任务分组，其中，每个所述任务分组中至少包括一个所述报错任务，所述报错任务为爬虫执行爬取任务后反馈爬取失败的任务；通过爬虫按照所述任务分组执行所述报错任务，并得到每个任务分组的分组任务结果；根据所述分组任务结果，判断所述报错任务是否执行成功；若不成功，则将所述报错任务确定为异常任务并输出；在所述通过爬虫按照所述任务分组执行所述报错任务，并得到每个任务分组的分组任务结果之前，所述方法还包括：将多个所述任务分组设置为一个任务批次；在所述将所述报错任务确定为异常任务并输出之前，所述方法还包括：根据所述分组任务结果，确定所述每个任务批次的任务完成率，所述任务完成率用于表征所述任务批次中分组任务结果中爬取成功的比例；所述将所述报错任务确定为异常任务并输出，包括：若所述任务完成率低于预设比例阈值，则将所述报错任务确定为异常任务并输出；若所述任务完成率高于预设比例阈值，则将所述报错任务添加到下一个所述任务批次中的所述任务分组中。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人苏州国双软件有限公司，其通讯地址为：江苏省苏州市高新区塔园路101号悦峰大厦1801室；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。