买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：广东电网有限责任公司湛江供电局

摘要：本申请提供了一种线路巡视的规划方法、装置和线路巡视规划系统，该方法包括：建立动作价值函数；建立DQN模型；计算步骤，在一种环境条件下，根据动作价值函数计算奖励的最大期望值，得到第一期望值；确定步骤，根据第一期望值与目标动作的实际奖励的差值确定DQN模型的误差，第一期望值对应的环境条件与目标动作对应的环境条件相同；调整步骤，在DQN模型的误差大于预定阈值的情况下，调整DQN模型的参数；依次重复计算步骤、确定步骤和调整步骤直至DQN模型的误差小于或者等于预定阈值，得到规划模型；将当前的环境条件输入规划模型，得到规划动作，解决了现有技术中线路巡视的规划不合理导致线路故障率高的问题。

主权项：1.一种线路巡视的规划方法，其特征在于，包括：建立动作价值函数，所述动作价值函数用于计算一种环境条件下选择各线路巡视的动作后是否发生故障的奖励的最大期望值，所述环境条件包括线路状态和天气状态；建立DQN模型，所述DQN模型用于在一种所述环境条件选择所述动作中重要性最高的目标动作；计算步骤，在一种所述环境条件下，根据所述动作价值函数计算奖励的最大期望值，得到第一期望值；确定步骤，根据所述第一期望值与所述目标动作的实际奖励的差值确定所述DQN模型的误差，所述第一期望值对应的所述环境条件与所述目标动作对应的所述环境条件相同；调整步骤，在所述DQN模型的误差大于预定阈值的情况下，调整所述DQN模型的参数，以减小所述DQN模型的误差；依次重复所述计算步骤、所述确定步骤和所述调整步骤直至所述DQN模型的误差小于或者等于所述预定阈值，得到规划模型；将当前的所述环境条件输入所述规划模型，得到规划动作，所述规划动作为在当前的所述环境条件下选择一个所述线路进行巡视的动作；建立动作价值函数，包括：获取环境条件数据库，所述环境条件数据库包括多种环境条件，所述线路状态包括各条所述线路对应的架空线长度、电缆线路长度、跨林区架空线长度、总设备数量、低洼地区设备数量、鼠患设备数量、重过载设备数量、设备平均投运时间、用户数、故障记录和上次巡视时间，所述天气状态包括日期、最高温度、最低温度、最大风力等级、最大降雨量和湿度；根据所述环境条件数据库建立可用策略函数和可用状态转移函数，所述可用策略函数用于计算在一种所述环境条件下选择各所述线路执行对应的所述动作的概率，所述可用状态转移函数为选择一个线路执行对应的所述动作后存在所述线路发生故障的概率；根据所述可用策略函数、所述可用状态转移函数、正奖励和负奖励生成所述动作价值函数，所述正奖励为执行所述动作后没有发生故障的正反馈值，所述正奖励为执行所述动作后发生故障的负反馈值；根据所述可用策略函数、所述可用状态转移函数、正奖励和负奖励生成所述动作价值函数，包括：根据所述可用策略函数、所述可用状态转移函数、所述正奖励和所述负奖励计算依次执行多次所述动作后的预测奖励，所述预测奖励与所述动作执行的次数一一对应，每次执行的动作均可为任意一个所述动作；设置奖励折扣率，以确定各所述预测奖励的权重，所述权重为所述奖励折扣率的N次方，N为所述预测奖励对应的执行次数减1；根据各所述预测奖励和对应的所述权重生成回报函数，所述回报函数的函数值为各所述预测奖励的加权平均值；根据所述回报函数生成所述动作价值函数，所述动作价值函数用于计算所述回报函数的最大期望值。

全文数据：

权利要求：

百度查询： 广东电网有限责任公司湛江供电局 线路巡视的规划方法、装置和线路巡视规划系统