买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:北京淳中科技股份有限公司
摘要:本申请提供了一种手势控制的方法、系统、设备及存储介质,该方法包括:接收图像采集装置发送的图像数据,将图像数据中的待识别图像逐帧输入至训练好的手势检测模型中,得到每帧待识别图像的手势检测结果;当检测到手势检测结果中出现目标人体对象时,根据目标人体对象的人体特征数据,从目标手势检测结果中,确定目标手势对象所在的目标手势区域边界框;根据目标手势对象在目标手势区域边界框中显示的目标手势动作,从手势动作与控制指令的映射关系库中,确定与目标手势动作具备映射关系的目标控制指令;将目标控制指令发送给屏幕显示设备,以控制屏幕显示设备显示目标控制指令的执行过程与执行结果。这样,可以提高对屏幕显示设备的控制效率。
主权项:1.一种手势控制的方法,其特征在于,所述方法应用于图像处理器中,所述图像处理器位于手势控制系统中,其中,所述手势控制系统至少包括:图像采集装置、所述图像处理器以及屏幕显示设备;所述方法,包括:响应于接收到所述图像采集装置发送的图像数据,将所述图像数据中的待识别图像逐帧输入至预先训练好的手势检测模型中,得到每帧待识别图像的手势检测结果;其中,所述手势检测模型用于预测每帧待识别图像中目标对象所在的图像区域边界框以及每一所述图像区域边界框中目标对象的所属类别;所述目标对象包括:人体对象和或手势对象;所述手势检测结果用于表征所述手势检测模型对于每帧待识别图像的预测结果;当检测到所述手势检测结果中出现目标人体对象时,根据所述目标人体对象的人体特征数据,从目标手势检测结果中,确定目标手势对象所在的目标手势区域边界框;其中,所述目标人体对象用于表征具备所述屏幕显示设备的控制权限的人体对象;所述人体特征数据至少包括所述目标人体对象的手部中心点与身体中心点之间的标准臂长距离;所述目标手势检测结果用于表征检测到所述目标人体对象出现的手势检测结果;所述目标手势对象用于表征所述目标人体对象中用于控制所述屏幕显示设备的手势对象;根据所述目标手势对象在所述目标手势区域边界框中显示的目标手势动作,从手势动作与控制指令的映射关系库中,确定与所述目标手势动作具备映射关系的目标控制指令;其中,所述目标手势动作是根据所述目标手势对象在所述目标手势检测结果中检测出的所属类别确定的;将所述目标控制指令发送给所述屏幕显示设备,以控制所述屏幕显示设备显示所述目标控制指令的执行过程与执行结果;其中,所述根据所述目标人体对象的人体特征数据,从目标手势检测结果中,确定目标手势对象所在的目标手势区域边界框,包括:从所述目标手势检测结果中,确定每一像素点与第三图像区域边界框的中心点之间的像素距离;其中,所述第三图像区域边界框用于表征所述目标人体对象所在的图像区域边界框;根据每一所述像素距离与所述标准臂长距离之间的距离差值,从所述目标手势检测结果中,确定目标像素点所在的目标图像区域;其中,所述目标像素点用于表征所述距离差值小于或者等于距离偏差阈值的像素点;在所述目标图像区域内,对所述手势对象所在的图像区域边界框进行二次预测,确定位于所述目标图像区域内的多个手势区域边界框;在所述第三图像区域边界框内,对所述目标人体对象的手部区域位置进行多次追踪预测,得到所述手部区域位置的多次追踪预测结果;计算每一所述手势区域边界框与所述多次追踪预测结果之间的平均相似程度,以将所述平均相似程度最高的手势区域边界框确定为所述目标手势区域边界框。
全文数据:
权利要求:
百度查询: 北京淳中科技股份有限公司 一种手势控制的方法、系统、设备及存储介质
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。