买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：京东方艺云(杭州)科技有限公司;京东方艺云(郑州)科技有限公司;京东方艺云(宜宾)科技有限公司;京东方艺云(成都)科技有限公司;京东方艺云科技有限公司

摘要：本申请提供了一种视线追踪方法、装置、电子设备及存储介质，包括：当符合视线追踪要求时，进行人脸姿态分析处理，确定出当前时刻的人脸姿态角度；并根据多个人脸关键点，确定用户注视所述目标对象时的当前眼部观测信息，并获取眼部标定数据；根据当前眼部观测信息中每只眼睛瞳孔相对于眼睛轮廓的第一相对位置、眼部标定数据中每只眼睛注视第一标定点时瞳孔相对于眼睛轮廓的第二相对位置、以及眼部标定数据中视网膜至瞳孔的第一距离，确定出眼睛的视线角度；根据眼睛的视线角度、当前时刻的人脸姿态角度、眼部标定数据以及当前眼部观测信息，确定用户当前注视目标对象时的视线信息。这样，通过本方案，可有效提高结果精度以及降低视线追踪难度。

主权项：1.一种视线追踪方法，其特征在于，所述视线追踪方法包括：对图像采集装置所采集的目标对象前方的初始图像进行实时人脸检测；当识别出所述初始图像中包含有符合人脸图像要求的人脸时，对所述初始图像中人脸进行关键点识别处理，确定出多个人脸关键点；根据所述多个人脸关键点进行人脸姿态分析处理，确定出当前时刻的人脸姿态角度；当所述人脸的姿态角度满足预设角度阈值要求时，根据所述多个人脸关键点，确定用户注视所述目标对象时的当前眼部观测信息；获取标定过程中确定的眼部标定数据；针对每只眼睛，根据当前眼部观测信息中该只眼睛瞳孔相对于眼睛轮廓的第一相对位置、眼部标定数据中该只眼睛注视第一标定点时该只眼睛瞳孔相对于眼睛轮廓的第二相对位置、以及眼部标定数据中该只眼睛视网膜至瞳孔的第一距离，通过反正切运算处理，确定出该只眼睛的视线角度；根据每只眼睛的视线角度、当前时刻的人脸姿态角度、眼部标定数据以及当前眼部观测信息，依次进行角度融合处理以及视线计算处理，确定用户当前注视目标对象时的视线信息；其中，所述视线信息包括用户注视所述目标对象时每只眼睛的目标视线落点以及视线范围；所述根据每只眼睛的视线角度、当前时刻的人脸姿态角度、眼部标定数据以及当前眼部观测信息，依次进行角度融合处理以及视线计算处理，确定用户当前注视目标对象时的视线信息，包括：针对用户的每只眼睛，根据当前眼部观测信息中该只眼睛当前注视目标对象时该只眼睛映射至目标对象上的第一映射位置、眼部标定数据中该只眼睛注视第一标定点时该只眼睛映射至目标对象上的第二映射位置、以及第一标定点在目标对象上的第一标定位置，进行位置偏移确定处理，确定该只眼睛当前注视所述目标对象时的初始视线落点；根据当前眼部观测信息中该只眼睛的视线角度和当前时刻的人脸姿态角度，进行角度融合处理，确定该只眼睛的综合视线角；根据该只眼睛的综合视线角和当前眼部观测信息中该只眼睛与目标对象之间的当前实际距离，对所述初始视线落点进行校正，确定该只眼睛当前注视所述目标对象时的目标视线落点；根据眼部标定数据中该只眼睛视网膜至瞳孔的第一距离、当前眼部观测信息中该只眼睛与目标对象之间的当前实际距离、以及当前眼部观测信息中该只眼睛的瞳孔半径，通过三角形等比定理计算，确定该只眼睛当前注视所述目标对象时的视线范围。

全文数据：

权利要求：

百度查询： 京东方艺云(杭州)科技有限公司 京东方艺云(郑州)科技有限公司 京东方艺云(宜宾)科技有限公司 京东方艺云(成都)科技有限公司 京东方艺云科技有限公司 一种视线追踪方法、装置、电子设备及存储介质