恭喜南京信息工程大学周晓彦获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网恭喜南京信息工程大学申请的专利基于融合不确定性和偏差消除的相机位姿估计方法及系统获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN119313740B 。
龙图腾网通过国家知识产权局官网在2025-03-18发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202411806344.1,技术领域涉及:G06T7/77;该发明授权基于融合不确定性和偏差消除的相机位姿估计方法及系统是由周晓彦;谢征峰;于启炟;芦福涛设计研发完成,并于2024-12-10向国家知识产权局提交的专利申请。
本基于融合不确定性和偏差消除的相机位姿估计方法及系统在说明书摘要公布了:本发明公开了基于融合不确定性和偏差消除的相机位姿估计方法及系统,涉及计算机视觉处理技术领域,包括以下步骤:获取图片,利用图片对相机进行标定,得到相机内参矩阵,基于相机内参矩阵采用不确定性传播公式计算得出融合不确定性的协方差矩阵;获取相机外参的雅可比矩阵和扰动,将预先建立的融合不确定性的目标函数转换为线性最小二乘目标函数,其中,所述预先建立的融合不确定性的目标函数基于融合不确定性的协方差矩阵构建;对线性最小二乘目标函数进行迭代优化,并进行求解,得到校正最小二乘解,作为相机位姿估计结果。
本发明授权基于融合不确定性和偏差消除的相机位姿估计方法及系统在权利要求书中公布了:1.基于融合不确定性和偏差消除的相机位姿估计方法,其特征在于,方法包括以下步骤:获取图片,利用图片对相机进行标定,得到相机内参矩阵,基于相机内参矩阵采用不确定性传播公式计算得出融合不确定性的协方差矩阵;所述利用图片对相机进行标定,得到相机内参矩阵的过程:使用目标相机采集m张图片,提取并匹配n个特征点信息,特征点信息包括图像点和三维点其中i表示第i个特征点,j表示第j张图片,且i=1,2,...,n,j=1,2,...,m,uij和vij分别表示像素平面坐标系下图像点qij的u轴坐标和v轴坐标,Xij,Yij和Zij分别表示世界坐标系下三维点pij的XW,YW和ZW轴的坐标,使用m张图片对目标相机标定得到相机内参矩阵K: 其中,fx,fy分别为相机x轴和y轴上的焦距,u0,v0为主点坐标;所述融合不确定性的协方差矩阵通过建立相机标定的重投影误差函数,对相机参数求偏导建立雅可比矩阵J,得到相机内参的协方差矩阵ΣK,通过不确定性传播公式,得到相机内参不确定性传播到像素点的不确定性的协方差Φi,构建特征点提取误差的协方差逆矩阵特征点提取误差的协方差矩阵为Ci,融合不确定性的协方差矩阵建模为Σi=Φi+Ci;所述相机内参的协方差矩阵ΣK的计算如下:特征点的投影误差建模为: 其中,和分别表示像素坐标系下图像点和投影点u轴坐标和v轴坐标的差值,e1,e2,e3为中间矩阵,形式为e1=[1,0,0],e2=[0,1,0],e3=[0,0,1];R和t表示相机的外参,形式如下: 其中r1,r2,r3为旋转矩阵第一列,表示世界坐标系XW轴在相机坐标系中的投影;r4,r5,r6为旋转矩阵第二列,表示世界坐标系YW轴在相机坐标系中的投影;r7,r8,r9为旋转矩阵第三列,表示世界坐标系ZW轴在相机坐标系中的投影;t1,t2,t3分别表示平移在XW,YW和ZW方向的分量,令T=[R,t],表示相机的外参矩阵,对式2的相机参数K和T求偏导,得到雅可比矩阵J: 其中,Aj和Bj是中间矩阵,j=1,2,...,m,Aj表示第j张图片中每个像素点残差对相机内参的偏导矩阵;Bj表示第j张图片中每个像素点残差对相机外参的偏导矩阵,形式如下: 其中,表示函数*对变量·求偏导;Ki表示K的第i个参数,顺序为fx,fy,u0,v0;Ti表示T的第i个参数,顺序为r1,r2,r3,r4,r5,r6,r7,r8,r9,t1,t2,t3;相机参数K和T的协方差矩阵为J·J: 其中,表示矩阵[*]的转置矩阵;令其中,diag[*]表示[*]的对角矩阵,表示为: 从式7中提取关于相机内参K的协方差矩阵ΣK: 所述相机内参不确定性传播到像素点的不确定性的协方差Φi的计算过程:将相机坐标系下的点投影到像素坐标系下的点的投影方程为: 其中,xi,yi和zi分别表示相机坐标系下三维点的XC,YC和ZC轴的坐标;ui和vi分别表示像素坐标系下图像点qi的u轴坐标和v轴坐标,而将像素坐标系反向投影到相机坐标系下,反投影得到相机坐标系的点为: 由相机内参不确定性传播引起的像素不确定性的协方差Φi为: 其中,Pi是公式9中相机内参的偏导矩阵: 对特征点提取误差的协方差逆矩阵建模: 其中,Ci为测量误差的协方差矩阵,Wi为以特征点ui,vi为中心的椭圆区域,wiui,vi为椭圆区域的像素灰度之和,和分别为图像在u和v方向上的梯度;所述融合不确定性的协方差矩阵Σi为:Σi=Φi+Ci14然后,构造基于融合不确定性的目标函数,针孔相机投影模型为: 两边同时除以深度信息,通过式15可得到像素点残差εi: 其中,为简化式16,令式16简写为: 则有基于融合不确定性的目标函数: 其中,是Σi的逆矩阵;对每个残差项εi进行一阶泰勒展开:εi≈HiδT19其中,Hi是残差对相机外参数T=[R,t]的雅可比矩阵,δT是旋转矩阵和平移向量的偏差;构建线性最小二乘目标函数: 从线性最小二乘目标函数式20构建正规方程: 其中,获取相机外参的雅可比矩阵和扰动,将预先建立的融合不确定性的目标函数转换为线性最小二乘目标函数,其中,所述预先建立的融合不确定性的目标函数基于融合不确定性的协方差矩阵构建;对线性最小二乘目标函数进行迭代优化,并进行求解,得到校正最小二乘解,作为相机位姿估计结果;所述得到校正最小二乘解的计算过程:将式20作为优化目标函数求解位姿参数,对式20进行迭代优化,直到δT小于阈值或迭代次数超过设定的最大迭代次数,输出当前的旋转矩阵,如下:假设第k次迭代时的相机外参数为Tk=[Rk,tk],根据式17和式19得到当前的像素点残差雅可比矩阵和偏差δTk,当前的正规方程为: 求解正规方程来得到δTk: 则当前估计的校正值为:Tk+1=Tk+δTk24并作为下一次迭代的相机外参,直到δT小于阈值或迭代次数超过设定的最大迭代次数,输出当前的旋转矩阵Tk。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人南京信息工程大学,其通讯地址为:210044 江苏省南京市浦口区宁六路219号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。