恭喜泉州装备制造研究所孙波获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网恭喜泉州装备制造研究所申请的专利基于四目全景相机的视觉惯导紧耦合SLAM方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN118967795B 。
龙图腾网通过国家知识产权局官网在2025-02-21发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202411440551.X,技术领域涉及:G06T7/70;该发明授权基于四目全景相机的视觉惯导紧耦合SLAM方法是由孙波;陈佳;程凯;黄兴宇;付奇强;王升设计研发完成,并于2024-10-16向国家知识产权局提交的专利申请。
本基于四目全景相机的视觉惯导紧耦合SLAM方法在说明书摘要公布了:本发明提供基于四目全景相机的视觉惯导紧耦合SLAM方法,属于机器人自主定位与建图技术领域,包括:提取四个独立且同步的鱼眼相机的图像的图像特征;对鱼眼相机的畸变进行校正,得到各图像特征所对应的矫正后的特征点;对矫正后的特征点进行全景投影,得到对应的全景球面坐标;进行位姿还原,采用全景视觉重投影角度误差函数,对所还原的位姿进行优化;以纯视觉运行n1帧后,进行视觉与IMU的融合优化,融合优化采用的误差函数为全景视觉重投影角度误差和IMU预积分误差所构建的联合平差函数;当位姿跟踪丢失时建立新的地图,根据回环检测执行回环融合或者地图融合。本发明能够有效提升在极端环境下的鲁棒性和稳定性。
本发明授权基于四目全景相机的视觉惯导紧耦合SLAM方法在权利要求书中公布了:1.基于四目全景相机的视觉惯导紧耦合SLAM方法,其特征在于:包括如下步骤:步骤S1、提取四个独立且同步的鱼眼相机所拍摄的图像的图像特征,并对IMU传感器的数据进行预积分处理以获取相邻两帧图像之间的相对位移量、相对旋转量和相对速度量;步骤S2、根据所提取的图像特征,分别对鱼眼相机的几何畸变和制造工艺畸变进行矫正,得到各图像特征所对应的矫正后的特征点;步骤S3、根据每个鱼眼相机的坐标系和全景坐标系之间的外参,对矫正后的特征点进行全景投影,得到对应的全景球面坐标,其中,外参包括各鱼眼相机坐标系到全景坐标系的旋转矩阵与偏置量;步骤S4、对前后相邻两个时刻的全景球面坐标进行特征匹配,并进行机器人位姿还原以跟踪局部地图,若跟踪丢失则进入步骤S5,否则在确定新的关键帧图像后进入步骤S1,并同时进入步骤S6,其中,在跟踪局部地图过程中,采用全景视觉重投影角度误差函数,通过衡量图像重投影的角度差异,对所还原的位姿进行优化;步骤S5、当跟踪丢失时建立新的局部地图,新的局部地图被设置为活跃地图,旧的局部地图被保存为非活跃地图,进入步骤S1;步骤S6、依据新的关键帧在局部地图创建新地图点,当已处理的图像帧数小于或者等于n1帧时,采用全景视觉重投影角度误差函数对创建新地图点后的局部地图进行优化,优化结束后,进入步骤S7并等待新的关键帧到来后进入步骤S6,当处理的图像帧数大于n1帧时,采用全景视觉重投影角度误差和IMU预积分误差所构建的联合平差函数对创建新地图点后的局部地图进行优化,优化结束后,进入步骤S7并等待新的关键帧到来后进入步骤S6;步骤S7、进行回环检测,当检测到的回环属于活跃地图时,则执行回环融合,当检测到的回环属于非活跃地图时,则进行地图融合;所述全景视觉重投影角度误差函数表示为,其中,表示第i时刻的全景球心坐标到第j个地图点,表示第i时刻的全景球心坐标到全景相机光心的向量,表示第i时刻的全景球心坐标到第j个地图点在全景球面的映射的向量,其具体表示形式为,表示第i时刻全景图像的球心坐标,表示全景相机的位姿,表示第j个地图点,全景相机由四个鱼眼相机组成,能够观察360°景象,rs表示全景球体的半径;所述步骤S6中,所述联合平差函数表示为,其中,表示观察到的地图点j的关键帧集合,表示k时刻的状态量,表示地图点的坐标,,,,,、、分别表示在i-1时刻到i时刻这段时间内旋转、速度和位移的理想预积分量,Ri-1表示i-1时刻机器人相对于世界坐标系的旋转矩阵,vi表示i时刻机器人的速度,pi表示i时刻机器人相对于世界坐标系的位移,g表示重力加速度,表示i-1时刻到i时刻之间时间的变化量,表示IMU预积分误差项,表示IMU预积分误差项的协方差,l表示搜索匹配到的地图点个数,rij表示重投影角度残差项,表示重投影角度残差项的协方差,表示核函数。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人泉州装备制造研究所,其通讯地址为:362123 福建省泉州市台商投资区洛阳镇上浦村吉贝511号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。