标定板标定和九点标定的区别_标定系列一 | 机器人手眼标定的基础理论分析
![](/assets/blank.gif)
旷视MegMaster机器人系列是旷视自主研发的一系列AI智能机器人硬件设备,基于旷视全球领先的人工智能算法及机器人技术,可实现搬运、分拣、托举、存储等功能,被广泛应用于物流仓储、工厂制造等场景。旷视SLAM组主要负责多传感器建图、定位、标定等工作,在开发过程中总结了一些理论和实践方面的经验教训,在此分享出来,希望能够与大家一起探讨,为机器人行业贡献自己的绵薄之力。
近期我们会首先推出机器人多传感器标定的系列内容,包括:
- 标定系列一 | 基础理论分析
- 标定系列二 | 实践之Camera-Odometry标定
- 标定系列三 | 实践之Camera-Lidar标定
本文作者是旷视研究院研究员卢彦斌,在文中为大家主要介绍了机器人手眼标定的一些理论基础,以及轮式机器人标定中的一些常见做法,希望能够给大家一些启发。
目录
- 1 手眼标定的理论基础
- 1.1 AX=XB
- 1.2 约束条件分析
- 1.2.1 旋转矩阵所需的方程数量
- 1.2.2 平移向量的约束数量
- 2 基于平面运动的外参标定方法
- 2.1 传感器的旋转轴与平面法向量重合
- 2.2 引入其它约束
- 参考文献
- 附录A
一、手眼标定的理论基础
1.1
手眼标定(hand eye calibration)是机器人领域中一个历史悠久的问题。这里的手常指的是机械臂,眼常指的是安装于机械臂上的相机或者固定于环境中的相机。如下图所示。
![](/assets/blank.gif)
在实际应用中,我们通常需要将相机观察到的外界环境中物体的姿态从相机坐标系转换到机械臂的坐标系中,辅助机械臂规划一些后续动作(如抓取)。为了得到两坐标系之间的转换矩阵,我们就要对机器人进行手眼标定。手眼标定有两种常见的标定方法。第一种是通过特殊的标定物,第二种是通过机器人运动建立约束。本文主要讨论后一种方法。
假设k时刻,机械臂相对于世界坐标系的位姿为
同样地,对k+1时刻有
那么
令
1.2 约束条件分析
从
那么
![](/assets/blank.gif)
1.2.1 旋转矩阵所需的方程数量
本小节主要参考文献[1]。由上述等式条件可得:
![](/assets/blank.gif)
首先回顾一下旋转矩阵的性质,
- 旋转矩阵有且只有一个实数特征值1;
- 不考虑单位矩阵,旋转矩阵的实数特征值对应的特征向量即是axis-angle表达式的旋转轴,旋转矩阵的迹与旋转角度相关。
axis-angle表达式示意图如下所示[6]。
![](/assets/blank.gif)
旋转矩阵和axis-angle表达式的关系可以由Rodrigues公式表示。
![](/assets/blank.gif)
其中
![](/assets/blank.gif)
反对称矩阵有如下性质:
旋转矩阵的迹与旋转角度的关系为:
![](/assets/blank.gif)
假设
![](/assets/blank.gif)
即
![](/assets/blank.gif)
所以,
![](/assets/blank.gif)
上式说明,
![](/assets/blank.gif)
证明见附录A。
如果令
![](/assets/blank.gif)
上述方程有一个显然的特解
![](/assets/blank.gif)
由于
![](/assets/blank.gif)
示意图如下图所示。
![](/assets/blank.gif)
由
下面考虑两组组测量
![](/assets/blank.gif)
因此如果我们有两组测量,且传感器A(等价于B)在两组测量中的(局部坐标系下)旋转矩阵的旋转轴不同,那么能够求解得到
![](/assets/blank.gif)
从Rodrigues公式可以求得
1.2.2 平移向量的约束数量
在已知旋转矩阵的情况下,平移向量的约束推导情况较为简单。从一个方程
![](/assets/blank.gif)
同样,因为
![](/assets/blank.gif)
满秩等价于
二、基于平面运动的外参标定方法
机器人上不同传感器之间的外参可以用手眼标定的方式来标定,这一般需要机器人在三维空间运动。对于一大类机器人而言,其通常被设计成在平面上运动。这种情况下,传感器实际上只能绕一个轴(即平面法向量)旋转,其在任何局部坐标系下的旋转运动的旋转轴均保持不变。此时,我们能够求解出哪些参数呢?
假设世界坐标系的XY平面即为机器人的运动平面,Z轴为平面法向量。直观上来说,两个传感器的安装高度差对于局部旋转和平面上的平移没有影响,因此两个传感器各自坐标系的原点在世界坐标系下的z轴高度差是无法观测到的。实际上,我们从
![](/assets/blank.gif)
而
针对平面运动下的手眼标定问题,我们列举一些典型做法作为参考。
2.1 传感器的旋转轴与平面法向量重合
以带轮速计的机器人为例,通常可以假设轮速计的旋转轴和平面的法向量重合。我们能够证明,除了平移向量的z分量,其余5个参数都是可观的。
以参考文献[2]为例。作者的具体做法如下。
第一步,通过将
![](/assets/blank.gif)
那么旋转矩阵对应的方程变为
![](/assets/blank.gif)
即
![](/assets/blank.gif)
已知
2.2 引入其它约束
我们可以引入外界约束以求解所有参数,例如,2D激光和相机的外参标定通常需要6自由度参数。文献[4]利用V型标定板和棋盘格建立点到面的约束。文献[5]则利用互相垂直的三面体构建直线到平面和点到平面的约束。这部分与本文重点关系较小,这里就不分析了。
参考文献
- Tsai, Roger Y., and Reimar K. Lenz. "A new technique for fully autonomous and efficient 3D robotics hand/eye calibration." IEEE Transactions on robotics and automation 5.3 (1989): 345-358.
2. Antonelli, Gianluca, et al. "Simultaneous calibration of odometry and camera for a differential drive mobile robot." IEEE International Conference on Robotics and Automation(2010).
3. Guo, Chao X., Faraz M. Mirzaei, and Stergios I. Roumeliotis. "An analytical least-squares solution to the odometer-camera extrinsic calibration problem." 2012 IEEE International Conference on Robotics and Automation. IEEE, 2012.
4. Dong, Wenbo, and Volkan Isler. "A novel method for the extrinsic calibration of a 2D laser rangefinder and a camera." IEEE Sensors Journal 18.10 (2018): 4200-4211.
5. Gomez-Ojeda, Ruben, et al. "Extrinsic calibration of a 2D laser-rangefinder and a camera based on scene corners." 2015 IEEE International Conference on Robotics and Automation (ICRA). IEEE, 2015.
6. http://www.opengl-tutorial.org/intermediate-tutorials/tutorial-17-quaternions/
附录A
![](/assets/blank.gif)
作者简介
卢彦斌,北京大学博士,目前为旷视研究院高级研究员,长期从事三维重建和SLAM技术的产品化工作,对机器人、AR等领域有浓厚兴趣;作为核心成员参与研发了世界领先的口腔三维真彩扫描仪,其产品曾于2015年获得Bronze Edison Award for Innovation。
标定板标定和九点标定的区别_标定系列一 | 机器人手眼标定的基础理论分析相关推荐
- matlab tsai手眼标定程序代码_标定系列一 | 机器人手眼标定的基础理论分析
旷视MegMaster机器人系列是旷视自主研发的一系列AI智能机器人硬件设备,基于旷视全球领先的人工智能算法及机器人技术,可实现搬运.分拣.托举.存储等功能,被广泛应用于物流仓储.工厂制造等场景.旷视 ...
- scare机器人如何手眼标定_标定系列一 | 机器人手眼标定的基础理论分析
旷视MegMaster机器人系列是旷视自主研发的一系列AI智能机器人硬件设备,基于旷视全球领先的人工智能算法及机器人技术,可实现搬运.分拣.托举.存储等功能,被广泛应用于物流仓储.工厂制造等场景.旷视 ...
- 干货 | 相机标定:机器人手眼标定
作者丨张贶恩@知乎 来源丨https://zhuanlan.zhihu.com/p/76578691 编辑丨OpenCV与AI深度学习 相机标定是机器人视觉中非常重要的一步,可以帮助机器人转换识别到的 ...
- python如何实现手眼定标_相机标定(一):机器人手眼标定
相机标定是机器人视觉中非常重要的一步,可以帮助机器人转换识别到的视觉信息,从而完成后续的控制工作,例如视觉抓取等等. 笔者做过一些机器人手眼标定的工作,在此用尽量简单的语言来描述下机器人手眼标定的流程 ...
- 四轴平面机器人手眼标定方法,eye-in-hand,亲测可用(草稿,后期整理)
之前阅读博客:机器人手眼标定 (四轴六轴都适用):https://blog.csdn.net/Stones1025/article/details/90664168 发现有如下问题,所写方法并不适用于 ...
- 3D相机机器人手眼标定(眼在手上)全过程
3D相机机器人手眼标定(眼在手上)全过程 简述 目前在机器人高层规划中,机器人越来越依赖于摄像头的反馈信息,比如自动打磨,焊接,喷涂的智能规划,或者一些分拣,码垛的规划. 在项目开始前, 第一步要做的 ...
- 遨博协作机器人ROS开发 - 机器人手眼标定原理
目录 一.简介 二.环境版本 三.学习目标 四.知识储备 五.课堂小结 六.课后练习 一.简介 大家好,欢迎关注遨博学院带来的系列技术分享文章(协作机器人ROS开发),在前面课程中我们讲解了Intel ...
- 机器人手眼标定 (四轴六轴都适用)
机器人手眼标定 (四轴/六轴都适用) 问题解析 机器人手眼标定分为两种情况:eye-in-hand和eye-to-hand,即传感器是否安装在机器人手抓末端.不管是那种情况,手眼标定的科学问题都是 ...
- UR机器人装箱姿态_UR10 RG2机械臂手臂+RealsenseZR300 机器人手眼标定 系列第四篇
UR10 RG2机械臂手臂+RealsenseZR300 机器人手眼标定 系列第四篇 发布时间:2018-09-18 17:43, 浏览次数:1180 , 标签: UR RG RealsenseZR ...
最新文章
- 创建MySQL数据库
- 加速点击控制应用中的边缘分析和机器学习部署 | 免费直播
- 想做网络推广教你如何快速通过SEO考核期呢?
- Python 操作 MySQL 的正确姿势
- AI:2020年6月21日北京智源大会演讲分享之15:15-15:40黄萱菁教授《自然语言处理中的表示学习》
- python字符串出现次数最多的_python – Pandas:获取组中出现次数最多的字符串值...
- C++STL理论基础
- RxJava系列6(从微观角度解读RxJava源码)
- 英特尔强势上新一大波数据产品,小伙伴们“奔走相告”…… | 极客头条
- ubuntu14.04安装opencv3.1(亲测)
- [ASP]没有权限: 'CreateObject'
- oracle过程包保存乱码_这些火遍网络的哆啦A梦表情包,你知道出处吗?
- python埋点测试_测试一面(宇宙条)
- java新建json 数组_Java创建JSON对象
- Java-RPC通信--HSF框架
- java 打包加密_java打包、加密、发布(源代码保护)
- css td中画斜线,css 模拟表格斜线
- 慕课网前端JavaScript面试(4)
- access订单明细表怎么做_如何制作材料明细表...doc
- 怎样把计算机里的W0rd放到电脑桌面,电脑怎么把Word图标放到桌面?把Word图标放到桌面的设置方法...
热门文章
- Angular form控件原生HTML代码里ng-reflect-form属性和其值的生成时机
- TypeScript的类型断言,有点像ABAP的强制类型转换
- C4C的导航菜单的问题,disable这个属性,就会变成正常的两级菜单
- SAP UI5 control id generation by jQuery
- SAP UI5里sap.m.shell的实现
- SAP UI5 subscribe event实现原理
- how to avoid transport error when cloning project in Eclipse
- is transfer = C ( only read dynamically) not supported in one order scenario
- Product change时关于change_log的讨论
- how to undo git commit