视觉slam中的相机模型汇总 | 单目、双目、RGB-D
点击上方“3D视觉工坊”,选择“星标”
干货第一时间送达
作者:梦寐mayshine
链接:https://zhuanlan.zhihu.com/p/94233848
本文转载自知乎,作者已授权,未经许可请勿二次转载。
运动模型
观测模型
单目相机 - 针孔相机模型
投影坐标:
相似三角形,得:
通过对称映射,整理得:
像素坐标系:原点 o′ 位于图像的左上角, u 轴向右与 x 轴平行, v轴向下与 y 轴平行。像素坐标系与成像平面之间,相差了一个缩放和一个原点的平移。我们设像素坐标在 u 轴上缩放了 α 倍,在 v 上缩放了 β 倍。同时,原点平移了 [cx,cy]T
内参数矩阵K (fx fy cx cy) 通常在相机生产时已经固定(相机坐标系)
外参数 - (世界坐标系)
世界坐标系 ->相机坐标系 Tcw * Pw = Pc / RPw + t = Pc ->归一化平面
世界坐标系:固定点P:Pw,
相机坐标系:相机运动,由R,t变化描述,Pc=RPw+t
归一化相机坐标:投影到归一化平面Z=1上,得到归一化相机坐标Pc=[X/Z,Y/Z,1]T
像素坐标:乘以内参矩阵Puv=KPc
相机畸变
由透镜形状引起的畸变称之为径向畸变:桶形畸变和枕形畸变
在相机的组装过程中由于不能使得透镜和成像面严格平行也会引入切向畸变
径向畸变+切向畸变
双目相机
RGB-D相机
返回RGB图 + 深度图Depth
通过红外结构光(Structured Light)来测量像素距离的。例子有 Kinect 1 代、 Project Tango 1 代、 Intel RealSense 等
通过飞行时间法(Time-of-flight, ToF)原理测量像素距离的。例子有 Kinect 2 代和一些现有的 ToF 传感器等
图像
推荐阅读:
那些精贵的3D视觉系统学习资源总结(附书籍、网址与****)
机器人抓取汇总|涉及目标检测、分割、姿态识别、抓取点检测、路径规划
重磅!3DCVer-学术论文写作投稿 交流群已成立
扫码添加小助手微信,可申请加入3D视觉工坊-学术论文写作与投稿 微信交流群,旨在交流顶会(ICRA/IROS/ROBIO/CVPR/ICCV/ECCV等)、顶刊(IJCV/TPAMI/TIP等)、SCI、EI等写作与投稿事宜。
同时也可申请加入我们的细分方向交流群,目前主要有3D视觉、CV&深度学习、SLAM、三维重建、点云后处理、自动驾驶、CV入门、三维测量、VR/AR、3D人脸识别、医疗影像、缺陷检测、行人重识别、目标跟踪、视觉产品落地、视觉竞赛、车牌识别、硬件选型、学术交流、求职交流等微信群,请扫描下面微信号加群,备注:”研究方向+学校/公司+昵称“,例如:”3D视觉 + 上海交大 + 静静“。请按照格式备注,否则不予通过。添加成功后会根据研究方向邀请进去相关微信群。原创投稿也请联系。
▲长按加微信群或投稿
▲长按关注公众号