论文阅读练习(8)

Mesh R-CNN(FRIA,2019)

摘要

目前在2D上系统可以精确检测目标在真实图像中。然而,2D上的预测忽略了3D的结构。当前,3D形状预测多数集中于合成benchmarks和单独目标上。此篇文章整合了这两个方面的优点,提出一个系统,在真实图片上检测目标,并且给每一个检测到的目标一个三角网格,显示其完整的3D形状。这个系统称为Mesh R-CNN,加强版Mask R-CNN,增加一个网格预测支,输出带有不同拓扑结构的网格。首先,预测粗的体素表示,转换成网格,然后用一个图卷积网络精细。在ShapeNet上验证网格预测支,单图像形状预测表现最好。在Pix3D上应用整个的Mesh R-CNN,联合检测目标和预测其3D形状。

问题:2D检测忽略3D结构信息

方法:

结合目标检测和形状检测进展,在Mask R-CNN上加一支做网格检测。

论文阅读练习(8)

效果:

论文阅读练习(8)

论文阅读练习(8)

论文阅读练习(8)