论文阅读笔记:(2021.06, cvpr) Monocular 3D Object Detection: An Extrinsic Parameter Free Approach

这是一篇发表在了cvpr 2021上,能够在线估计外参的单目3D目标检测算法,借鉴了visual odometry和style transfer的方法,效果好, 速度快(~30ms), 意料之外,情理之中,非常值得一看!

paper:https://openaccess.thecvf.com/content/CVPR2021/papers/Zhou_Monocular_3D_Object_Detection_An_Extrinsic_Parameter_Free_Approach_CVPR_2021_paper.pdfhttps://openaccess.thecvf.com/content/CVPR2021/papers/Zhou_Monocular_3D_Object_Detection_An_Extrinsic_Parameter_Free_Approach_CVPR_2021_paper.pdf

精度对比:KITTI Cars Moderate Benchmark (Monocular 3D Object Detection) | Papers With Codehttps://paperswithcode.com/sota/monocular-3d-object-detection-on-kitti-cars

主要观点/贡献:

1. 实际使用单目3D目标检测的时候,需要考虑相机外参,否则检测结果会偏近或者偏远;

实现方式:

1. 借助VO(visual odometry)的方法,估计地平面和消失点,从而获得相机的外参;

2. 用估计出来的相机外参,并借鉴style transfer的方法,进行feature transfer, 把feature变换成相机光轴和地平面平行的情形;其中,位置/边缘等content 相关的feature要变,光照/纹理等style相关的feature不用变,如下图:

 

重要参考文献:

1. Deep learning for vanishing point detection on 1 million street view images

2. Perceptual losses for real-time style transfer and super-resolution

版权声明:本文为CSDN博主「chaoqinyou」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。
原文链接:https://blog.csdn.net/chaoqinyou/article/details/122774912

chaoqinyou

我还没有学会写个人说明!

暂无评论

发表评论

相关推荐

【三维目标检测】---3D IoU Net论文解读,预测IoU

代码链接 paper链接 个人博客 问题 本文首先说明了一个问题就是NMS是一个非常重要的去除预测结果中重复的后处理过程。一些工作已经发现在NMS中使用IOU来作为排序的标准能够取得更好的效果。这里作者还用一个实验证明了上述说法的正确性

Offboard 3D Object Detection From Point Cloud Sequences

声明 原文链接 摘要 虽然当前的3D对象识别研究主要集中在实时车载场景中,但许多非车载感知用例在很大程度上没有得到充分的探索,例如使用机器自动生成高质量的3D标签。由于有限的输入和速度限制,现在的