基于语义约束与Graph Cuts的稠密三维场景重建

被引：6

作者：

王伟

高伟

胡占义

机构：

[1] 中国科学院自动化研究所模式识别国家重点实验室

来源：

中国科学:信息科学 | 2014年 / 44卷 / 06期

关键词：

语义标注; 平面拟合; 匹配扩散; 深度图; 能量优化;

D O I：

暂无

中图分类号：

TP391.41 [];

学科分类号：

080203 ;

摘要：

本文提出一种新颖、有效的稠密三维场景重建算法.在城市建筑场景的重建中,为了快速恢复稠密、准确的深度信息,本文算法首先在视图中对建筑区域进行了语义分割以降低非重建区域(如天空、地面等)的干扰,在提高整体重建速度的同时也增强了采用平面模型对其进行重建的可靠性;然后,在通过基于DAISY特征的空间点扩散方法获取的初始深度图的基础上,针对传统算法难以重建的弱纹理、倾斜表面等区域,本文算法依据场景分段平滑的假设,在超像素级MRF能量优化框架中对其相应的空间平面进行了推断.由于能量函数融合了初始深度图的约束、空间平面先验及空间平面间的几何关系等信息,而且候选平面集通过平面拟合和已知平面约束下的多方向平面扫描两种方法构造,使得相应的两阶段迭代Graph Cuts对能量函数的求解更快速和精确.在标准数据集和真实数据上的实验表明,本文算法能有效克服光照变化、透视畸变、弱纹理区域等因素的影响,快速恢复建筑区域完整的深度图.

引用

页码：774 / 792

页数：19

共 23 条

[1] Clustering by passing messages between data points. Brendan J. Frey,Delbert Dueck. Science . 2007
[2] Fast approximate energy minimization via graph cuts. Boykov Y,Veksler O,Zabin R. IEEE Transactions on Pattern Analysis and Machine Intelligence . 2001
[3] Accurate, Dense, and Robust Multiview Stereopsis. Yasutaka Furukawa,Jean Ponce. IEEE Transactions on Pattern Analysis and Machine Intelligence . 2010
[4] Distinctive image features from scale-invariant keypoints
Lowe, DG
[J]. INTERNATIONAL JOURNAL OF COMPUTER VISION, 2004, 60 (02) : 91 - 110
[5] Stereo for image-based rendering using image over-segmentation
Zitnick, C. Lawrence
Kang, Sing Bing
[J]. INTERNATIONAL JOURNAL OF COMPUTER VISION, 2007, 75 (01) : 49 - 65
[6] Modeling the world from Internet photo collections
Snavely, Noah
Seitz, Steven M.
Szeliski, Richard
[J]. INTERNATIONAL JOURNAL OF COMPUTER VISION, 2008, 80 (02) : 189 - 210
[7] Multi-view Superpixel Stereo in Urban Environments
Micusik, Branislav
Kosecka, Jana
[J]. INTERNATIONAL JOURNAL OF COMPUTER VISION, 2010, 89 (01) : 106 - 119
[8] Efficient large-scale multi-view stereo for ultra high-resolution image sets
Tola, Engin
Strecha, Christoph
Fua, Pascal
[J]. MACHINE VISION AND APPLICATIONS, 2012, 23 (05) : 903 - 920
[9] Decomposing a scene into geometric and semantically consistent regions. Gould S,Fulton R,Koller D. Proceedings of the 12th IEEE International Conference on Computer Vision (ICCV) . 2009
[10] Piecewise planar and non-planar stereo for urban scene reconstruction. Gallup D,Frahm J M,Pollefeys M. Proceedings of IEEE Conference on Computer Vision and Pattern Recognition (CVPR) . 2010

← 1 2 3 →