• Complex
  • Title
  • Keyword
  • Abstract
  • Scholars
  • Journal
  • ISSN
  • Conference
成果搜索

author:

童伟 (童伟.) [1] | 张苗苗 (张苗苗.) [2] | 李东方 (李东方.) [3] | 吴奇 (吴奇.) [4] | 宋爱国 (宋爱国.) [5]

Indexed by:

EI Scopus PKU CSCD

Abstract:

基于深度学习的多视角立体几何(MVS)旨在通过多个视图重建出稠密的3维场景.然而现有的方法通常设计复杂的2D网络模块来学习代价体聚合的跨视角可见性,忽略了跨视角2维上下文特征在3D深度方向的一致性假设.此外,基于多阶段的深度推断方法仍需要较高的深度采样率,并且在静态或预先设定的范围内采样深度值,容易在物体边界以及光照遮挡等区域产生错误的深度推断.为了缓解这些问题,该文提出一种基于边缘辅助极线Transformer的密集深度推断模型.与现有工作相比,具体改进如下:将深度回归转换为多深度值分类进行求解,在有限的深度采样率和GPU占用下保证了推断精度;设计一种极线Transformer模块提高跨视角代价体聚合的可靠性,并引入边缘检测分支约束边缘特征在极线方向的一致性;为了提高弱纹理区域的精度,设计了基于概率成本体积的动态深度范围采样机制.与主流的方法在公开的数据集上进行了综合对比,实验结果表明所提模型能够在有限的显存占用下重建出稠密准确的3D场景.特别地,相比于Cas-MVSNet,所提模型的显存占用降低了35%,深度采样率降低约50%,DTU数据集的综合误差从0.355降低至0.325.

Keyword:

Transformer 多视角场景重建 多视角立体几何 极线几何 深度估计

Community:

  • [ 1 ] [张苗苗]上海交通大学
  • [ 2 ] [李东方]福州大学
  • [ 3 ] [宋爱国]东南大学
  • [ 4 ] [童伟]南京理工大学机械工程学院 南京 210094;上海交通大学电子信息与电气工程学院 上海 200240
  • [ 5 ] [吴奇]上海交通大学

Reprint 's Address:

Email:

Show more details

Related Keywords:

Source :

电子与信息学报

ISSN: 1009-5896

CN: 11-4494/TN

Year: 2023

Issue: 10

Volume: 45

Page: 3483-3491

0 . 5

JCR@2023

0 . 5 0 0

JCR@2023

JCR Journal Grade:4

CAS Journal Grade:4

Cited Count:

WoS CC Cited Count:

SCOPUS Cited Count:

ESI Highly Cited Papers on the List: 0 Unfold All

WanFang Cited Count:

Chinese Cited Count:

30 Days PV: 0

Affiliated Colleges:

Online/Total:1312/10256481
Address:FZU Library(No.2 Xuyuan Road, Fuzhou, Fujian, PRC Post Code:350116) Contact Us:0591-22865326
Copyright:FZU Library Technical Support:Beijing Aegean Software Co., Ltd. 闽ICP备05005463号-1