申抒含，中国科学院自动化研究所研究员、博士生导师，中国科学院大学人工智能学院岗位教授，中科院工业视觉智能装备技术工程实验室副主任。研究领域为三维计算机视觉理论与应用，包括大规模场景三维重建、智能机器人三维环境感知、场景三维语义理解等。在计算机视觉、摄影测量、机器人等领域国际期刊和国际会议，如IEEE Trans、IJCV、ISPRS JPRS、CVPR、ICCV、ICRA、IROS等发表论文90余篇。作为项目负责人主持国家自然科学基金联合重点项目、北京市自然科学基金联合重点项目、以及各类企业研发项目20余项。入选中科院青年创新促进会、中科院自动化所特聘青年骨干、中科院特聘研究岗位，曾获2016年ACM北京新星奖、2018年中国图像图形学会科学技术二等奖、2023年中国测绘学会科学技术一等奖、2023年中国自动化学会自然科学一等奖等。
| 工作经历 | 学术兼职 | 主要荣誉 | 科研项目 | 学术报告 | 学术论文 | 指导学生 | English |
研究领域
- 三维计算机视觉
- 大规模场景三维重建
- 场景三维语义理解
教育经历
-
博士, 上海交通大学, 自动化系, 2010
-
硕士, 西南交通大学, 电气工程学院, 2006
-
学士, 西南交通大学, 电气工程学院, 2003
工作经历
- 2022-至今, 中国科学院自动化研究所, 中科院工业视觉智能装备技术工程实验室, 研究员、副主任
- 2019-2022, 中国科学院自动化研究所, 模式识别国家重点实验室, 研究员
- 2013-2019, 中国科学院自动化研究所, 模式识别国家重点实验室, 副研究员
- 2010-2013, 中国科学院自动化研究所, 模式识别国家重点实验室, 助理研究员
学术兼职
- 中国计算机学会, 杰出会员
- 中国图像图形学会, 高级会员
- IEEE, Senior Member
- 中国计算机学会, 计算机视觉专委会, 委员
- 中国图像图形学会, 机器视觉专委会, 委员
- 中国图像图形学会, 三维视觉专委会, 常务委员
- 中国图学学会, 可视化与认知计算专委会, 委员
- 中国电影美术学会, 虚拟空间专委会, 委员
- 中国图像图形学会, 青年工作委员会, 委员
主要荣誉
- 2024, CVPR2024城市三维结构化建模竞赛(Building3D Challenge)冠军
- 2023, 中国自动化学会自然科学一等奖
- 2023, 中国测绘学会科学技术一等奖
- 2021, CVPR2021三维矢量化BIM建模竞赛(Scan-to-BIM Challenge)冠军
- 2019, CVPR2019长时视觉定位竞赛(Long-Term Visual Localization Challenge)冠军
- 2018, 中国图像图形学会科学技术二等奖
- 2016, ACM北京新星奖
- 2015, 中国科学院青年创新促进会
- 2010, 上海交通大学优秀毕业研究生
- 2009, 上海交通大学潘文渊奖学金
- 2008, 上海交通大学研究生国家奖学金
- 2007, 四川省首届优秀硕士论文
- 2006, 西南交通大学优秀硕士论文
- 2006, 西南交通大学优秀毕业研究生
- 2005, 西南交通大学华为奖学金
- 2003, 西南交通大学优秀本科毕业设计
科研项目
- 2023-2026, “恶劣天候下大规模复杂三维场景理解理论与方法”, 国家自然科学基金-企业创新发展联合基金重点项目
- 2023-2026, “城市场景三维语义矢量化重建关键问题研究”, 国家自然科学基金面上项目
- 2023-2026, “高精度稠密地图构建及定位用地图轻量化存储方法”, 北京市自然科学基金-小米创新联合基金重点项目
- 2023-2026, “元宇宙三维数字孪生关键技术研究与示范应用”, 河南省重点研发专项项目
- 2022-2023, “基于倾斜摄影的点云语义分割和LOD2建筑物单体化系统”, 企业合作项目
- 2022-2023, “电力走廊三维数字化检测平台”, 企业合作项目
- 2021-2023, “面向地理信息和定位导航的三维视觉系统与装备”, 中国科学院人工智能创新研究院2035创新任务
- 2021-2022, “城市场景高精三维感知与高效语义理解”, 模式识别国家重点实验室自主课题
- 2020-2021, “高效矢量化地图构建与视觉定位”, 企业合作项目
- 2019-2023, “室内外大规模场景三维语义矢量重建技术”, 企业合作项目
- 2019-2020, “基于手机图像采集的室内视觉定位技术”, 企业合作项目
- 2019-2020, “基于视觉的大规模室内场景重建与定位”, CCF-滴滴盖亚青年学者科研基金项目
- 2019-2022, “中国古建三维数字化保护中的天地图像融合问题研究”, 国家自然科学基金面上项目
- 2017-2021, “基于语义分析的大规模场景视觉重建关键技术研究”, 国家自然科学基金重点项目子课题
- 2016-2017, “基于手机图像的桌面场景三维重建”, 企业合作项目
- 2015-2018, “基于深度图融合的大场景多视图立体重建研究”, 国家自然科学基金面上项目
- 2015-2018, “中科院青促会项目”, 中科院人才专项
- 2013-2015, “多源影像配准与融合”, 国家863项目
- 2013-2014, “城市街景稠密三维重建”, 国际合作项目
- 2012-2014, “基于单目图像的变形体三维重建研究”, 国家自然科学基金青年项目
学术报告
- 2024.10, “大规模场景高精度位姿解算与结构化三维建模”, 中国模式识别与计算机视觉大会(PRCV 2024)
- 2024.10, “Tutorial: Structure-from-Motion 大规模场景三维重建的基石”, 中国模式识别与计算机视觉大会(PRCV 2024)
- 2024.10, “大规模场景高精度位姿解算与结构化三维建模”, 中国计算机图形学大会(Chinagraph 2024)
- 2024.06, “大规模复杂场景三维重建与理解”, CSIAM-GDC走进企业, 广联达
- 2024.04, “空间计算年度研究进展报告”, 中国三维视觉大会(China3DV 2024)
- 2023.11, “几何与学习融合的大规模场景三维重建”, ChinaVR2023, 几何建模与数字孪生论坛
- 2023.06, “大规模复杂场景三维重建与理解”, VALSE2023, 三维视觉技术前沿论坛
- 2023.03, “大规模复杂场景三维重建与理解”, CSIG图像图形中国行, 哈尔滨工业大学
- 2022.12, “大规模复杂场景三维重建与理解”, GAMES Webinar
- 2022.11, “大规模复杂场景三维重建与理解”, 中国自动化学会青年学术年会(YAC2022)
- 2022.10, “大规模复杂场景三维重建与理解”, 煤科总院光熙论坛
- 2022.08, “图像三维重建研究中的关键问题”, CCF-CV计算机视觉前沿进展研讨会(RACV 2022)
- 2022.03, “Image-based Large-scale Indoor Scene 3D Modeling”, UPINLBS2022, Indoor Mobile Mapping
- 2021.12, “大规模城市场景高精高效三维感知”, 中国计算机大会(CNCC 2021), 5G时代的三维视觉技术论坛
- 2021.11, “Image-based Large-scale Indoor Scene 3D Modeling”, Huawei Multimedia Summit 2021
- 2021.10, “图像三维几何重建年度进展概述”, ChinaVR2021, Annual Progress Report
- 2021.10, “基于图像的大规模室内场景三维重建”, 2021中国地理信息科学理论与方法学术年会, 室内构图与应用
- 2021.10, “Large-scale Scene 3D Reconstruction for Autonomous Systems”, Huawei STW2021 Autonomous Driving
- 2021.09, “面向无人系统的大规模场景三维感知”, VALSE Webinar
- 2021.07, “大规模城市场景三维重建”, 第九届计算机图形学暑期学校, 中国科学技术大学
- 2021.04, “城市场景三维重建与结构化表达”, CCF-CV走进高校, 山东建筑大学
- 2020.08, “基于图像的三维重建”, 第三届SLAM技术及应用暑期学校, 浙江大学
- 2020.08, “城市场景视觉三维地图与视觉定位”, 商汤AI前沿论坛周
- 2019.12, “基于图像的大规模场景三维建模——从几何重建到语义矢量重建”, CSIG图像图形学科前沿讲习班, 三维场景感知与理解
- 2019.08, “SLAM and 3D Reconstruction——Image Based 3D Modeling”, ICIG2019 Tutorial
- 2019.08, “基于图像的大规模场景三维建模——从几何重建到语义矢量重建”, CAD&CG2019, 三维视觉专题论坛
- 2019.07, “基于图像的三维建模”, 第二届SLAM技术及应用暑期学校, 浙江大学
- 2019.06, “基于图像的大规模场景三维建模——从几何重建到语义矢量重建”, CSIG图像图形中国行, 大连理工大学
- 2019.04, “基于图像的大规模场景三维建模——从几何重建到语义矢量重建”, VALSE2019, 三维视觉与深度学习论坛
- 2018.08, “SLAM与增强现实——基于图像的三维建模”, CAD&CG2018 Tutorial
- 2018.07, “基于图像的大规模场景三维建模”, 第一届全国SLAM技术论坛, 浙江大学
- 2018.05, “基于图像的大规模场景三维建模”, 云栖2050, 三维视觉及应用论坛
- 2018.03, “基于图像的大规模场景三维建模”, 上海视辰科技
- 2017.12, “基于图像的大规模场景三维建模”, 中科院深圳先进院, 城市三维感知学术研讨会
- 2017.11, “基于图像的大规模场景三维建模”, CCCV2017 Tutorial
- 2017.09, “基于图像的大规模场景三维建模”, EasyAR开发者大会
- 2017.07, “基于图像的大规模场景三维建模”, 商汤科技
- 2017.04, “基于图像的大规模场景三维建模”, CCF-CV走进高校, 武汉大学
- 2017.01, “基于图像的大规模场景三维建模”, VALSE Webinar
代表性论文 | 所有论文
IRAv3+: Hierarchical Incremental Rotation Averaging via Multiple Connected Dominating Sets.
IEEE Transactions on Circuits and Systems for Video Technology, 34(4): 3049-3055, 2024.
Neural Reflectance Decomposition Under Dynamic Point Light.
IEEE Transactions on Circuits and Systems for Video Technology, 34(4): 2195-2208, 2024.
Recent Advances in Conventional and Deep Learning-Based Depth Completion: A Survey.
IEEE Transactions on Neural Networks and Learning Systems, 35(3): 3395-3415, 2024.
McSfM: Multi-camera Based Incremental Structure-from-Motion.
IEEE Transactions on Image Processing, 32: 6441-6456, 2023.
PanoVLM: Low-Cost and Accurate Panoramic Vision and LiDAR Fused Mapping.
ISPRS Journal of Photogrammetry and Remote Sensing, 206: 149-167, 2023.
Vehicle-Borne Multi-Sensor Temporal-Spatial Pose Globalization via Cross-Domain Data Association.
IEEE Transactions on Intelligent Transportation Systems, 24(12): 13962-13975, 2023.
Efficient 3D Scene Semantic Segmentation via Active Learning on Rendered 2D Images.
IEEE Transactions on Image Processing, 32: 3521-3535, 2023.
3D Semantic Segmentation of Aerial Photogrammetry Models Based on Orthographic Projection.
IEEE Transactions on Circuits and Systems for Video Technology, 33(12): 7425-7437, 2023.
IRAv3: Hierarchical Incremental Rotation Averaging on the Fly.
IEEE Transactions on Circuits and Systems for Video Technology, 33(4): 2001-2006, 2023.
FloorUSG: Indoor Floorplan Reconstruction by Unifying 2D Semantics and 3D Geometry.
ISPRS Journal of Photogrammetry and Remote Sensing, 196: 490–501, 2023.
IRA++: Distributed Incremental Rotation Averaging.
IEEE Transactions on Circuits and Systems for Video Technology, 32(7): 4885-4892, 2022.
VidSfM: Robust and Accurate Structure-from-Motion for Monocular Videos.
IEEE Transactions on Image Processing, 31: 2449-2462, 2022.
Incremental Translation Averaging.
IEEE Transactions on Circuits and Systems for Video Technology, 32(11): 7783-7795, 2022.
Active Learning Based 3D Semantic Labeling From Images and Videos.
IEEE Transactions on Circuits and Systems for Video Technology, 32(12): 8101-8115, 2022.
Vectorized Indoor Surface Reconstruction from 3D Point Cloud with Multistep 2D Optimization.
ISPRS Journal of Photogrammetry and Remote Sensing, 177: 57-74, 2021.
Incremental Rotation Averaging.
International Journal of Computer Vision, 129: 1202–1216, 2021.
Urban Scene LOD Vectorized Modeling from Photogrammetry Meshes.
IEEE Transactions on Image Processing, 30: 7458-7471, 2021.
Complete Scene Reconstruction by Merging Images and Laser Scans.
IEEE Transactions on Circuits and Systems for Video Technology, 30(10): 3688-3701, 2020.
Efficient and Robust Large-Scale Structure-from-Motion via Track Selection and Camera Prioritization.
ISPRS Journal of Photogrammetry and Remote Sensing, 156: 202-214, 2019.
Ancient Chinese Architecture 3D Preservation by Merging Ground and Aerial Point Clouds.
ISPRS Journal of Photogrammetry and Remote Sensing, 143: 72-84, 2018.
Dynamic Graph Cuts in Parallel.
IEEE Transactions on Image Processing, 26(8): 3775-3788, 2017.
Dynamic Parallel and Distributed Graph Cuts.
IEEE Transactions on Image Processing, 25(12): 5511-5525, 2016.
Efficient Large-Scale Structure From Motion by Fusing Auxiliary Imaging Information.
IEEE Transactions on Image Processing, 24(11): 3561-3573, 2015.
How to Select Good Neighboring Images in Depth-Map Merging Based 3D Modeling.
IEEE Transactions on Image Processing, 23(1): 308-318, 2014.
Accurate Multiple View 3D Reconstruction Using Patch-Based Stereo for Large-Scale Scenes.
IEEE Transactions on Image Processing, 22(5): 1901-1914, 2013.
Convex Optimization for Nonrigid Stereo Reconstruction.
IEEE Transactions on Image Processing, 19(3): 782-794, 2010.
Monocular 3-D Tracking of Inextensible Deformable Surfaces Under L2-Norm.
IEEE Transactions on Image Processing, 19(2): 512-521, 2010.
指导学生
在读学生
- 屠殿韬, 博士研究生 (2020-至今)
- 刘昱州, 博士研究生 (2021-至今)
- 张子钰, 博士研究生 (2021-至今)
- 叶瀚樵, 博士研究生 (2022-至今)
- 杨以宁, 博士研究生 (2024-至今)
- 唐鑫成, 实习生, 北京科技大学, 博士研究生 (2019-至今)
- 曹梓育, 实习生, 西北工业大学, 博士研究生 (2021-至今)
毕业学生
- 崔海楠, 博士研究生 (2012-2016, 与胡占义研究员联合指导)
- 孙晓峰, 博士研究生 (2014-2017, 与胡占义研究员联合指导)
- 高 翔, 博士研究生 (2015-2019, 与胡占义研究员联合指导)
- 周 洋, 博士研究生 (2014-2019, 与胡占义研究员联合指导)
- 朱灵杰, 博士研究生 (2014-2020, 与胡占义研究员联合指导)
- 时天欣, 硕士研究生 (2017-2020)
- 王宝宇, 硕士研究生 (2018-2021)
- 何 颖, 硕士研究生 (2018-2021)
- 吕明哲, 硕士研究生 (2018-2021)
- 韩佳丽, 硕士研究生 (2019-2022)
- 宋 卓, 硕士研究生 (2019-2022)
- 王楚婷, 实习生, 北京理工大学, 硕士研究生 (2019-2022)
- 王春明, 实习生, 中国矿业大学, 硕士研究生 (2020-2022)
- 郑洵智, 实习生, 上海交通大学, 硕士研究生 (2021-2022)
- 李远东, 实习生, 北京航空航天大学, 硕士研究生 (2022-2022)
- 荣梦琪, 博士研究生 (2018-2023)
- 曹程阳, 实习生, 北京科技大学, 硕士研究生 (2021-2024)