课题组论文Opt3DGS: Optimizing 3D Gaussian Splatting with Adaptive Exploration and Curvature-Aware Exploitation被AI顶会AAAI 2026录用。3D高斯泼溅(3DGS)本质是一个类似最小二乘平差的优化问题:估计高斯球的位置、大小、颜色等的最优参数。3DGS优化过程同样会发生陷入局部最优且收敛精度不足的情况。课题组提出Opt3DGS,一种无需修改高斯表示、仅通过改进优化策略即可显著提升重建质量的通用框架,在多个标准数据集上实现当前最优渲染性能。从探索与优化两个维度出发,设计了“自适应探索 + 曲率感知利用”的两阶段优化策略。在探索阶段,引入自适应加权SGLD(AW-SGLD),动态重加权后验分布以降低模式间能量壁垒,增强全局探索能力;在利用阶段,构建了局部拟牛顿方向引导的Adam优化器,利用L…
课题组论文Beyond Appearance: Geometric Cues for Robust Video Instance Segmentation 被International Conference of Computer Vision(ICCV)的Workshop接收。该文全面评估了现有视频实例分割(VIS)方法对复杂场景(如遮挡、外观相似)的处理能力,证实了单纯依赖外观特征的局限性。论文提出了三种方式,通过引入深度几何线索显著提高了VIS网络在复杂视频目标上的性能和跟踪连贯性。在OVIS、YouTube-VIS 2019/2021等多个主流VIS基准数据集上的实验一致表明本文方法超越了先进的基线方法,取得了SOTA结果;特别是在处理严重遮挡和身份模糊的挑战性场景时,论文方法展现出更优越的稳健性和跟踪连贯性。祝贺牛泉竹同学!
发表论文
基于课题组成果Sa2VA的改进方案Segmentation Augmented and Selective Averaged Sa2VA (SaSaSa2VA) 在ICCV 2025 Large-scale Video Object Segmentation (LSVOS) 挑战赛Referring Video Object Segmentation (参考视频目标分割, RVOS) 赛道获得了冠军,且遥遥领先第二名,证明了我们的方法在参考视频目标分割任务上的优越性。我们发现对于RVOS任务Sa2VA的两个主要问题:因采样帧数过低导致视频信息理解不足、单一 [SEG] token 难以传递视频时序信息。为解决以上问题,我们提出了关键帧压缩和增加 [SEG] token 的分割增强方法,并采用了选择性平均的测试增强策略。详见预印版报告: The 1st Solution for 7th LS…
课题组论文Domain Generalization for Semantic Segmentation of Remote Sensing Images via Vision Foundation Model Fine-tuning在顶级期刊ISPRS Journal of Photogrammetry and Remote Sensing发表。该文全面评估了主流VFM在遥感图像分割中的泛化性能,证实VFM优于经典CNN/Transformer骨干网络以及基于此类骨干网的传统域泛化方法;并提出一种新域泛化方法,进一步提高了VFM分割网络在跨域目标上的性能和鲁棒性。该域泛化方法包含两个关键模块,地理空间语义适配器(GeoSA)和批处理风格增强器(BaSA)。GeoSA从预训练的DINO v2中提取鲁棒特征,并生成适用于遥感图像的多尺度特征。BaSA采用批处理数据增强来减少对数据集特定特征的…
课题组论文"The Combined Effects of Topography and Climate Factors Dominate the Spatiotemporal Evolution of the Ecological Environment in the Yangtze River Economic Belt"近期被环境科学领域期刊《Land Degradation & Development》正式录用发表。该研究创新性地融合遥感监测与地理统计方法,系统评估了2000-2024年长江经济带生态环境质量的时空演变规律。研究发现,研究区整体生态环境质量较高(平均RSEI指数0.68),但呈现显著空间异质性:浙江、江西等东部省份生态质量优良,而云南西北部、四川西南部等高原地区生态较为脆弱。通过地理探测器模型(OPGD)分析表明,地形高程(DEM)、温度(Tem)和人口密度(POP…
发表论文
课题组论文Open-vocabulary generative vision-language models for creating a large-scale remote sensing change detection dataset被一区Top期刊ISPRS Journal of Photogrammetry and Remote Sensing(IF=10.6)接受。我们将生成式视觉语言模型应用于遥感数据增强领域,构建首个支持25种语义变化方向的大规模高质量生成式变化检测数据集WHU-GCD。数据集在样本规模、类别平衡和标注精度方面均显著优于现有数据集,基于该数据集训练的深度学习模型在二值变化检测(binary change detection, BCD)和语义变化检测(semantic change detection, SCD)任务(即from-to 变化检测任务)中均取得…
发表论文
课题组论文“Spatial heterogeneity, interaction and multi-scale effects of driving factors of heat island intensity in different urban agglomerations”近期被一区Top期刊Sustainable Cities and Society(IF=10.5)接收。该研究采用遥感和地理统计等先进方法,系统分析了中国长江流域三大城市群(成都-重庆城市群UACC、长江中游城市群UAYZMR、长江三角洲城市群UAYZD)的地表城市热岛(SUHI)的空间异质性及其驱动机制。研究发现,不同城市群SUHI的主导驱动因素存在显著差异:成渝城市群主要受海拔(DEM)和夜间灯光(NL)影响,长江中游城市群主要受植被覆盖(FVC)和海拔调控,而长三角城市群则主要受植被覆盖和夜间灯光驱动。…
课题组论文Dvis++: Improved decoupled framework for universal video segmentation近期被顶级期刊IEEE Transactions on Pattern Analysis and Machine Intelligence (PAMI)接受。我们提出了用于通用视频分割任务的解耦视频分割框架DVIS,全面涵盖视频实例分割(VIS)、视频语义分割(VSS)和视频全景分割(VPS)。我们将视频分割解耦为三个级联子任务:分割、跟踪和优化。这种解耦设计简单且有效地建模对象的时空表示。针对跟踪和优化,分别构建两个新颖的组件:参考跟踪器和时序优化器。参考跟踪器逐帧跟踪对象,时序优化器基于预对齐的特征建模时空表示。我们还提出一种去噪训练策略并引入对比学习,形成DVIS++。DVIS++能够执行通用和开放词汇的视频分割。我们在包括VIS、VSS…
发表论文
课题组论文A Novel Shape Guided Transformer Network for Instance Segmentation in Remote Sensing Images近期被期刊IEEE JSTARS发表。在本研究中,我们提出了一种新颖SGTN网络,在实例级别准确提取物体。受自注意力机制的全局上下文建模能力启发,我们提出LSwin,它结合垂直和水平的一维全局自注意力机制,以获得比Swin Transformer更好的遥感图像全局感知能力。为了实现准确的实例掩码分割,我们引入了一个形状引导模块SGM来强调物体边界和形状信息。SGM强调局部细节信息,而LSwin则专注于全局上下文关系,两者的结合实现了出色的RSI实例分割。实验证明LSwin优于流行的ResNet和Swin Transformer编码器。提出的SGTN在两个单类数据集(WHU数据集和BITCC数据集)和一…
发表论文
课题组论文Online Temporal Fusion for Vectorized Map Construction in Mapless Autonomous Driving近期被期刊IEEE Robotics and Automation Letters发表。为了减少对高清地图的依赖,自动驾驶领域希望利用车载传感器在线生成矢量地图。然而,当前方法局限于处理单帧输入,限制了其在复杂场景中的鲁棒性。为了解决这一问题,我们提出了一种在线地图构建系统,利用长期时间信息来构建一致的矢量地图。该系统高效地将来自现有网络的所有历史道路标记检测结果基于哈希策略融合到一个语义体素地图中。将查找到的可靠体素逐步聚类为道路标记表示。最后,该系统估计道路的几何和拓扑结构,并被规划与控制模块使用。通过在复杂城市环境中进行的实验,证明了该系统可以有效地用于闭环自动驾驶系统。祝贺陈佳港同学!
科学家榜单
季顺平教授入选2024“中国知网高被引学者Top1%”。一级学科“测绘科学与技术”共123人入选。
发表论文
课题组论文“Point Could Mamba: Point Cloud Learning via State Space Model”被人工智能顶级会议AAAI接收。最近,状态空间模型(state space models)表现出强大的全局建模能力和线性计算复杂性。本文将这种架构应用于更高效、更有效地对具有线性计算复杂性的点云数据进行全局建模。首次证明了基于Mamba的点云方法可以优于之前基于变换器或多层感知器(MLP)的方法。为了使Mamba能够更有效地处理三维点云数据,提出了一种新的一致遍历序列化方法,将点云转换为一维点序列,同时确保序列中的相邻点在空间上也是相邻的。Point Cloud Mamba超越了最先进的基于点的方法PointNeXt,并在ScanObjectNN、ModelNet40、ShapeNetPart和S3DIS数据集上实现了新的SOTA性能。祝贺张韬同学!
2024 (12)
发表论文
课题组论文“OMG-LLaVA: Bridging Image-level, Object-level, Pixel-level Reasoning and Understanding”被人工智能顶级会议NeurPIS接收。
课题组论文“Improving Video Segmentation via Dynamic Anchor Queries”被计算机视觉顶级会议ECCV2024接收。现代视频分割方法采用对象查询来执行帧间关联,尚未考虑对现实世界中常见的新出现和消失的兴趣对象如何更好地建模。我们提出动态锚查询(DAQ),利用潜在候选对象的特征动态生成锚查询,缩短了锚查询和目标查询之间的转换距离。此外,引入了一种兴趣对象出现和消失的模拟(EDS)策略,不增加任何额外成本。最后,结合DAQ和EDS,提出DVIS-DAQ,在五个主流视频分割基准上实现了最新的最先进(SOTA)性能。祝贺周义康等同学!
发表论文
课题组论文“SAM-RSIS: progressively adapting SAM with box prompting to remote sensing image instance segmentation”被顶级期刊IEEE TGRS接收。在将预训练的SAM模型引入遥感实例分割之前,应该解决遥感和近景图像之间的域偏移问题。为了解决该问题、释放SAM在RSIS中的潜力,本文提出了一个名为SAM-RSIS的新框架。SAM-RSIS根据遥感数据逐步微调SAM的ViT骨干网络和掩码解码器,并使用目标检测框提示取代手动给定提示。在WHU、WHU-Mix和NWPU数据集上的实验结果证明本文方法优于基于SAM的各种衍生方法,实现了与特定最先进的实例分割方法相当甚至更好的性能。
发表论文
课题组论文“P2PFormer: A Primitive-to-polygon Method for Regular Building Contour Extraction from Remote Sensing Images”被顶级期刊IEEE TGRS接收。从遥感图像中提取规则建筑物轮廓是一项重大挑战。现有的方法经常难以处理不规则轮廓、圆角和冗余点,因此需要进行后处理来生成规则的多边形建筑轮廓。为了应对这些挑战,我们引入了一种基于通用几何基元的实例分割方法P2PFormer,无需后处理即可生成规则的建筑轮廓。首先对通用几何基元(包括顶点、直线和角等)进行分割,然后预测它们的拓扑顺序,从而直接构建规则的建筑轮廓。实验表明,P2PFormer在WHU、CrowdAI和WHU-Mix数据集上实现了最优性能。
课题组在Top期刊ISPRS Journal of Photogrammetry and Remote Sensing发表论文“From lines to Polygons: Polygonal building contour extraction from High-Resolution remote sensing imagery”。该论文在Transformer框架下,采用线特征作为基本几何单元,完成建筑物特征线的提取,然后,通过学习特征线之间的拓扑关系重建完整的规则建筑物矢量多边形轮廓。祝贺魏世清等同学!
发表论文
课题组在Top期刊IEEE Transactions on Geoscience and Remote Sensing发表论文“3D building instance extraction from high-resolution remote sensing images and DSM with an end-to-end deep neural network”。该论文从对齐的DSM和DOM出发,利用神经元网络提取建筑物的3D建筑物轮廓,并达到LoD1水平。祝贺余大文同学!
发表论文
课题组在Top期刊IEEE Transactions on Instrumentation and Measurement发表论文“3D LiDAR-Based Place Recognition Techniques: A Review of the Past 10 Years”。该文为最近10年快速发展的基于3D LiDAR的位置识别技术做了一个全面的回顾。祝贺杜志恒同学!
发表论文
课题组在International Journal of Remote Sensing发表论文“An interactive method for bridging the gap between deep learning based building contour segmentation and manual annotation”。鉴于当前建筑物自动提取算法尚无法完全取代人工作业的现状,评估并设计了如何采用交互式方法,实现效率与性能的平衡。实验证明本方法相较于手工方法具有明显的效率提升。祝贺田宇同学!
课题组论文“Long-Range Correlation Supervision for Land-Cover Classification from Remote Sensing Images”在IEEE TGRS期刊发表。在现代基于深度学习的语义分割方法中,长程依赖被用来补偿标准卷积的固有局部性。然而,在以前的研究中,用注意力机制或Transformer建模的长程依赖是无监督学习的,而不是基于客观事实的明确监督。在本文中,我们提出了一种用于遥感土地覆盖分类(语义分割)的监督型长程相关方法,称为监督长程相关网络(SLCNet),在SLCNet中,共享同一类别的像素被认为是高度相关的,而具有不同类别的像素则不相关,该类别一致性信息用来监督长程信息。例如,相距最远、风格迥异的建筑物特征也将被一致化。我们在三个公共遥感数据集(ISPRS Vaihingen、ISPRS Potsdam和Deep…
发表论文
课题组论文“Deep learning based multi-view stereo matching and 3D scene reconstruction from oblique aerial images”近期被国际Top期刊ISPRS Journal of Photogrammetry and Remote Sensing发表。这是我们团队近期的重要工作,代表三维智能重建领域的最新成果。在本文中,我们提出了一种3D场景重建框架Deep3D,Deep3D是国际首个基于深度学习的3D场景重建框架,用于从多视(倾斜)航空图像中获得3D Mesh模型。首先对输入传统航摄或倾斜图像执行空中三角测量和视图选择,然后使用提出的Ada-MVS深度学习模型推断每个图像的深度图,在过滤异常值之后,将所有深度图融合成密集的点云。最后,从密集的3D点生成带有纹理的Mesh网格作为最终产品。此外,由于目…
发表论文
竞赛获奖
不出所料,课题组视频语义分割成果获得了ICCV 2023的YouTube视频实例分割挑战赛冠军,且遥遥领先第二名。至此,我们同一项成果获得CVPR/ICCV双赛事冠军,为武汉大学首次。最新解决方案详见预印版论文:1st Place Solution for the 5th LSVOS Challenge: Video Instance Segmentation。祝贺张韬同学!
论文获奖
在2023年中国遥感大会上,季顺平教授获得“优秀论文作者”、和“遥感新势力”称号。
发表论文
课题组论文DVIS: Decoupled Video Instance Segmentation Framework被计算机视觉顶级会议ICCV 接收!Meet you in Paris! BTW,该工作的扩展版在ICCV2023的YouTube视频实例分割挑战赛中遥遥领先第二名,有望获CVPR/ICCV双料冠军!
CVPR是计算机视觉与模式识别领域顶级盛会,随会议一同发布的CVPR系列挑战赛吸引了全球众多顶尖团队参与。团队通过分析当前现有方法存在的问题,即实例分割与目标追踪(对齐)相互纠缠导致性能不佳的缺点,基于Transformer框架提出了DVIS(Decoupled Video Instance Segmentation)方法,设计了实例分割(Segmenter)、目标追踪(Tacker)和全局精化(Refiner)三个相对独立的流程。通过这种解耦的思想,获得了性能的巨大提升。
DVIS不仅仅获得CVPR的VPS挑战赛冠军,还在多个视频实例分割数据集榜单上占据榜首。特别地,在当前最权威且最具挑战性的OVIS(Occluded video instance segmentation)数据集上,牢牢占据第一名的位置超过半年,这在AI技术发展日新月异、视觉大模型层出不穷的今天,实属不易。
课题组论文“A Diverse Large-Scale Building Dataset and a Novel Plug-and-Play Domain Generalization Method for Building Extraction”被IEEE JSTARS期刊发表。本文建立了一个新的建筑数据集,并提出了一种新的域泛化方法,以促进高分辨率遥感影像建筑物提取研究。我们构建了一个多样化、大规模、高质量的建筑数据集,名为WHU-Mix建筑数据集。训练集包含从世界各地收集的43727张影像,测试集包含来自五大洲其他五个城市的8402张影像以模拟真实世界。本文提出了批处理风格混合(BSM)的域泛化方法,该方法可以作为一个高效的即插即用模块嵌入到建筑提取模型前端,为模型训练提供更广泛的数据分布。实验证实,与现有数据集相比,WHU-Mix将建筑提取模型的性能提高了6-36%mIoU;所提出…
发表论文
课题组论文“An evaluation of conventional and deep learning based image matching methods on diverse datasets”被期刊Photogrammetry Record发表。本文在近景室内、室外数据集、无人机数据集、卫星影像数据集,全面评估了传统匹配方法和深度学习方法的性能,特别是对特征点提取、特征描述、相似性度量三个步骤不同方法的54种组合进行了性能评估。实验结果表明,第一,不同组合/方法的性能在各个数据集之间差异较大,很难确定最佳组合和最优方法。第二,综合所有数据集上的性能,得到的两个最优组合是: SIFT+ContextDesc+NNDR和原始SIFT方法。第三,对于特征提取,基于深度学习的亚像素SuperPoint提取器仅次于SIFT;对于特征描述, ContextDesc描述符与SIFT描述符同…
发表论文
课题组论文“ParallelTracker: A Transformer Based Object Tracker for UAV Videos”在期刊Remote Sensing发表。本文设计了一种基于Transformer的无人机视频目标追踪算法,该算法能够以较快的速度收敛,且在UAV视频中的性能超过了经典的OSTrack 和STARK等视频追踪方法。祝贺尉浩然同学。
课题组论文“A General Deep Learning Based Framework for 3D Reconstruction from Multi-View Stereo Satellite Images”被Top期刊ISPRS Journal of Photogrammetry and Remote Sensing发表。我们提出了一个基于深度学习的通用框架Sat MVSF,用于从多视光学卫星图像重建三维(3D)地表。该框架包括预处理、多视立体匹配网络(Sat MVSNet)和后处理。我们将所提出的框架与流行的商业软件和开源方法进行了全面比较。在ZY-3三线阵相机WHU-TLC数据集上,所提出的框架在重建精度方面优于所有其他解决方案,在效率方面也优于大多数方法。在具有挑战性的MVS3D数据集(不同时期捕捉的WorldView-3图像)上,所提出的框架也超过了现有的方法,显示了强大…
发表论文
课题组论文“BuildMapper: A Fully Learnable Framework for Vectorized Building Contour Extraction”被Top期刊ISPRS Journal of Photogrammetry and Remote Sensing发表。由于方法论的困难、建筑结构的多样性和成像条件的不完善,像人类一样描绘建筑物的规则矢量轮廓仍然非常具有挑战性。我们提出了第一个端到端可学习的建筑轮廓提取框架BuildMapper,它可以像人类一样直接有效地绘制建筑多边形。BuildMapper由两个主要组件组成:1)生成初始建筑轮廓的初始化模块;以及2)轮廓演化模块,执行轮廓点的调整和精简。我们还构建了一个大规模建筑数据集WHU Mix(vector)以有利于基于轮廓(contour-based)的建筑提取方法的研究。大量实验验证了BuildMap…
课题组论文“Cross-spatiotemporal land-cover classification from VHR remote sensing images with deep learning based domain adaptation”被Top期刊ISPRS Journal of Photogrammetry and Remote Sensing发表。当前数据驱动的深度学习模型严重依赖训练数据(即源数据)和目标数据(即未标记数据)分布之间的高度相似性。然而,在实践中,这一条件很少得到满足。域自适应旨在缩小样本源数据和不含标签的目标数据之间的域差异,以充分利用历史训练数据,并摆脱连续的手工劳动。我们提出了一种新的用于跨时空分类的域自适应方法。它包括一个图像级自适应阶段,该阶段将源数据和目标数据的外观对齐,并生成目标风格化的源图像,以及一个特征级自适应阶段,该阶段进一步缩小深…
课题组论文“Earthquake Crack Detection from Aerial Images Using a Deformable Convolutional Neural Network”被Top期刊IEEE TGRS接受。该文设计了从航空遥感影像提取地震引起的地表破裂的完整流程。包括遥感影像数据预处理,提出一种新颖的深度学习线状地表裂缝分割方法,实例级后处理等等。论文也同时指出这是第一个将深度学习用于地震引起的自然地表同震破裂的研究工作。祝贺余大文同学!
课题组论文“E2EC: An End-to-End Contour-based Method for High-Quality High-Speed Instance Segmentation”被计算机视觉顶会IEEE CVPR 2022接受(https://arxiv.org/abs/2203.04074)。该文针对当前contour-based的实例分割中的数个问题提出了解决方案,包括将经验初始化轮廓改进为可学习的初始化外轮廓预测。方法在多个数据集(KITTI INStance (KINS) dataset, the Semantic Boundaries Dataset (SBD), the Cityscapes and the COCO dataset)上取得了最优的性能。祝贺张韬和魏世清同学!微信公众号详见:https://mp.weixin.qq.com/s/h1GbsfKlg…
课题组论文“A Combination of Convolutional and Graph Neural Networks for Regularized Road Surface Extraction”被期刊IEEE TGRS接受。该文利用易获取的道路中心线和图卷积神经元网络,实现道路路面的规则化提取,部分达到人工水平。同时能够修正偏离的中心线。 祝贺闫晶晶同学!
课题组论文“A New Spatial-Oriented Object Detection Framework for Remote Sensing Images”被期刊IEEE TGRS接受。与以往基于深度学习的遥感目标检测研究仅关注于目标的尺度和方向属性不同,我们首次针对遥感影像中目标的空间分布属性,设计和提出了基于目标的边界框生成策略。通过综合考虑遥感影像中目标的空间分布、尺度、方向、形状属性,构建了一个能够有效适应遥感目标特点的两阶段检测网络。祝贺余大文同学!
最近发表的论文
课题组论文“A concentric loop convolutional neural network for manual delineation level building boundary segmentation from remote sensing images”被期刊IEEE TGRS接受。本文提出了一种直接从遥感图像中自动提取建筑物矢量边缘的同心环卷积神经网络方法,该方法对于改变建筑物标注主要依赖人工的现状具有重要意义。同时,该方法在自然影像目标边缘提取上也表现优异。祝贺魏世清、张韬同学!
最近发表的论文
课题组论文“Panoramic Visual-Inertial SLAM Tightly Coupled with a Wheel Encoder”被Top期刊“ISPRS Journal of of Photogrammetry and Remote Sensing”接受。这篇文章为促进相关领域发展做出如下贡献:(1)首个为移动测量系统和无人驾驶汽车设计的全景视觉/惯导(IMU)/轮速计(wheel encoder)紧耦合SLAM系统PIW-SLAM。三类数据在图优化联合平差框架下,实现载体和相机定位。(2)一个为轮速计预积分设计的双轮差速模型。(3)通过引入廉价的轮速计,解决VIO初始化中的常见的退化问题。(4)与现有方法相比,唯一一个在各种不利环境下都表现高度稳定的SLAM系统(见视频)。祝贺姜帆、陈佳港同学!
课题组论文“A Learnable Joint Spatial and Spectral Transformation for High Resolution Remote Sensing Image Retrieval”被期刊IEEE JSTARS接受。本文有别于纯Data Augmentation + CNN架构的深度学习检索方法,尝试将带有可learnable参数的物理模型(几何变换模型和色彩变换模型)嵌入深度学习模型,让模型自动去发现最优视角和光照的图像,从而达到提高检索精度的目的。祝贺王雅梦同学,祝她在博士阶段更进一步!
最近发表的论文
课题组论文“Roof plane segmentation from LiDAR point cloud data using region expansion based L0 gradient minimization and graph cut” 被期刊IEEE JSTARS接受。本文改进了传统的L0梯度最小化方法,将其应用于点云的建筑物屋顶平面提取,效果明显优于其他方法。祝贺王瑄同学,祝他在博士阶段更进一步!
最近发表的论文
课题组论文“Rational Polynomial Camera Model Warping for Deep Learning Based Satellite Multi-View Stereo Matching”被计算机视觉顶级会议ICCV 2021接受。该文在国际上首次提出一种PRC参数的严格warping方法,保证了当前SOTA的深度学习立体匹配方法可以被直接应用到基于立体/多视卫星影像的匹配中,具有很好的理论意义和应用价值。(In this work, we propose, for the first time, a rigorous RPC warping model. The rational polynomial coefficients are recorded as a tensor, and the RPC warping is formulated as a se…
(1) 课题组论文“Scribble-based Weakly Supervised Deep Learning for Road Surface Extraction from Remote Sensing Images”被期刊IEEE TGRS接受。In this paper, we propose a scribble-based weakly supervised road surface extraction method named ScRoadExtractor, which learns from easily accessible scribbles such as centerlines instead of densely annotated road surface ground-truths. 祝贺魏瑶同学!
(2) 课题组论文“Graph Convolutional Networks for the Automated Production of Building Vector Maps from Aerial Images”被期刊IEEE TGRS接受。In this study, we aim to find a way to replace human delineation with automated algorithms. For this purpose, we designed a novel pipeline for the automated production of building vector maps from aerial images, which consists of a bounding-box generation module, a graph co…
(3) 课题组论文“Multi‐Scale Attentive Aggregation for LiDAR Point Cloud Segmentation”被期刊Remote Sensing接受。In this paper, we propose a Multi‐Scale Attentive Aggregation Network (MSAAN) to achieve the global consistency of point cloud feature representation and super segmentation performance. 祝贺耿笑笑等同学!
圣诞聚会
The third Christmas of GPCV! We enjoyed food, music, a movie, lottery draw, and, of cause, the year-end bonuses! New goals of 2021 were set, let's move on!
我们在Top期刊“ISPRS Journal of Photogrammetry and Remote Sensing”发表了论文“Automatic 3D building reconstruction from multi-view aerial images with deep learning”。这篇文章首次将深度学习技术应用于从多视航空影像中完整重建建筑物三维模型,取得了很好的效果。能够自动重建的建筑物(达到人类绘制水平)比其他方法至少高出50%,是该领域一个较大的进展,被审稿人评价为:Clearly set new standards for the task of automatic 3D LOD1 building model extraction。祝贺余大文等同学!
壮丽河山
课题组福建调研。
最近发表的论文
课题组论文“Gated Convolutional Networks for Cloud Removal From Bi-Temporal Remote Sensing Images”在期刊remote sensing发表。该文展示了门限卷积在云修复中的作用。通过门限卷积,深度学习算法可以合理地区分云区和非云区,与传统卷积(无法区分云区无效像素和干净像素)相比,具有明显的优势。
课题组论文“Simultaneous Cloud Detection and Removal From Bitemporal Remote Sensing Images Using Cascade Convolutional Neural Networks”被Top期刊IEEE TGRS发表。该文研究了利用卷积神经元网络实现一体化的遥感影像云检测和云修复,首次将云检测和云修复两类任务统一到一个完整的框架下,效果明显优于State-of-the-arts。祝贺戴佩玉同学!
最近发表的论文
课题组论文“Simultaneous Road Surface and Centerline Extraction From Large-Scale Remote Sensing Images Using CNN-Based Segmentation and Tracing”被Top期刊IEEE TGRS发表。该文研究了如何从遥感影像中同时提取道路的分割路面和拓扑网。相对于以前的仅做分割的深度学校方法,连通性提升了40%。方法的稳定性也在全球40个城市数据集中得到验证。祝贺魏瑶和张凯同学!
课题组论文“Evaluating generative adversarial networks based image-level domain transfer on multi-source remote sensing image segmentation and object detection”被期刊International Journal of Remote Sensing发表。该文首次较全面评价了基于GAN的图像级域自适应方法在遥感图像分割和目标检测中的应用,并指出了该方法的不足。祝贺罗牧莹和李雪同学!
最近发表的论文
课题组论文“Landslide detection from an open satellite imagery and digital elevation model dataset using attention boosted convolutional neural networks”被地灾领域Top期刊Landslides发表。该文研究了从卫星影像中自动识别和检测地质滑坡的深度学习方法。通过滑坡重灾区贵州省毕节市的实验,验证了本文方法的可行性。同时该市的地址滑坡数据集已经在课题组数据仓库开源。祝贺余大文同学!
最近发表的论文
课题组论文“A Novel Recurrent Encoder-Decoder Structure for Large-Scale Multi-view Stereo Reconstruction from An Open Aerial Dataset” (https://arxiv.org/abs/2003.00637)被计算机视觉领域Top会议CVPR接受。该文提出了一种基于循环编码-解码结构,实现了多视影像的高精度快速匹配和三维重建,其精度超过最先进的深度学习方法和基于传统方法的商业软件。同时多视/双目密集匹配数据集在课题组数据仓库开源。祝贺刘瑾同学!
课题组论文“Panoramic SLAM from a Multiple Fisheye Camera Rig”被摄影测量与遥感领域Top期刊“ISPRS Journal of Photogrammetry and Remote Sensing”接收。该文发展一种针对全景相机和多相机组合的SLAM方法,可应用于测绘中的移动测图系统,以及全景头盔等装置。填补了国际相关研究空白。
最近发表的论文
课题组论文“Densely-Connected Convolutional Neural Network for RGB-NIR image matching”被期刊remote sensing接收。该文研究了一种基于CNN的近红外与可见光影像的匹配方法,精度远超传统方法,且超过最新的深度学习方法。
最近发表的论文
课题组论文“Attention boosted bilinear pooling for remote sensing image retrieval”被期刊International Journal of Remote Sensing接收。该文提出一种注意力机制增强的双线性pooling方法,用于遥感影像检索。在各个公开的large-scale开源遥感影像检索数据集中,表现均优于full connected layer, BoW等pooling或encoding方法。
最近发表的论文
课题组论文“Towards automatic building polygon delineation from aerial images using CNN and regularization”被IEEE TRGS接收。该文研究如何从遥感影像中自动提取具有人类绘制水平的规则化建筑物多边形。该文被审稿人誉为:Astonishing work, is really interesting for the opportunity to automatically detect buildings, reducing dramatically manual works and contribute to urban dynamic monitoring.
壮丽河山
课题组海南调研:沿海兴趣目标的提取和变化检测。
最近发表的论文
课题组论文“Learning discriminative spatiotemporal features for precise crop classification from multi-temporal satellite images”被期刊International Journal of Remote Sensing接收。
高引论文
课题组论文2019年5月在International Journal of Remote Sensing 正式发表的论文“A scale robust convolutional neural network for automatic building extraction from aerial and satellite imagery”被入选ESI高引论文。
祝贺课题组发表于IEEE TRGS的论文Fully Convolutional Networks for Multisource Building Extraction From an Open Aerial and Satellite Imagery Data Set 被Web of Science选为2019年ESI高引论文!(注:根据对应领域和出版年中的高引用阈值,到 三月/四月 2019 为止,本高引论文受到引用的次数已将其归入其学术领域中最优秀的 1% 之列。)
● 课题组论文:Grid based Spherical CNN for Object Detection from Panoramic Images被期刊“Sensors”6月6日接收。该文首次将球面卷积(而非传统平面卷积)应用于全景影像的目标识别。
● 课题组论文Building Instance Change Detection from Large-Scale Aerial Images using Convolutional Neural Networks and Simulated Samples被期刊“Remote sensing”6月2日接收并发表,该文利用串联的分割网络和变化检测网络实现了高精度建筑物单体(而非像素级)变化检测,性能远超同类方法。
● CNN based Dense matching for aerial remote sensing images由Photogrammetric engineering and remote sensing期刊6月份正式刊出,该文表明深度学习方法有可能击败传统的密集匹配方法、并可能进一步改变商业软件基于经典方法的现状。
课题组论文“Detecting large-scale urban land cover changes from very high resolution remote sensing images using CNN based classification”在SCI期刊ISRPS Int. J. Geo-Inf上发表。这篇论文同时也是课题组与武汉市测绘院合作项目“武汉市土地覆盖年度GIS数据库更新”的一个总结。本文提出了一种基于深度学习的方法,能够自动探测覆盖全武汉市8000平方公里的高分辨率卫星图像和航空图像上的变化区域。并将变化区域推送给作业员,极大减少作业员人工工作量;并辅助作业员发现那些人工判读容易出错或遗漏的区域。2018年武汉市土地覆盖更新项目已经圆满完成。武汉测绘院拟将继续采用我们的系统辅助武汉市2019年土地覆盖GIS图的更新。
课题组论文“遥感影像建筑物提取的卷积神经元网络与开源数据集方法”、“基于深度学习的航空遥感影像密集匹配”“CNN based Dense matching for aerial remote sensing images”分别被测绘学报和美国摄影测量学会会刊“Photogrammetric engineering and remote sensing”接受。这些研究是课题组在遥感影像建筑物提取、密集匹配与三维重建上的新进展。
● 课题组的论文“A scale robust convolutional neural network for automatic building extraction from aerial and satellite imagery”被老牌国际遥感期刊“International Journal of Remote Sensing”接收。至此我们上半年已发表5篇SCI期刊。 (September 10, 2018)
● The photo wall has been updated with new pictures captured from Prague/Dresden (July 2016), Stuttgart/Heidelberg (August 2017) and Milan/Riva (June 2018) when our group had meetings there. Please click “Members” bar. (August 10, 2018)
● 课题组编辑并开源了国际上首套含有卫星影像数据源的建筑物数据集(WHU Building Dataset)。与现有两个开源建筑物数据集(Massachusetts、Inria)相比,WHU数据集具有更大的覆盖范围(1000平方公里)、更多的标签类型(矢量、栅格)、更高的精度(IoU高15~30%)、更多的应用潜力(单体分割、变化检测)。相关成果和具体细节即将在领域top期刊IEEE Transactions on Geoscience and Remote Sensing上发表。如果说深度学习是智能时代的引擎,那么高质量的标签数据集就是智能时代的燃料。我们开源这套数据集,期望能够将建筑物提取这个历时30余年但进展缓慢的研究课题推进一步;并期待未来有更多种类的遥感开源数据集推动遥感分类、解译、时序分析的发展乃至整个遥感学科的蓬勃发展。感谢一年级硕士研究生魏世清同学,在数据集准备、论文方法和…
感谢本科生余大文同学在毕业设计的过程中主力完成横向项目《全景影像匹配与定位技术》,并合作发表SCI论文“Template Matching for Wide-Baseline Panoramic Images from a Vehicle-Borne Multi-Camera Rig”。祝他在研究生学习中更加进步!