论文部分内容阅读
舰船识别广泛应用于水上交通安全监管、海洋渔业管理以及军事侦察等方面,是天基遥感应用的研究热点之一。舰船识别的数据源主要包括合成孔径雷达(SAR)图像、可见光图像和红外图像等。传统应用中可见光图像一般作为SAR图像的重要补充。而随着遥感器技术的发展,天基可见光图像空间分辨率逐步提高,提供了越来越丰富的细节信息,使得识别舰船目标类型或其具体型级逐步具备了可行性,将为决策者提供更加精确、直观的识别信息。因此基于可见光图像的舰船精细识别工作越来越重要。 现有研究工作主要面对舰船检测任务,极少有工作进行舰船类型精细识别。此外,检测任务中海况较好的海面舰船检测效果较好,但复杂背景下尤其是近岸舰船检测则面临性能瓶颈。已有研究工作的问题在于:基于手工设计的多步骤检测方法,可以从部分复杂背景中抽取出舰船,但非常不鲁棒;基于学习的通用方法,难以应对舰船目标的条状、旋转、聚集的特殊性。因此,在舰船识别领域,迫切需要提出新的研究路线和方法。本文分析了国内外可见光舰船识别相关文献,总结已有研究工作的不足后,提出并建立了第一个(据我们调研所知)标准公开遥感可见光舰船数据集,定义了舰船型号识别任务、提出新的评价标准和基准方法,以两种不同的评价方式对比分析识别结果,并推荐以“旋转矩形框”的方式定位和评价舰船识别任务。此后以此为主题,本文提出了高召回率的基于舰船旋转矩形框空间的舰船预检方法,还设计了基于旋转区域的卷积神经网络以用于舰船分类识别,从而证明了以旋转矩形框为基础的工作路线的潜力以及可行性和有效性。主要研究内容包括: 1、为了促进舰船识别相关研究,本文提出并建立一个标准的可见光遥感图像舰船目标公开数据集(HRSC2016),提出舰船型号识别任务以及定义新的评价标准和基准方法。数据主要来源于具有重要实验参照价值的谷歌地球(可公开访问)的图像数据。数据集不仅包含矩形框标注方式,还包括能更精准定位舰船目标的旋转矩形框方式,并为每个样本提供三层标签:船、种类、型号。数据集还为有“V”形船头的船标注船头位置信息,为测试集的每一张图像提供分割掩膜。此外,数据集提供用于舰船的标注工具和一些辅助实验工具。本文在数据集上分析了一些经典方法。为了定量评估海陆分离任务,提出了新的评价准则:分割拟合度(SF)。本文还为数据集设计了新的用于舰船识别的基准方法,并采用基于矩形框和旋转矩形框两种方式对比评价分析舰船识别结果。 2、针对复杂背景下舰船难以提取的问题,本文分析舰船自身特点,设计了一个可快速生成高召回率的一定数量的舰船候选区域的方法。该方法构造了一个近似闭合特性的舰船旋转矩形框空间,利用两级级联的线性模型对空间内的潜在候选区域快速打分,之后利用一个二值线性规划模型选出较小数量的高可能性候选区域。此外,针对潜在的在轨处理应用,还设计了一个性能相近的快速版本。实验证明该方法在为每张图像生成5000个候选框时,取得了97.6%的检测率,超过同类对比方法10个百分点。 3、针对舰船识别的多层分类问题,本文设计了一个基于旋转区域的卷积神经网络(RR-CNN),可用于旋转目标识别,尤其是舰船识别任务。RR-CNN有三个重要特征,即:旋转感兴趣区域池化层、稳定的旋转矩形框回归模型和基于多任务的非极大值抑制。RR-CNN具有可精确提取旋转区域特征的优势,同时兼具区域共享卷积计算的特性,因此可实现快速计算、精确定位以及更精准分类。此外,RR-CNN的重要组件还可以与经典框架Faster RCNN,SSD等相结合,将来进一步实现端到端的训练等特性。实验表明在HRSC2016三层舰船识别任务上,我们设计的用于舰船识别的RR-CNN模型与经典的Fast R-CNN相比可提高+18.5到+20.0个mAP百分点,与数据集基准方法相比可提高+4.8到+6.1个mAP百分点,其中在L1级舰船检测任务上取得了75.7%的平均精度值。