一种基于点监督的显著目标检测方法_刘洋.pdf

I S S N 1 0 0 9-8 9 8 4C N 2 2-1 3 2 3/N长春工程学院学报(自然科学版)2 0 2 2年 第2 3卷 第4期J.C h a n g c h u n I n s t.T e c h.(N a t.S c i.E d i.),2 0 2 2,V o l.2 3,N o.4 2 0/2 51 0 3-1 0 8d o i:1 0.3 9 6 9/j.i s s n.1 0 0 9-8 9 8 4.2 0 2 2.0 4.0 2 0一种基于点监督的显著目标检测方法收稿日期:2 0 2 2-0 7-2 6基金项目:2 0 2 0年安徽省高等学校省级质量工程教学研究重大项目(2 0 2 0 j y x m 1 3 0 7)作者简介:刘洋(1 9 8 2-),男(汉),安徽枞阳人,讲师主要研究计算机应用技术、计算机网络安全。刘 洋(池州职业技术学院教育系,安徽 池州 2 4 7 0 0 0)摘 要:提出了一种基于点监督的弱监督显著目标检测方法,设计了一种自适应的掩膜洪水填充算法来生成伪标签,并利用了一个基于变换器的点监督显著性检测模型来生成第1轮的显著图。然而,由于标签的稀疏性,弱监督检测模型往往退化为通用的前景检测模型。为了解决这个问题,进一步提出了一种利用非显著抑制方法修正第1轮中生成的显著图,并利用它们进行第2轮微调。实验结果表明,在E C S S D和P A S C A L-S数据集上分别取得了0.0 3 5 8和0.0 6 4 7的MA E,验证了该方法的有效性。关键词:自适应洪水填充;点监督;显著目标检测中图分类号:T P 3 9 1.4 1文献标志码:A 文章编号:1 0 0 9-8 9 8 4(2 0 2 2)0 4-0 1 0 3-0 60 引言显著目标检测旨在检测图像或视频中最吸引人的区域,以模仿人类视觉的注意力机制1。全监督显著目标检测模型依靠有效设计的模块取得了良好的检测性能2-3。然而,这些方法严重依赖于精确的像素级别标注数据集,需要耗费大量的人力才能获取。因此,稀疏标记方法4-7在近年来吸引了越来越多的关注,其目的是在时间开销和模型性能之间取得平衡。一些方法8-9尝试使用图像级标签来检测显著物体。一些方法使用噪声标签训练网络,这些噪声标签通常由其他的显著目标检测方法生成1 0。涂鸦标注1 1是基于降低标记时间成本而提出的,与之前的方法相比,它可以提供局部的真值标签,且作者称他们可以在12 s内完成对图像的标注,但对于未经训练的标注人员来说很难做到这一点。该方法尝试提出一种基于点监督的显著性检测方法,与涂鸦标注相比,该方法能使用更少的标注时间来实现可接受的性能。如图1所示,该方法是第一个尝试使用点监督来完成显著目标检测的方法。该方法提出了一种基于点监督的显著性检测方法,使用了与涂鸦标注相比耗时更少的标注方法,但取得了相似的性能表现,如图1所示。点监督与无监督和图像级别的监督相比,可以直接提供相对准确的位置信息。其次,与其他手工标注方法相比,点监督是最省时的标注方法。此外,当前的弱监督显著性检测模型往往只关注在相应场景中必须关注的目标,而忽略了应该忽略的目标。原因是由于弱监督标签的稀疏性,使得监督信号只能覆盖图像的一小部分,只允许模型了解哪些目标必须高亮显示,但缺乏信息来指导模型应该忽略哪些目标。基于这一观察,本文提出了非显著性抑制方法来明确过滤掉非显著但被检测到的目标。(a)原始图像 (b)涂鸦标注(c)全监督标注 (d)点标注图1 不同标注类型示意图1 方法1.1 自适应洪水填充根据弱监督密集预测任务的常规做法,首先需要制作伪标签,然后使用它们来训练网络。由于稀疏标签仅覆盖目标区域的一小部分,这限制了模型接收目标结构的能力,F e n g,e t a l1 2人利用边缘检测器生成边缘以监督训练过程,不同的是,该方法将边缘直接应用于自适应洪水填充算法。洪水填充算法从一个起始节点开始搜索其邻域(4或8),并提取与其相连的附近节点,直到封闭区域中的所有节点都已处理完毕。它是从一个区域中提取几个连接点,或将它们与其他相邻区域区分开来。然而,由于边缘检测器生成的边缘通常是不连续和模糊的(如图2的顶部所示),将其直接应用于洪水填充算法可能会导致整个图像都被填充。因此,该方法设计了一个自适应掩膜来缓解这个问题,即一个半径随图像大小而变化的圆。具体而言,半径r定义为r(I)=m i nhl,wl(),(1)式中:I是输入图像;r(I)是对应于输入图像I的掩膜半径;hl和wl分别表示输入图像的长度和宽度;是超参数。图像I的标注真值可以表示为S=Sb,Sif|i=1,N,(2)式中Sb和Sif指背景像素和第i个标注的显著目标物体。将这些圆的掩膜集合表示为Mr(l)S。与之前的显著目标检测方法5一样,该方法也使用边缘检测器6来检测图像的边缘:e=E(I),(3)式中:E()表示边缘检测器;I表示输入图像;e表示检测到的边缘。使用e和Mr(l)S的并集:e Mr(l)S,将图像I划分为多个连通区域。然后使用洪水填充算法生成图像I的伪标签(如图2底部所示):g=F(S,E(I)Mr(l)S,(4)式中:g表示获得的伪标签;F(u,v)表示洪水填充算法,其中u和v表示算法的输入参数;S表示图像I的标注真值。图2 提出方法的框架示意图1.2 基于变换器的点监督显著目标检测方法稀疏标记下的显著目标检测任务的难点在于该模型只能获得局部的标注真值,缺乏全局信息的指导。该方法认为通过标注位置和未标注位置之间的相似性可以建立标注位置和未标注位置之间的联系,以获得未标注区域的显著性值,可以在一定程度上缓解这一问题。考虑到视觉变换器(V i T)建模相似性的特性,该方法利用h y p e r-V i T(即“R e s N e t-5 0+V i T-B a s e”)作为主干来提取特征并计算自身的相似性。具体地说,对于大小为3HW的输入图像,C NN嵌入部分生成CH/1 6W/1 6的特征图。R e s N e t-5 0的多阶段特征表示为R=Ri|i=1,2,3,4,5。然后是变换编码器以CH/1 6W/1 6的位置嵌入总和以及展开的特征作为输入。经过1 2层的自注意力层后,变换编码器输出了CH/1 6W/1 6的特征。边缘保持解码器由两部分组成:显著性解码器和一个近似边缘检测器,如图2所示。显著性解码器由4个级联的卷积层组成,其中每一层都由批量归一化(BN)层、R e L U激活层和上采样层组成,上采样层将变换编码器的特征作为输入。该方法将每层显著性解码器的相应特征表示为D=Di|i=1,2,3,4。对于后一部分,由于弱标注本身缺乏结构和细节信息,利用一个边缘解码器作为近似的边缘检测器,通过使用真实边缘检测器生成的边缘结果来约束输出结构。近似边缘检测器的输出可以表示为fe=(c a t(R3,D2),其中表示单个33卷积层,后面是B N和R e L U层。通过在fe之后添加一个33的卷积层,可以获得边缘图e,然后由真实边缘检测器生成的边缘图对其进行约束。1.3 非显著目标抑制可以观察到,由于弱监督图像的稀疏性,监督信号只能覆盖图像的一小部分,这导致模型只学习高亮显示的目标物体,而忽略当前场景中哪些目标不应被高亮显示。为了抑制不显著的目标物体,本文提出了一种简单而有效的方法,即利用监督信号提供的位置线索,填充生成的高亮物体来达到抑制不显著物体的目的。所获得的显著目标区域(如图3(b)所示)可通过式(5)的方式获得:Pf=F(S-Sb,P1 s t),(5)式中:F表示洪水填充算法,表示洪水填充;S-Sb=Sif|i=1,N代表减法;P1 s t代表第一轮训练后生成的显著图,并通过密集C R F进行修正。由于在第一轮训练期间仅为显著目标提供了内部的局部标签,这可能会导致模型无法准确区分边缘,因此在Pf上使用了尺寸为1 0的扩展操作(即使用膨胀/空洞卷积)。扩展区域被指定为非特定区401长春工程学院学报(自然科学版)2 0 2 2,2 3(4)域(如图3(b)中的黑色区域所示),而保留区域被指定为背景区域(如图3(b)中的绿色区域所示),表示为P2 n d,它被用作第二轮训练的伪标签。图3(c)为原始图像中伪标签的对应位置。如图4所示,由于标签的稀疏性,模型倾向于检测不显著的目标。图4(a)表示在点监督下第一轮训练后得到的伪标签,图4(b)则表示对图4(a)生成的伪标签进行非极大值抑制后的伪标签结果。事实上,该模型退化为一个检测前景目标的模型。通过重复使用监督点的位置信息,可以利用非显著抑制方法来成功抑制掉大多数不显著的目标。(a)(b)(c)图3 经过非显著抑制后的伪标签示意图图4 非显著抑制的效果示意图1.4 损失函数在该网络中,采用了二分类交叉熵损失、部分交叉熵损失和门控C R F损失。对于保留边缘的解码器流,使用二分类的交叉熵损失来约束e,即:Lb c e=(r,c)yl o g(e)+(1-y)l o g(1-e),(6)式中:y表示标注真值;e表示预测的边缘图;r和c分别表示行和列坐标。对于显著性解码流,采用了部分交叉熵损失和门控C R F损失。部分二元交叉熵损失用于关注的确定区域,而忽略不确定区域:Lp b c e=-jJgil o g(sj)+(1-gj)l o g(1-sj),(7)式中:J代表标记区域;g代表标注真值;s代表预测的显著性图。为了获得更好的目标结构和边缘信息,在损失函数中使用了门控C R F:Lg c r f=ijKid(i,f)f(i,j),(8)式中Ki表示像素i周围kk的覆盖区域。d(i,j)定义为d(i,j)=|si-sj|,(9)式中si和sj是位置i和j处的显著值。f(i,j)表示高斯核带宽滤波器:f(i,j)=1We x p(P T(i)-P T(j)22P T-I(i)-I(j)22l),(1 0)式中:1W是归一化的权重;I()和P T()是像素的R G B值和位置;P T和l是控制高斯核尺度的超参数,根据经验值分别设置为0.8和1.2。因此,总损失函数可以定义为Lf i n a l=1Lb c e+2Lp b c e+3Lg c r f,(1 1)式中1,2,3是权重。在实验中,根据经验值都设置为1。2 实验2.1 点监督数据集为了尽可能减少标记时间消耗,同时提供显著目标的位置信息,通过重新标记DUT S1 3数据集(一个广泛使用的显著性检测数据集,包含1 0 5 5 3个训练图像)来构建一个点监督数据集。对于每幅图像,从4个标注人员的结果中随机选择一个,以减少个人偏见。在图1中,展示了一个点标注的示例,并将其与其他标注方法进行了比较。对于每个显著的目标,只随机选择一个像素位置进行了标记(为了清晰,放大了标记位置的大小)。由于标注方法很简单,即使是初学者也可以在平均2 s的时间内标注一幅图像。2.2 实验细节该模型在P y T o r c h工具箱上实现,使用标注的点监督数据集进行训练。在4个T I T AN X P G P U上进行 模 型 的 训 练。对 于 变 换 器 部 分,使 用 了“R e s N e t 5 0+V i T”作为骨干,并且没有进行任何调整。通过使用提供的预训练权重来初始化嵌入层和变压器编码器层,且V i T是在I m a g e N e t 2 1 K上预先501 刘洋:一种基于点监督的显著目标检测方法训练的。对 于 变 换 器 部 分,最 大 学 习 率 设 置 为0.0 0 0 2 5,对于其他部分,学习率设置为0.0 0 2 5。采用随机梯度下降法(S G D)训练网络,并将参数动量设置为0.9,权重衰减设置为51 0-4使用。使用水平翻转和随机裁剪作为数据扩充的方式,批量大小设置为2 8,第1次训练过程需要2 0个迭代周期。式(1)中的超参数设置为5,第2轮训练使用了相同的参数。在测试过程中,将每个图像的大小重新调整为3 5 23 5 2,然后将其输入到网络中,以预测显著性图。2.3 与其他方法的比较首先将该方法与其他最先进的模型进行了比较,见表1和图5。最佳结果以粗体显示。表1显示,该方法在很大程度上优于现有的弱监督方法。其中,Fm a x平均下降2.6 8%,Sm平均下降2.7 5%,m F平均下降0.9 4%,MA E平均下降0.6 2%。此外,该方法达到了与最新模型G a t e N e t相当的性能,甚至在多个数据集上优于全监督的方法。如图5所示,该方法在两个公开数据集上的精度召回结果优于其他方法。如图6所示,与其他弱监督或无监督方法相比,该方法获得了更准确和完整的显著图,甚至超过了部分全监督方法的预测结果。第1、5和6行分别展示了该模型捕捉整体显著目标的能力,对于具有极其复杂纹理的目标(第5行)也可以通过该方法进行精确地分割。此外,基于提出的非显著抑制方法,可以精确地提取显著的目标并抑制不显著的目标(如第24行所示)。最后一行显示了该模型提取细节的能力。如图5所示,该方法在两个公开数据集上的精度召回结果优于其他方法。如图6所示,与其他弱监督或无监督方法相比,该方法获得了更准确和完整的显著图,甚至超过了部分全监督方法的预测结果。第1、5和6行分别展示了该模型捕捉整体显著目标的能力,对于具有极其复杂纹理的目标(第5行)也可以通过该方法进行精确地分割。此外,基于提出的非显著抑制方法,可以精确地提取显著的目标并抑制不显著的目标(如第24行所示)。最后一行显示了该模型提取细节的能力。表1 与其他方法在E C S S D和P A S C A L-S数据集上的定性比较评测指标数据集E C S S DFm a xmFSmMA EP A S C A L-SFm a xmFSmMA ES B F1 40.8 5 2 30.8 2 2 00.8 3 2 30.0 8 8 00.7 5 9 30.7 3 1 00.7 5 7 90.1 3 0 9MWS1 50.8 7 7 70.8 0 6 00.8 2 7 50.0 9 6 40.7 8 4 00.7 1 4 90.7 6 7 50.1 3 3 0MF N e t1 60.8 7 9 60.8 6 0 30.8 3 4 50.0 8 4 30.8 0 4 60.7 8 6 70.7 6 4 80.1 1 8 9WS S A1 10.8 8 8 00.8 8 0 10.8 6 5 50.0 5 9 00.8 0 8 80.7 9 5 20.7 9 7 40.0 9 2 4该方法0.9 3 5 90.9 2 5 30.9 1 3 50.0 3 5 80.8 6 6 30.8 4 9 50.8 5 2 90.0 6 4 7 (a)不同方法在E C S S D数据上的精度召回对比(b)不同方法在P A S C A L-S数据集上的精度召回曲线对比图5 在两个数据集上的精度召回曲线对比图2.4 消融实验首先,为了验证边缘保留解码器的有效性,使用第1轮的结果来评估方法的性能,因为如果第1轮产生不好的结果,将直接影响第2轮的结果。见表2,评估了边缘保持解码器的影响。由边缘检测器产生的边缘监督信息被移除。此时,边缘保持解码器只能聚合浅层的特征,不能显示检测边缘特征,导致整体性能下降。601长春工程学院学报(自然科学版)2 0 2 2,2 3(4)图6 与其他方法的定性比较 其次是验证非显著性目标抑制的有效性。由于非显著抑制仅在第2轮训练中使用,在此根据第1轮产生的结果进行消融实验(即表2中的第1行)。表3为消融实验的结果。第1行代表直接使用第1轮生成的伪标签,而不进行C R F处理;第2行代表使用由密集C R F修正的伪标签;第3行代表该方法。实验结果表明,第2行比第1行效果好,说明用C R F优化第1轮的伪标签可以让第2轮训练更好,而使用了非显著抑制后,可以取得更好的效果。最后是超参的影响。见表4,测试了不同值对第1轮训练的影响。实验结果表明,太小的会导致产生伪标签监督信息过少,值过大会导致伪标签包含错误的区域。这两种情况都会影响模型的性能,选取一个合适的才能保证模型效果稳定。表2 边缘保留解码在P A S C A L-S数据集上的有效性验证评测指标数据集P A S C A L-SFm a xmFSmMA Ew0.8 6 3 60.8 4 0 70.8 4 9 80.0 6 7 1w/o0.8 6 2 90.8 3 1 40.8 4 5 40.0 7 0 3表3 非显著抑制在E C S S D数据集上的消融实验评测指标数据集E C S S DFm a xmFSmMA E+e d g e0.9 3 4 20.9 1 5 50.9 1 3 40.0 4 0 7+e d g e+C R F0.9 3 5 00.9 2 3 80.9 1 3 10.0 3 8 5+e d g e+C R F+N S S0.9 3 5 90.9 2 5 30.9 1 3 50.0 3 8 2表4 参数的影响评测指标数据集E C S S DFm a xmFSmMA E=30.9 2 9 90.9 0 4 50.9 0 8 50.0 4 1 5=40.9 3 0 40.9 0 5 10.9 0 8 80.0 4 1 5=50.9 3 2 60.9 1 7 20.9 0 9 50.0 3 8 4=60.9 2 9 30.9 0 3 70.9 0 7 90.0 4 2 13 结语本文方法提出了一个基于点监督的显著目标检测框架。针对伪标签生成和显著性检测等问题,设计了自适应洪水填充算法和基于变换器的点监督检测模型。为了解决现有的弱监督显著目标检测模型的退化问题,该方法提出了非显著目标抑制技术来显示过滤掉非显著但误检测到的目标物体。实验结果表明,该方法具有更强的监督能力,而且取得了优于其他弱监督显著目标检测的精度。参考文献1 张学思,张婷,刘兆英,等.基于轻量型卷积神经网络的海面红外显著性目标检测方法J.山东大学学报(工学版),2 0 2 2,5 2(2):4 1-4 9.2 后云龙,朱磊,陈琴,等.基于高斯差分特征网络的显著目标检测J.计算机应用,2 0 2 1,4 1(3):7 0 6-7 1 3.3 C A R I ON N,MA S S A F,S YNNA E V E G,e t a l.E n d-t o-e n d o b j e c t d e t e c t i o n w i t h t r a n s f o r m e r sC/E u r o p e a n C o n f e r e n c e o n C o m p u t e r V i s i o n.C h a m:S p r i n g e r,2 0 2 0:2 1 3-2 2 9.4 C H E N S,T A N X,W A N G B,e t a l.R e v e r s e a t t e n t i o n f o r s a-701 刘洋:一种基于点监督的显著目标检测方法l i e n t o b j e c t d e t e c t i o nC/P r o c e e d i n g s o f t h e E u r o p e a n c o n-f e r e n c e o n c o m p u t e r v i s i o n(E C C V).B e r l i n:S p r i n g e r 2 0 1 8:2 3 4-2 5 0.5 D E N G Z,HU X,Z HU L,e t a l.R 3 n e t:r e c u r r e n t r e s i d u a l r e f i n e m e n t n e t w o r k f o r s a l i e n c y d e t e c t i o nC/P r o c e e d-i n g s o f t h e 2 7 t h I n t e r n a t i o n a l J o i n t C o n f e r e n c e o n A r t i f i-c i a l I n t e l l i g e n c e.M e n l o P a r k,C A,U S A:AAA I P r e s s,2 0 1 8:6 8 4-6 9 0.6 D O S OV I T S K I Y A,B E Y E R L,K o l e s n i k o v A,e t a l.A n i m a g e i s w o r t h 1 6 x 1 6 w o r d s:t r a n s f o r m e r s f o r i m a g e r e c-o g n i t i o n a t s c a l eJ.a r X i v p r e p r i n t a r X i v,2 0 1 0,1 1 9 2 9:1-2 2.7 F AN D P,CHE NG M M,L i u Y,e t a l.S t r u c t u r e-m e a s-u r e:a n e w w a y t o e v a l u a t e f o r e g r o u n d m a p sC/P r o-c e e d i n g s o f t h e I E E E i n t e r n a t i o n a l c o n f e r e n c e o n c o m-p u t e r v i s i o n.N e wY o r k:I E E E,2 0 1 7:4 5 4 8-4 5 5 7.8 L i G,X i e Y,L i n L.W e a k l y s u p e r v i s e d s a l i e n t o b j e c t d e-t e c t i o n u s i n g i m a g e l a b e l sC/P r o c e e d i n g s o f t h e AAA I C o n f e r e n c e o n A r t i f i c i a l I n t e l l i g e n c e.P a l o A l t o,C a l i f o r n i a U S A:AAA I P r e s s,2 0 1 8,3 2(1):3 5 0 2-3 5 0 9.9 W a n g L,L u H,W a n g Y,e t a l.L e a r n i n g t o d e t e c t s a l i e n t o b j e c t s w i t h i m a g e-l e v e l s u p e r v i s i o nC/P r o c e e d i n g s o f t h e I E E E C o n f e r e n c e o n C o m p u t e r v i s i o n a n d P a t t e r n R e c o g n i t i o n.N e wY o r k:I E E E,2 0 1 7:1 3 6-1 4 5.1 0 L i u Y,W a n g P,C a o Y,e t a l.W e a k l y-s u p e r v i s e d s a l i e n t o b-j e c t d e t e c t i o n w i t h s a l i e n c y b o u n d i n g b o x e sJ.I E E E T r a n s a c t i o n s o n I m a g e P r o c e s s i n g,2 0 2 1,3 0:4 4 2 3-4 4 3 5.1 1 Z h a n g J,Y u X,L i A,e t a l.W e a k l y-s u p e r v i s e d s a l i e n t o b j e c t d e t e c t i o n v i a s c r i b b l e a n n o t a t i o n sC/P r o c e e d i n g s o f t h e I E E E/C V F C o n f e r e n c e o n C o m p u t e r V i s i o n a n d P a t t e r n R e c o g n i t i o n.N e w Y o r K:I E E E,2 0 2 0:1 2 5 4 6-1 2 5 5 5.1 2 F E NG M,L U H,D I NG E.A t t e n t i v e f e e d b a c k n e t w o r k f o r b o u n d a r y-a w a r e s a l i e n t o b j e c t d e t e c t i o nC/P r o-c e e d i n g s o f t h e I E E E/C V F C o n f e r e n c e o n C o m p u t e r v i-s i o n a n d P a t t e r n R e c o g n i t i o n.N e w Y o r k:I E E E,2 0 1 9:1 6 2 3-1 6 3 2.1 3 F L O R E S C F,GON Z A L E Z-G A R C I A A,VAN D E WE I J E R J,e t a l.S a l i e n c y f o r f i n e-g r a i n e d o b j e c t r e c o g-n i t i o n i n d o m a i n s w i t h s c a r c e t r a i n i n g d a t aJ.P a t t e r n R e c o g n i t i o n,2 0 1 9,9 4:6 2-7 3.1 4 Z h a n g D,H a n J,Z h a n g Y.S u p e r v i s i o n b y f u s i o n:t o-w a r d s u n s u p e r v i s e d l e a r n i n g o f d e e p s a l i e n t o b j e c t d e-t e c t o rC/P r o c e e d i n g s o f t h e I E E E i n t e r n a t i o n a l C o n-f e r e n c e o n C o m p u t e r V i s i o n.N e w Y o r k:I E E E,2 0 1 7:4 0 4 8-4 0 5 6.1 5 Z e n g Y,Z h u g e Y,L u H,e t a l.M u l t i-s o u r c e w e a k s u p e r-v i s i o n f o r s a l i e n c y d e t e c t i o nC/P r o c e e d i n g s o f t h e I E E E/C V F C o n f e r e n c e o n C o m p u t e r V i s i o n a n d P a t-t e r n r e c o g n i t i o n.N e wY o r k:I E E E,2 0 1 9:6 0 7 4-6 0 8 3.1 6 P i a o Y,W a n g J,Z h a n g M,e t a l.M f n e t:M u l t i-f i l t e r d i r e c t i v e n e t w o r k f o r w e a k l y s u p e r v i s e d s a l i e n t o b j e c t d e t e c t i o nC/P r o c e e d i n g s o f t h e I E E E/C V F I n t e r n a t i o n a l C o n f e r e n c e o n C o m p u t e r V i s i o n.N e w Y o r k:I E E E,2 0 2 1:4 1 3 6-4 1 4 5.S a l i e n t T a r g e t D e t e c t i o n M e t h o d B a s e d o n P o i n t S u p e r v i s i o nL I U Y a n g(E d u c a t i o n D e p a r t m e n,C h i z h o u V o c a t i o n a l a n d T e c h n i c a l C o l l e g e,C h i z h o u A n h u i 2 4 7 0 0 0,C h i n a)A b s t r a c t:T h i s m e t h o d p r o p o s e s a w e a k l y s u p e r v i s e d s a l i e n t o b j e c t d e t e c t i o n m e t h o d b a s e d o n p o i n t s u p e r v i-s i o n,a n d a n a d a p t i v e m a s k f l o o d f i l l i n g a l g o r i t h m i s d e s i g n e d t o g e n e r a t e p s e u d o l a b e l s.T h e n,a p o i n t s u-p e r v i s e d s a l i e n c y d e t e c t i o n m o d e l b a s e d o n t r a n s f o r m e r i s u s e d t o g e n e r a t e t h e s a l i e n c y m a p o f t h e f i r s t r o u n d.H o w e v e r,d u e t o t h e s p a r s i t y o f l a b e l s,t h e w e a k l y s u p e r v i s e d d e t e c t i o n m o d e l o f t e n d e g e n e r a t e s i n t o a g e n e r a l f o r e g r o u n d d e t e c t i o n m o d e l.I n o r d e r t o s o l v e t h i s p r o b l e m,t h i s m e t h o d p r o p o s e s a n o n-s a l i e n c y s u p p r e s s i o n m e t h o d t o c o r r e c t t h e s a l i e n c y m a p g e n e r a t e d i n t h e f i r s t r o u n d,a n d u s e s t h e m f o r t h e s e c o n d r o u n d o f f i n e-t u n i n g.E x p e r i m e n t a l r e s u l t s s h o w t h a t MA E o f 0.0 3 5 8 a n d 0.0 6 4 7 a r e o b t a i n e d o n E C S S D a n d P A S C A L-S d a t a s e t s r e s p e c t i v e l y,w h i c h v e r i f i e s t h e e f f e c t i v e n e s s o f t h i s m e t h o d.K e y w o r d s:a d a p t i v e f l o o d f i l l i n g;p o i n t s u p e r v i s i o n;s a l i e n t o b j e c t d e t e c t i o n801长春工程学院学报(自然科学版)2 0 2 2,2 3(4)