基于间接—即时注意力优化模块的密集人群计数算法.pdf

第3 6卷 第2期2023年05月 青 岛 大 学 学 报(自 然 科 学 版)J O U R N A LO FQ I N G D A OU N I V E R S I T Y(N a t u r a l S c i e n c eE d i t i o n)V o l.3 6N o.2M a y2023 文章编号:1 0 0 6 1 0 3 7(2 0 2 3)0 2 0 0 5 0 0 8d o i:1 0.3 9 6 9/j.i s s n.1 0 0 6 1 0 3 7.2 0 2 3.0 2.0 9基于间接即时注意力优化模块的密集人群计数算法韩素玉1,王国栋1,王 永2,刘 瑞2(1.青岛大学计算机科学技术学院,青岛2 6 6 0 7 1;2.松立控股集团股份有限公司,青岛2 6 6 0 7 3)摘要:针对网络中注意力通常处于多通道状态,更新却依赖单通道标签导致优化困难的问题,提出了一种间接即时注意力优化(I I AO)模块。基于S o f t M a x-A t t e n t i o n策略,将多通道注意力在数学意义上转化为单通道密度图,同时自动为特征金字塔模组提供自适应多尺度融合服务。考虑到转化方式的特殊性,设计了区域相关性损失函数(R C L o s s)来检索连续易错区域,平滑空间信息。实验结果表明,所提算法有效且性能更加稳定。关键词:人群计数;注意力优化;密度图;s o f t m a x算法;特征金字塔中图分类号:T P 3 9 1 文献标志码:A收稿日期:2 0 2 2-1 0-2 0基金项目:山东省自然科学基金(批准号:Z R 2 0 1 9MF 0 5 0)资助;山东省高等学校优秀青年创新团队支持计划(批准号:2 0 2 0 K J N 0 1 1)资助。通信作者:王国栋,男,博士,副教授,主要研究方向为变分图像科学、人脸识别、三维重建和医学图像处理和分析等。E-m a i l:d o c t o r w g dg m a i l.c o m 密集人群计数定义为检索图片或者视频片段中人的数量,一般使用人头作为计数单位,广泛应用在视频监控、车流控制、细胞计数、病虫害预防等重要领域。随着卷积神经网络的发展,人群计数方法已经从检测1与回归2过渡到密度估计3-6,即每个像素点表示此位置为人头中心的概率,以此将计数任务简化为概率的叠加。但在真实的密集场景中,一个鲁棒的人群计数模型需要对嘈杂背景、尺度多变、相互遮挡、透视畸变等诸多问题具备强大的泛化能力。注意力机制强调将计算重心偏向信号响应强烈的区域,而非无差别地处理整幅图像,被广泛应用在密集人群计数任务中。A S N e t7算法考虑到图像不同区域的计数性能异化,提出密度注意力网络,为卷积提取单元提供多尺度的注意力掩膜。R AN e t8算法使用两个模块分别处理全局与局部注意力,根据特征间的依赖关系进行融合。由于直接生成精确的注意力图比较困难,C F AN e t9通过人群区域识别器(C R R)和密度水平估计器(D L E)实现由粗到细的渐进注意机制。现有文献大多致力于对注意力运用方式的创新,而注意力损失校验时,存在两处不足:生成注意力标签需要人工阈值参与,鲁棒性较差;目前只能制作单通道标签,而网络中等待计算损失的注意力图通常是多通道的。若采取卷积降维,损失的来源就会变成注意力图本身以及降维引入的卷积参数两部分,网络无法针对性收敛;如果基于通道平均化,高响应与低响应特征将会被中和。基于以上分析,本文提出一种间接即时注意力优化(I I AO)模块,将损失计算的对象由多通道注意力图转化为单通道密度图,以此规避注意力优化难题;由于转化得到的特征数据可能较为粗糙,设计了区域相关性损失(R C L o s s)惩罚不规则的连续易错区域。1 密集人群计数算法本文建立一个适用于密集场景的人群计数模型,包括一个取自VG G-1 6模型的特征提取器作为骨干,一层卷积用于通道调整,两个堆叠的I I AO模块,以及另一个卷积层用于最终的预测图回归,如图1所示。1.1 基础特征提取单元将VG G-1 6的前1 3个卷积层与4个池化层放置在编码器部分,用于提取不同层次的边缘及纹理等低层次特征。然后使用双线性插值对其输出特征图进行2倍的空间上采样,上采样图与第三次卷积得到的特征 第2期 韩素玉等:基于间接即时注意力优化模块的密集人群计数算法图通过通道连接的方式合并,得到的特征图经过11卷积滤波器得到Fi n。图1 网络整体框架1.2 间接即时注意力优化算法如图2所示,I I AO模块包括两个主要部分:A S P子模块和S MA子模块。Fi nRCHW是I I AO模块的输入,其中C表示通道数,H、W分别表示的高和宽均是原图像的0.1 2 5倍,R为实数集。Fi n每次经过I I AO模块都产生两种不同类型的特征图:Fo u t继续向后传递,而Fw e i将融合注意力直接与密度图标签进行损失计算。图2 I I A O模块内部结构 1)自适应尺度金字塔(A S P)子模块。A S P子模块使用多列架构获取多尺度特征,伴随着Fw e i的生成自动完成通道级别的多尺度特征融合任务(细节见S MA子模块),缓解了每个分支的感受野固定在一定范围内的局限性。为减少参数开销,在A S P模块开始处设置一个11卷积把Fi n的通道数压缩到0.2 5C,然后扩展为4个分支,每个分支均包含11,33,55等3种尺寸的卷积滤波器其中的两个。每个分支中,第一个滤波器再将通道数缩小4倍,重整信息后第二个滤波器将之复原,此时每个分支中Fi n的尺寸都为0.2 5C,H,W。最终,A S P得到的Fm u l将与Fi n原尺寸完全一致。2)S o f t M a x-A t t e n t i o n(S MA)子模块。S MA子模块接收残差连接而来的Fi n,过渡性注意力单元(T AU)为其提供上下文注意力,得到Fa t t。具体地,为了便于运算和提取不同层次的特征信息,T AU首先使用11卷积与R e L U激活函数来降低Fi n的通道数,得到Fi nRCrHW,其中r是超参数,指定缩减率。然后使用另一个11卷积核恢复通道数,同时使用s i g m o i d函数调制以获取全局上下文注意力,用Fa t tRCHW表示。在此节点上,Fa t t分为两路,第一通路复刻传统注意力机制,让Fa t t与Fm u l对位相乘,发挥其监督作用,增强Fm u l中关键信息表达并抑制背景噪声。二者乘积用Fo u t表示,传递到后续网络Fo u t=Fa t tFm u l(1)在最后一个I I AO模块后,使用11滤波器回归Fo u t,得到最终预测图Fp r e。如果追求及时可靠的注意力,理应在Fa t t下一步内核参数发生变化前立即对其进行梯度更新,然而此时的Fa t t处于多通道状态,而相应标签只能是单通道的,因此需要降低维度。平均化意味着所有特征层赋予等同的权重,无差别对待关键信息与环境噪声;如果采用卷积降维,则会引入额外可学习参数,模糊了模型效果的参数来源。基于此,在第二通路提出S MA策略优化注意力的损失更新流程,无需伪标签,同时没有引入额外可学15青 岛 大 学 学 报(自 然 科 学 版)第3 6卷习参数,可以在起到监督作用后即时修正注意力内核参数。具体地,每次Fa t t经T AU生成后,都由s o f t m a x函数在通道方向将其归一化为0,1 之间的概率分布,目的是学习Fm u l中每个像素点所表达的特征信息在此位置所有通道层的动态权重。然后将Fa t t与Fm u l相乘,注意,此时的结果不同于Fo u t。将所有通道累加,得到融合注意力于特征信息的权重密度图,用Fw e iR1HW表示,其中i 1,H,j 1,WFw e ii,j=Ck=1S o f t M a xFa t t()Fm u l()k,i,j(2)至此,注意力损失计算的对象就在数学意义上由多通道注意力图Fa t t转化为单通道密度图Fw e i,而密度图标签容易制得且相对可靠。Fm u l学习了多分支中每个通道的权重,而不同分支对不同尺度的特征具备不同的感知能力,因此得到Fw e i的同时,也完成了A S P模块的特征融合任务。1.3 损失函数大多数研究选择均方误差损失函数来校验最终预测图与标签之间的像素级误差值,用Lp r e表示Lp r e=1NNi=1P Xi;()-GG Ti22(3)其中,N代表单训练批次中图片的数量,指代网络中一系列可学习参数,Xi意为当前参与训练的图片,P(Xi;)表示其相应的预测结果图,GG Ti是对应的标签。1.3.1 区域相关性损失函数 现实场景中不同密集程度的人群分布不均,均方误差假设像素之间隔离且独立,无法保证空间相关性。本文提出了区域相关性损失函数(R C L o s s),搭配I I AO模块可更高效的实现注意力优化,运行流程见图3。图3 R C L o s s算法流程(a)E r r o rm a p;(b)重叠子窗口;(c)异常点增量性惩罚 R C L o s s将Fw e i与标签图做差并求绝对值,得到E r r o rm a p。设置滑动窗口遍历E r r o rm a p,在得到的每个子窗口中寻找预测误差较大的像素点,以其位置本身的误差值为基准施加增量性惩罚,惩罚力度与错误程度呈非线性正相关。为了确保子窗口之间信息的连续性,采用交错窗口,产生的重叠区域将被重复分析,但只有极其易错的位置会被重复惩罚,直接忽略低敏感区域。首先计算E r r o rm a p,用E R1 WH表示E=Fw e i-GG T(4)假设滑窗的尺寸与步长分别为k、s,计算窗口在水平与垂直两个方向所能滑动的最大次数Rm a x与Dm a xRm a x=W-ks+1(5)Dm a x=H-ks+1(6)在每个子窗口内都有预测误差值最大的像素点,称为H a r d点,误差值为MA Xr,dr1,Rm a x,d1,Dm a x 。依次分析每个子窗口,惩罚误差值逼近MA Xr,d值的像素点,惩罚的数量由常量t h r e s h o l d确定,惩罚的力度与自身预测的偏离程度相关。对于误差在容忍区间内的像素点,使用M S E L o s s作为其损失;否则基于R C L o s s,算法为25 第2期 韩素玉等:基于间接即时注意力优化模块的密集人群计数算法E P:Ei,j MA Xr,dt h r e s h o l dE T:Ei,j MA Xr,dt h r e s h o l dL o s sr,d=rs+ki=rs+1 ds+kj=ds+1Ei,j1+e-Ei,j+Ei,j2i f E Prs+ki=rs+1 ds+kj=ds+1 E2i,ji f E T(7)其中,L o s sr,d表示每个子窗口的损失值总和,i和j分别是其宽和高的迭代变量,E P和E T分别表示易错点和可容忍点。在每个子窗口内首先确定H a r d点并计算MA Xr,d值,然后搜寻误差值大于t h r e s h o l d与MA Xr,d乘积值的易错点,最后与其余可容忍点一起按式(7)计算。累加一个训练批次中所有可达的子窗口损失值,得到最终的R C L o s s损失值Lw e i=1NNi=1Rm a xr=1Dm a xd=1L o s sr,d(8)1.3.2 统一目标损失函数 网络生成3个相同尺寸的密度图,包括2个I I AO模块输出的Fw e i和1个最终的预测图Fp r e。通过对不同任务的加权,训练所需的统一目标函数表述为L=Lw e i1+Lw e i2+Lp r e(9)其中,和是两个损失函数的权重项。在所有数据集的实验中,二者都可以设置为固定值。2 实验设置2.1 数据集与标签S h a n g h a i T e c h1 0数据集分为两部分:P a r t_A包含4 8 2张图片,训练集3 0 0张,测试集1 8 2张;P a r t_B包含7 1 6张图片,图片大小固定为10 2 47 6 8,训练集4 0 0张,测试集3 1 6张。U C F_C C_5 02数据集样本数量有限,因此使用五折交叉验证作为统一的检验方式,每张图片标注的目标数量从9 4到45 4 3不等,平均为12 8 0。U C F-QN R F1 1数据集包含12 5 16 4 2个标注点的15 3 5张高清图片,训练集和测试集分别有12 0 1、3 3 4张图片,目标的密度范围为4 9,1 28 6 5。采用高斯函数模糊每个头部注释来生成密度标签,对于人群稀疏的数据集,如S h a n g h a i T e c hP a r t_B1 0,采用固定尺寸的高斯核;对于场景较密集的其他数据集,则基于最近邻算法的几何自适应核。2.2 实验参数除基础特征提取单元之外,后续层的参数由高斯分布随机初始化,均值为0,标准差为0.0 1。过渡性注意力单元(T AU)中的缩减率r=1 6。对于模型训练细节,选择A d a m优化器,初始学习率为0.0 0 0 1,每1 0 0轮减半一次。权重项和分别设置为1.5和0.5。t h r e s h o l d在不同数据集中取值略有差异,将在消融实验中讨论。2.3 评估指标在人群计数任务中,有两种主要的网络性能评估指标:平均绝对均方误差(MA E)和均方根误差(M S E),MA E=1NNi=1Pi-Gi,M S E=1NNi=1Pi-Gi2,其中,N表示测试集中图片的数量,Pi和Gi分别代表第i张图片的预测数量和真实数量。3 分析与讨论3.1 对比实验为验证I I A O算法的有效性,对比试验在4个官方数据集上进行,结果见表1(最佳表现用粗体表示,次之用下划线表示)。在S h a n g h a i T e c hP a r t_A数据集中,MA E指标领先诸多算法,比第二名D K P N e t1 2结果低2.2 1%;对于U C F_C C_5 02数据集,I I A O在MA E指标上领先第二名A S N e t71 3.1 8%,M S E领先1 3.4 1%。35青 岛 大 学 学 报(自 然 科 学 版)第3 6卷表1 不同方法在多个数据集上的效果比较M e t h o dV e n u eP a r t_AMA EM S EP a r t_BMA EM S EU C F_C C_5 0MA EM S EU C F-QN R FMA EM S EB L1 3I C C V1 96 2.81 0 1.87.71 2.72 2 9.33 0 8.28 8.71 5 4.8R AN e t8I C C V1 95 9.41 0 2.07.91 2.92 3 9.83 1 9.41 1 1.01 9 0.0A S N e t7C V P R2 05 7.7 89 0.1 3-1 7 4.8 42 5 1.6 39 1.5 91 5 9.7 1L i b r a N e t1 4E C C V2 05 5.99 7.17.31 1.31 8 1.22 6 2.28 8.11 4 3.7AM S N e t1 5E C C V2 05 6.79 3.46.71 0.22 0 8.42 9 7.31 0 1.81 6 3.2T o p o C o u n t1 6AAA I2 16 1.21 0 4.67.81 3.71 8 4.12 5 8.38 9.01 5 9.0UO T1 7AAA I2 15 8.19 5.96.51 0.2-8 3.31 4 2.3UR C1 8I C C V2 16 8.21 1 5.01 0.61 6.02 9 3.9 94 4 3.0 91 2 8.1 32 1 8.0 5D K P N e t1 2I C C V2 15 5.69 1.06.61 0.9-8 1.41 4 7.2D 2 C1 9T I P2 15 9.61 0 0.76.71 0.72 2 1.53 0 0.78 4.81 4 5.6S GAN e t2 0T I T S2 25 7.61 0 1.16.61 0.22 2 1.92 8 9.88 7.61 5 2.5MAN2 1C V P R2 25 6.89 0.3-7 7.31 3 1.5O u r s-5 4.3 79 2.7 67.5 21 2.4 11 5 1.8 02 1 7.8 98 7.3 21 5 0.4 13.2 消融实验3.2.1 注意力不同降维方式对结果的影响 在对照试验中,B a s e l i n e没有对Fa t t计算损失,任其在梯度反传时自学习。然后依据对Fa t t降维方法的不同设置三组实验,依次为按通道方向将Fa t t平均化,利用11卷积将Fa t t通道数降至1,使用S o f t M a x-A t t e n t i o n策略。实验基于J HU-C R OWD+2 2数据集的v a l部分,为保证无关条件统一,所有实验组均只采用均方误差损失。由表2可知,三组对照试验的所有指标均呈现下降趋势。但是组1的效果不及B a s h l i n e,因其背离了注意力机制的思想。组2和组3都领先B a s e l i n e,后者更低的计数误差验证了本文假设,即传统注意力机制的损失计算流程确实存在可优化空间,而本文基于S o f t M a x-A t t e n t i o n策略的I I AO模块发挥了关键作用,同时针对Fw e i使用R C L o s s进行优化的新增实验组l取得了更好的效果。表2 Fa t t降维方式的不同对网络性能的影响G r o u pM e t h o dL o s sF u n c t i o nM S E L o s sR C L o s sMA EM S E-B a s e l i n e7 9.6 22 6 6.5 01D i m e n s i o n a l a v e r a g i n g1 0 9.1 43 2 0.5 42D i m e n s i o n a l c o n v o l u t i o n6 5.3 92 4 1.6 03S o f t M a x-A t t e n t i o n5 7.8 52 1 9.6 2lS o f t M a x-A t t e n t i o n5 4.0 82 1 2.7 3 为了直观展示S o f t M a x-A t t e n t i o n的效果,从每个数据集中选取了代表性样本做计数测试,如图4所示。其中每一横排代表一种数据集,第一列是输入原图,最后一列是其对应的标准标签数据,中间两列表示B a s e l i n e和S o f t M a x-A t t e n t i o n两个实验组的实验,可以看出后者的效果更逼近于标签,性能更好。同时为了观察细节差异,使用红框标注出了图片中的微小目标,放大可进行更好的对比。3.2.2 分析R C L o s s以及t h r e s h o l d波动对结果的影响 本节实验同样基于J HU-C R OWD+2 2数据集,先将R C L o s s更换为M S E L o s s视为参照基准,然后还原为R C L o s s并多次调节t h r e s h o l d值作为对比,结果如图5所示,其中灰色虚线代表参照基准,等同于t h r e s h o l d=1的特殊情况。详细来看,如果t h r e s h o l d过小,惩罚区域会变多,相邻区域甚至联结,高频易错点难以突出;相反地,如果过大,惩罚条件会变严格,导致R C L o s s无限退化为M S E l o s s。45 第2期 韩素玉等:基于间接即时注意力优化模块的密集人群计数算法图4 多数据集中S o f t M a x-A t t e n t i o n效果的可视化对比图图5 R C L o s s及其t h r e s h o l d对网络预测的影响(a)T h r e s h o l d-MA E;(b)T h r e s h o l d-M S E 由中间的两个细节放大图可以看出,在使用R C L o s s同时将t h r e s h o l d设置为0.9 5时计数表现最优。需要注意的是,不同数据集的密度水平存在差异,因此增加了在不同数据集下t h r e s h o l d各自最优取值的实验,结果见表3。55青 岛 大 学 学 报(自 然 科 学 版)第3 6卷3.2.3 R C L o s s中滑动窗口的设置对结果的影响 本文使用滑动窗口将E r r o rm a p(5 05 0)分块处理,为网络提供更多的连续性候选区域,设定滑动窗口尺寸和步长时,要求滑窗可以遍历到图中所有位置,同时保证p a d d i n g=0。从满足条件的可行方案中选出3组代表性的组合,增设不使用滑动窗口策略的全窗口计算模式作为对照组,实验结果如图6所示。表3 不同数据集中t h r e s h o l d的最优取值D a t a s e tt h r e s h o l dS h a n g h a i T e c hP a r t_A0.9 5S h a n g h a i T e c hP a r t_B0.9 0U C F_C C_5 00.9 7U C F-QN R F0.9 5J HU-C R OWD+(v a l)0.9 5图6 滑动步长和窗口大小对网络预测的影响 可知,尺寸=2 7,步长=2 3 是最优组合,能够生成重叠长度为8的窗口,已知网络感受野同样为8,因此映射回原图像中是6 46 4大小的区域,与较大人头的尺寸接近,而大人头出现在分割线上的可能性更大,此时重叠区域就能对分割线上的特征进行跨窗口分析,从而使可能存在的正样本不被分割线所破坏。3.2.4 I I AO模块堆叠数量对模型的影响 I I AO模块可以优化注意力,但堆叠的数量未必越多越好。为此,实验验证时除了必要的MA E与M S E预测图质量指标外,增加了对G F L O P s、P a r a ms i z e以及I n f e r e n c et i m e变量的监督,因其对模型的训练难度和实用性有很大参考价值,结果见表4(测试图片统一为4 0 04 0 0大小)。可知,I I AO模块数量为2时模型已经趋于收敛,过多的模块堆叠将导致特征的过度平滑,导致训练拟合;冗余的参数也会给计算机内存带来巨大压力,缺乏实用性。因此,本文确定两个I I AO模块叠加的方案,在此设置下,对于5 7 67 2 0大小的图片,推理时间为1 0 0m s。表4 堆叠不同I I A O模块数量对模型的影响M e t h o dG F L O P s P a r a ms i z e/MBI n f e r e n c e t i m e/m s MA E/M S EI I AO-16 1.4 61 9.6 87.6 0 25 8.4 6/2 2 4.6 0I I AO-27 2.5 32 4.1 09.1 7 75 4.0 8/2 1 2.7 3I I AO-38 3.6 02 8.5 31 1.4 7 65 4.5 2/2 1 1.4 3I I AO-49 4.6 73 2.9 61 3.0 9 35 4.8 7/2 1 2.6 14 结论本文提出的注意力优化策略,采用基于S o f t M a x-A t t e n t i o n的I I AO模块,将多通道注意力图在数学意义上转化为单通道密度图,使网络不再依赖于人工注意力标签。并提出了关注连续易错区域的R C L o s s辅助I I AO发掘高潜区域,从而加速模型收敛,提高推理精度。在多个官方数据集的实验和对比证明本文提出的算法有效且性能更加稳定。下一步研究将聚焦在真实场景中的人群定位,提高算法的实用性。参考文献1TO P KAYAIS,E R D O GAN H,P O R I K L IF.C o u n t i n gp e o p l eb yc l u s t e r i n gp e r s o nd e t e c t o ro u t p u t sC/1 1 t hI E E EI n t e r n a t i o n a lC o n-f e r e n c eo nA d v a n c e dV i d e oa n dS i g n a lB a s e dS u r v e i l l a n c e(AV S S).S e o u l,2 0 1 4:3 1 3-3 1 8.2I D R E E SH,S A L E EM I I,S E I B E R TC,e ta l.M u l t i-s o u r c em u l t i-s c a l ec o u n t i n g i ne x t r e m e l yd e n s ec r o w d i m a g e sC/2 6 t hI E E EC o n-f e r e n c eo nC o m p u t e rV i s i o na n dP a t t e r nR e c o g n i t i o n(C V P R).P o r t l a n d,2 0 1 3:2 5 4 7-2 5 5 4.3 刘东华,魏宾,王国栋.基于多尺度特征融合与注意力机制的人群计数算法J.青岛大学学报(自然科学版),2 0 2 2,3 5(1):4 0-4 7.4 陈磊,王国栋.用于人群密度估计的多级融合卷积神经网络J.青岛大学学报(自然科学版),2 0 2 0,3 3(4):3 1-3 6.5 杨旭,黄进,秦泽宇,等.基于多尺度特征融合的人群计数算法J.计算机系统应用,2 0 2 2,3 1(1):2 2 6-2 3 5.6 万洪林,王晓敏,彭振伟,等.基于新型多尺度注意力机制的密集人群计数算法J.电子与信息学报,2 0 2 2,4 4(3):1 1 2 9-1 1 3 6.65 第2期 韩素玉等:基于间接即时注意力优化模块的密集人群计数算法7J I AN GXH,Z HAN GL,XU ML,e t a l.A t t e n t i o ns c a l i n g f o r c r o w dc o u n t i n gC/3 3 t h I E E EC o n f e r e n c eo nC o m p u t e rV i s i o na n dP a t-t e r nR e c o g n i t i o n(C V P R).E l e c t rN e t w o r k,2 0 2 0:4 7 0 6-4 7 1 5.8Z HAN GAR,S HE NJY,X I AOZH,e t a l.R e l a t i o n a l a t t e n t i o nn e t w o r kf o r c r o w dc o u n t i n gC/1 7 t hI E E E/C V FI n t e r n a t i o n a lC o n-f e r e n c eo nC o m p u t e rV i s i o n(I C C V).S e o u l,2 0 1 9:6 7 8 8-6 7 9 7.9R ON GLZ,L ICP.C o a r s e-a n d f i n e-g r a i n e da t t e n t i o nn e t w o r kw i t hb a c k g r o u n d-a w a r e l o s s f o r c r o w dd e n s i t ym a pe s t i m a t i o nC/I E E EW i n t e rC o n f e r e n c eo nA p p l i c a t i o n so fC o m p u t e rV i s i o nW o r k s h o p s(WA C VW).E l e c t rN e t w o r k,2 0 2 1:3 6 7 5-3 6 8 4.1 0Z HAN GYY,Z HOUDS,C HE NSQ,e ta l.S i n g l e-i m a g ec r o w dc o u n t i n gv i am u l t i-c o l u m nc o n v o l u t i o n a ln e u r a ln e t w o r kC/2 9 t hI E E EC o n f e r e n c eo nC o m p u t e rV i s i o na n dP a t t e r nR e c o g n i t i o n(C V P R).L a sV e g a s,2 0 1 6:5 8 9-5 9 7.1 1I D R E E SH,TAY YA BM,A THR E YK,e ta l.C o m p o s i t i o nl o s s f o rc o u n t i n g,d e n s i t ym a pe s t i m a t i o na n dl o c a l i z a t i o ni nd e n s ec r o w d sC/E u r o p e a nC o n f e r e n c eo nC o m p u t e rV i s i o n(E C C V).M u n i c h,2 0 1 8:5 3 2-5 4 6.1 2C HE NBH,YANZY,L IK,e ta l.V a r i a t i o n a la t t e n t i o n:p r o p a g a t i n gd o m a i n-s p e c i f i ck n o w l e d g ef o rm u l t i-d o m a i nl e a r n i n gi nc r o w dc o u n t i n gC/1 8 t hI E E E/C V FI n t e r n a t i o n a lC o n f e r e n c eo nC o m p u t e rV i s i o n(I C C V).E l e c t rN e t w o r k,2 0 2 1:1 6 0 6 5-1 6 0 7 5.1 3MAZH,WE IX,HON GXP,e t a l.B a y e s i a n l o s s f o r c r o w d c o u n t e s t i m a t i o nw i t hp o i n t s u p e r v i s i o nC/1 7 t h I E E E/C V FI n t e r n a t i o n a lC o n f e r e n c eo nC o m p u t e rV i s i o n(I C C V).S e o u l,2 0 1 9:6 1 4 2-6 1 5 1.1 4L I UL,L U H,Z OU H W,e t a l.W e i g h i n gc o u n t s:S e q u e n t i a l c r o w dc o u n t i n gb yr e i n f o r c e m e n t l e a r n i n gC/E u r o p e a nC o n f e r e n c eo nC o m p u t e rV i s i o n(E C C V).G l a s g o w,2 0 2 0:1 6 4-1 8 1.1 5HUYT,J I AN GXL,L I UXH,e ta l.N a s-c o u n t:C o u n t i n g-b y-d e n s i t yw i t hn e u r a l a r c h i t e c t u r es e a r c hC/E u r o p e a nC o n f e r e n c eo nC o m p u t e rV i s i o n(E C C V).G l a s g o w,2 0 2 0:7 4 7-7 6 6.1 6A B OU S AMR AS,HOA IM,S AMA R A SD,e t a l.L o c a l i z a t i o ni nt h ec r o w dw i t ht o p o l o g i c a l c o n s t r a i n t sC/A s s o c i a t i o nf o r t h eA d-v a n c e m e n to fA r t i f i c i a l I n t e l l i g e n c e(AAA I).E l e c t rN e t w o r k,2 0 2 1,3 5(2):8 7 2-8 8 1.1 7MAZH,WE IX,HON GXP,e t a l.L e a r n i n g t o c o u n t v i au n b a l a n c e do p t i m a l t r a n s p o r tC/A s s o c i a t i o n f o r t h eA d v a n c e m e n t o fA r t i f i-c i a l I n t e l l i g e n c e(AAA I).E l e c t rN e t w o r k,2 0 2 1,3 5(3):2 3 1 9-2 3 2 7.1 8XUYY,Z HON GZM,L I ANDZ,e t a l.C r o w dc o u n t i n gw i t hp a r t i a l a n n o t a t i o n s i na n i m a g eC/1 8 t hI E E E/C V FI n t e r n a t i o n a lC o n-f e r e n c eo nC o m p u t e rV i s i o n(I C C V).E l e c t rN e t w o r k,2 0 2 1:1 5 5 7 0-1 5 5 7 9.1 9CHE N GJ,X I ON GHP,C AOZG,e t a l.D e c o u p l e d t w o-s t a g e c r o w dc o u n t i n ga n db e y o n dJ.I E E ET r a n s a c t i o n so n I m a g eP r o c e s s i n g,2 0 2 1,3 0:2 8 6 2-2 8 7 5.2 0WANGQ,B R E C KONTP.C r o w dc o u n t i n gv i as e g m e n t a t i o ng u i d e da t t e n t i o nn e t w o r k sa n dc u r r i c u l u ml o s sJ.I E E ET r a n s a c t i o n so nI n t e l l i g e n tT r a n s p o r t a t i o nS y s t e m s,2 0 2 2,2 3(9):1 5 2 3 3-1 5 2 4 3.2 1L I N H,MAZH,J IRR,e t a l.B o o s t i n gc r o w dc o u n t i n gv i am u l t i f a c e t e da t t e n t i o nC/3 5 t h I E E EC o n f e r e n c eo nC o m p u t e rV i s i o na n dP a t t e r nR e c o