基于Mask R-CNN的柑橘主叶脉显微图像实例分割模型.pdf

2023年月期第54卷第农业报机械学doi:10.6041/j.issn.1000-1298.2023.07.025基于Mask R-CNN的柑橘主叶脉显微图像实例分割模型翁海勇1.2李效彬1.2肖康松1.2丁若晗1.2贾良权3叶大鹏1.2（1.福建农林大学机电工程学院，福州350 0 0 2；2.福建省农业信息感知技术重点实验室，福州350 0 0 2；3.湖州师范学院信息工程学院，湖州3130 0 0）摘要：针对目前植物解剖表型的测量与分析过程自动化低，难以应对复杂解剖表型的提取和识别的问题，以柑橘主叶脉为研究对象，提出了一种基于掩膜区域卷积神经网络（Maskregionconvolutionalneuralnetwork，M a s k R-CNN）的主叶脉显微图像实例分割模型，以残差网络ResNet50和特征金字塔（Featurepyramidnetwork，FPN）为主干特征提取网络，在掩膜（Mask）分支上添加一个新的感兴趣区域对齐层（Regionof interestAlign，R o l-A l i g n），提升Mask分支的分割精度。结果表明，该网络架构能够精准地对柑橘主叶脉横切面中的髓部、木质部、韧皮部和皮层细胞进行识别分割。MaskR-CNN模型对髓部、木质部、韧皮部和皮层细胞的分割平均精确率（交并比（IoU）为0.50）分别为98.9%、8 9.8%、95.7%和97.2%，对4个组织区域的分割平均精确率均值（IoU为0.50）为95.4%。与未在Mask分支添加Rol-Align的MaskR-CNN相比，精度提升1.6 个百分点。研究结果表明，MaskR-CNN模型对柑橘主叶脉各类组织区域具有良好的识别分割效果，可为柑橘微观表型研究提供技术支持与研究基础，关键词：柑橘主叶脉；显微图像；掩膜区域卷积神经网络；实例分割；微观表型中图分类号：TP391.4文献标识码：A文章编号：10 0 0-12 98（2 0 2 3）0 7-0 2 52-0 7OSID:Instance Segmentation Model for Microscopic Image of CitrusMain Leaf Vein Based on Mask R-CNNWENG Haiyong1,2LI Xiaobin,2XIAO Kangsong1,2DING Ruohan.2JIA LiangquanYE Dapeng1,2(1.College of Mechanical and Electrical Engineering,Fujian Agriculture and Forestry University,Fuzhou 350002,China2.Fujian Key Laboratory of Agricultural Information Sensing Technology,Fuzhou 350002,China3.School of Information Engineering,Huzhou University,Huzhou 313000,China)Abstract:There is a low efficiency of automatically measuring and analyzing plant anatomic phenotypescurrently,which makes it difficult to well deal with the issue of extracting and recognizing the complexanatomical phenotypes.In order to solve this problem,a mask region convolutional neural network(MaskR-CNN)based instance segmentation model for microscopic images of the citrus main leaf veins wasproposed.In this model,the deep residual network(ResNet50)and the feature pyramid network(FPN)were used as the backbone feature extraction network.In addition,a new region of interest Align(Rol-Align)layer was added to the Mask branch to improve the segmentation accuracy.The results showedthat the network can accurately identify and segment pith,xylem,phloem and cortical cells,respectively,in the citrus main leaf veins.The average precision（l o U w a s 0.50)o f t h e mo d e l f o rsegmentation of pith,xylem,phloem and cortical cells was 98.9%,89.8%,95.7%and 97.2%,respectively,and the overall average precision(loU was 0.50)for segmentation of the four tissue regionswas 95.4%.The mean average precision of Mask R-CNN with adding Rol-Align to the Mask branchwas improved by 1.6 percentage points compared with that without.The results showed that Mask R-CNN model presented good performance of recognition and segmentation of various tissue regions of citrusmain leaf veins,which can provide technical support for citrus microscopic phenotyping.Key words:citrus main leaf vein;microscopic image;mask region convolutional neural network;instance segmentation;microscopic phenotypes收稿日期：2 0 2 3-0 3-2 0 修回日期：2 0 2 3-0 5-12基金项目：国家自然科学基金项目（6 2 0 0 50 46）作者简介：翁海勇（198 9一），男，副教授，博士，主要从事农作物光学成像与智能传感技术及装备研究，E-mail：h y w e n g f a f u.e d u.c n通信作者：叶大鹏（197 1一），男，教授，博士，主要从事智慧农业研究，E-mail：y d p f a f u.e d u.c n253翁海勇等：基于MaskR-CNN的柑橘主叶脉显微图像实例分割模型第7 期0引言目前，我国柑橘产量约占世界的33%1，研究柑橘植株对生物/非生物胁迫因子的响应能够指导柑橘种植，对我国柑橘产业的提质增效具有重要意义。在柑橘的整个生育期内,其生长发育跨越了亚细胞-细胞-器官-植株等多个尺度2 。分析不同尺度的性状特征可从不同角度解析胁迫因子对柑橘表型的影响。因此,对柑橘植株特定组织区域的精确识别与分割是其表型研究的基础。在计算机视觉、机器学习等方法支撑下，研究人员已将图像分割算法应用到植株3、花4、叶片5 和果实6 等不同尺度上的目标部位的精确分割中，为植物表型的高通量分析提供了有效的技术手段。在显微尺度下对植物特定组织或细胞的精准分析，有助于高通量地获取植物解表型信息，助力植物遗传和生理分析7 。王诗雅等8 探究了水淹胁迫对于大豆生理特性和显微结构的影响，试验结果表明随着水淹胁迫时间延长，通气组织面积逐渐增大。陈文妃等9 研究不同程度干旱胁迫对黄瓜幼苗中组织和细胞结构的影响，发现在干旱胁迫下黄瓜幼苗组织中的根皮层薄壁细胞、茎木质部导管、叶片栅栏组织等发生变形、萎缩、排列紊乱和表皮破裂等情况，且随着胁迫程度的增加，结构变化程度逐渐加剧。针对柑橘,有学者研究发现,与健康的叶片相比，感染柑橘黄龙病（CitrusHuanglongbing，H LB）叶片的主叶脉韧皮部筛管分子细胞壁周围的中间片层出现了异常肿胀且韧皮部坏死10 。FOLIMONOVA等1、黄镜浩等12 从显微尺度分析了缺硼或镁对柑橘叶片中脉维管的组织结构变化影响，结果发现，在缺镁条件下叶片中脉的木质部、髓部和韧皮部等组织区域呈现不同的结构变化，缺硼则出现主脉初生韧皮部及纤维鞘外层薄壁细胞坏死。上述结果表明，在显微尺度下能够实现胁迫对植物显微结构的影响分析。因此，自动、准确地量化植物显微结构，对于探究植物的生理功能至关重要。近年来，深度学习/机器学习结合显微成像技术在植物显微结构的目标检测和语义分割场景中表现出巨大应用前景。林少丹等13 利用显微成像技术获取感染柑橘黄龙病叶片主叶脉的显微图像，分析了主叶脉横切面中的韧皮部、木质部和髓部等区域形状结构变化情况，提出一种增强特征的无监督训练黄龙病检测算法（EnhancedHuanglongbingunsupervisedpre-trainingdetectttransformer,EHLBUP-DETR），实现了显微尺度下柑橘黄龙病的快速识别。DU等14 开发了一种基于深度学习的维管束表型分析方法，提出利用维管束数目检测精度和尺寸检测精度两个语义指标来评估和筛选适合维管束的语义分割网络，实现了茎秆表皮、周皮和维管束等结构的智能解析，为探究玉米茎秆微观结构与生理功能的关系提供有力技术支持。LI等15 开发了一款基于深度学习的自动定位植物叶片气孔并分割表皮细胞的工具（LeafNet），通过分级策略，使用深度卷积网络识别气孔，然后使用区域合并方法在掩蔽气孔的图像上分割铺面单元，在量化气孔和铺面细胞的不同表型自动化分析时体现其优异的性能。LIANG等16 基于特征金字塔（FPN）、R-CNN等深度学习模型研发了一种低成本、高通量叶片气孔表型无损检测新技术，为实现作物叶片气孔表型高通量检测和遗传机制解析提供技术支撑。QIU等17 设计了一种基于显著性的显微图像处理分析方法，引人卷积神经网络提取表型特征。与人工评估结果的相关系数可达0.8 8，实现了像素级别上白粉病侵染的高通量定量分析。张高亮等18 构建了一个基于改进MaskR-CNN网络的水稻茎秆切片显微图像分割模型，实现了水稻茎秆切片图像中大、小维管束区域的定位、检测和分割。综上所述，本文拟采用图像实例分割结合人工智能技术，建立基于数据驱动的主叶脉实例分割方法并构建深度网络模型，以实现对柑橘主叶脉横切面中的韧皮部、木质部、髓部和皮层细胞4种组织区域复杂特征的提取并实现精准识别与分割，为生物/非生物胁迫下柑橘主叶脉解剖表型组学的图像分析提供新的技术手段。1材料与方法1.1柑橘主叶脉显微图像采集方法及数据集构建本文以柑橘（脐橙）叶片主叶脉为研究对象。脐橙叶片于2 0 2 1年11月采集于福建省古田县三保村。试验前，先将叶片的主叶脉切成条状，再用冷冻恒温切片机（CM1950Leica，Le i c a M i c r o s y s t e m sInc.，W e t z l a r，德国）切成厚度为2 0 m的横向切片。从每片叶子的主叶脉中随机选取34片没有碎裂的横向切片用于显微图像采集。使用LEICA光学显微镜（LEICA-Mi8型,Leica Microsystems Inc.，Wetzlar，德国）采集切片50 倍（目镜10，物镜5）条件下叶片主叶脉的显微图像（分辨率为2560像素192 0 像素），共30 0 幅，并以TIFF文件格式存储。用Labelme19图像标注工具添加髓部（Pi t h，Pi）、木质部（Xylem，X）、韧皮部（Phloem，Ph）和皮层细胞（Corticalcell，Co）这4种掩膜标签，生成json标签文件，用于生成对应目标掩膜信息2023年农254机业报学械使用COCO2017数据集格式进行训练，因此仿照COCO数据库自建了一个柑橘主叶脉横切面各组织区域分割数据集，将原图像转换为该数据集默认的JPG格式，并生成用于分割任务的COCO格式json文件。最后，随机将生成后的数据集按比例8：1：1分为训练集、验证集和测试集2 0 。数据获取过程如图1所示。叶片样本冷冻恒温切片机X冷冻切片切片、电子显微镜盖片切片样本图像采集50倍成像数据集标注图例皮层细胞随部木质部髓部木质部韧皮部韧皮部皮层细胞图1柑橘主叶脉显微图像采集流程图Fig.1Process of microscopic images acquisitionof citrus main vein1.2柑橘主叶脉实例分割模型对柑橘主叶脉各类组织区域的定位与识别可以通过目标检测与图像分割的手段来实现。研究表明，基于实例分割的掩膜区域卷积神经网络目标检测平均精确率（Averageprecision，A P）高于目标检测模型2 1-2 。此外，目标检测是检测图像中目标的位置框并给出所对应的标签，而本研究需要识别的是4个层层包围的环形组织区域，若只有定位框则不能精确定位到某一组织区域。语义分割是像素级别的任务，具体通过识别图像中每个像素点对应的物体语义信息，可将主叶脉中待识别的感兴趣区域像素都归为同一类，但不能具体将髓部、木质部、韧皮部和皮层细胞4类组织区域分开。单独采用目标检测或语义分割都不能很好地完成柑橘主叶脉各组织区域的定位与识别。因此，本研究选取基于实例分割技术的掩膜区域卷积神经网络（Maskregionconvolutional neural network,Mask R-CNN）框架进行柑橘主叶脉实例分割研究，该框架将目标检测和语义分割结合，可对柑橘主叶脉中待测区域进行定位、分类和分割2 3-2 5。该模型由特征提取网络（Fe a t u r e e x t r a c t i o n n e t w o r k，FEN）、区域建议网络（R e g i o n a l p r o p o s a l n e t w o r k，R PN）、2 个感兴趣区域对齐层（Region of interest Align，R o l A l i g n）、全连接层（Fullyconnected layers）、卷积层（Covnlayers）、目标检测层和分割层组成。由于柑橘主叶脉的分割任务要求精度更高，所以在对齐特征图坐标时，检测和分割不共用同一个RolA l i g n，而是引出了另一个Rol-Align分支,用以获得更高的分割精度，如图2 所示，1.2.1柑橘主叶脉不同部位的特征提取模型特征提取部分主要是由不同的卷积运算组成，特征提取为后续定位、分类和分割掩膜的计算提供基础。在卷积神经网络中，增加网络的深度可以提升网络的性能，但有研究表明，如果简单地增加网络深度，会导致梯度爆炸或消失，所以网络层数增加到一定限度,模型的精度不增反降。但随着ResNet系列网络残差模块的引人，梯度消失的问题得到了有效解决，模型精度得到了提升2 6-2 1。因此，本研究为了提升特征提取网络的性能，主干网络选择具有残差结构的ResNet50，其残差模块可表示为Xi+1=F(x;,W.)+x;(1)Xi+2=Xi+1+F(xi+1,Wi+1)=X+F(x,W.)+F(xi+1,Wi+1)(2)区域建议网络特征金字塔ResNet50建议框Layer4个Layer3LayersLayer2LayerlrLayer6特征图77256输人全连接层自自分类10241024Rol-Align固定尺寸的特征图定位框1414x256Rol-Align卷积层掩膜固定尺寸的特征图图2柑橘主叶脉实例分割模型Fig.2Instance segmentation model of citrus main vein255翁海勇等：基于MaskR-CNN的柑橘主叶脉显微图像实例分割模型第7 期k-1=;+F(xj,W)(3）j=idldldxk(4)dx;dxdx,K-1dF(x,W,)+x;dldl=idx;dxkdx;二k-1F(x,W)dl(5)dxkdx;式中一第层残差模块的输人W激活函数一损失函数F(x;,W.)一残差值X+1第i层的输出（第i+1层的输人）任意第k层（ki）残差块的输人值假设输人数据xi，通过捷径链接（Shortcutconnection）进行恒等映射G,x，（G,在通常情况下为常数1，此处也设为1），映射后得到的x,进行卷积并通过激活函数W,得到残差值为F（x;，W）。由式（1)可推出式（2），通过递归，可得到任意第k层的输人，用式（3)表示，即第k层的特征为第i层和k层中间所有残差函数输出的总和加上x;。式(4)为损失函数l对于输人x,的梯度。由式（3)和式（4）可得式（5），由式（5）可知，任意深层的梯度可以传递到比其浅的任意层x，且由于有常数的存在，因此无论如何加深网络，都不会出现梯度消失现象4.2 6 模型特征提取部分结合了特征金字塔（FPN），将特征图中的深层特征和浅层特征融合，达到增强特征的效果2 9-30 。基于特征金字塔的特征提取网络是一种解决多尺度问题的网络，它采用双金字塔结构，如图3所示。左侧金字塔一般为常规的特征图卷积网络，为了提升模型特征提取性能，采用带残差层的ResNet50网络作为特征提取主干网络，Conv2_x、Co n v 3_x、Co n v 4_x、Co n v 5_x 为残差层，特征图大小随着残差层深度加深逐层缩小为上一层的1/2，深度扩大为上一层的2 倍；中间金字塔则在每层都添加了2 56 个11的卷积核用于统一特征图的深度，然后从上至下对卷积后的图像进行反向采样，通过将中间上层的特征图放大2 倍，进而与下一层左侧的特征图各像素点进行元素相加，在不增加模型参数的基础上，增强了金字塔右侧每一层输出在不同尺度下空间信息和语义信息的预测能力。由此可见,FPN网络有助于模型对各种尺度的目标进行识别，中180 x60 x256Conv2dConv2d分类1H-80 x60 x20481x,513x3.51检测框1Conv5_xUpsample,x21111Conv2dConv2d160 x120 x256分类160 x120 x10241x1,5113x3,s1检测框1Conv4_X1Upsample,x21-Conv2dConv2d320 x240 x256分类11320 x240 x5121xl,13x3,511检测框11！Conv3_x1Upsample,x21640 x480 x256Conv2dConv2d分类1xl,s13x3,$1640 x480 x256il检测框2560 x1920 x3Conv2_x111-Convl11(BN+ReLU)11280 x960 x64ResNet50特征金字塔预测图3基于特征金字塔的特征提取网络Fig.3Feature extraction network based on feature pyramid1.2.2特征图处理经过基于特征金字塔的特征提取网络之后，原始图像被转换为多尺度特征图，再由区域建议网络（R PN）对其感兴趣区域（Region of interest,Rol）进行筛选，进而对筛选后的Rol进行池化。本研究采用感兴趣区域对齐法（RolA l i g n），利用双线性插值进行采样点坐标计算。与传统的感兴趣区域池化法（RolPo o l i n g）不同的是，该方法保留采样点坐标的小数值以提高池化精度。因此，本研究在特征图处理模块中以感兴趣区域对齐法替代感兴趣区域池256农2023年机报业学械化法，以期减少特征图尺度标准化过程中的精度损失。1.2.3Mask分支优化相较于目标检测任务，分割任务要求的精度更高，所以本研究的模型在对齐特征图坐标时，检测和分割不共用同一个RolA l i g n。在RPN网络生成建议框后，将生成的建议框输入2 个不同的Rol-Align分支中，分别进行双线性插值计算。其中一个Rol-Align向检测端输出7 7 2 56 的固定尺寸的特征图，经过全连接层后得到检测框和分类信息。另一个RolA l i g n 向分割端输出14142 56 的固定尺寸特征图，经过全卷积网络（Fullconvolutionalnetwork,FCN）后预测相应的目标分割掩膜。Mask分支上的特征图尺寸是目标检测分支上特征图尺寸的2 倍，保留了更多的细节信息1.2.4损失计算经过特征图的处理及特征区域筛选后，模型预测头部分对各特征区域进行分类、检测框和掩膜的损失计算，研究表明在多个数据集的模型训练中，以分类、检测框和掩膜三者的损失之和作为模型整体的损失值，均取得很好的效果3.31。损失值L计算公式为L=Lels+Lbox+Lmask(6)式中Lls分类损失Lbox检测框回归损失Lmask分割掩膜损失1.3模型训练参数及评价本试验在Windows10系统中完成，试验框架为Pytorch,处理器为Intel（R）Co r e（T M）i 7-97 0 0 KCPU3.60GHz3.60CHz，内存为16 GB，使用NVIDIA2070super图形处理器加速运算。设置单CPU同时处理图像数为1,每幅显微图像实例分割的类别为Pi、X、Ph 和Co4类（不包含背景）,模型主要参数如表1所示。采用平均精确率（AP）评估图像分割模型的性能。AP为以准确率（Precision）为纵坐标，召回率（R e c a l l）为横坐标所绘曲线与坐标轴所围区域的面表1模型参数Tab.1Model parameter参数数值/形式主干网络ResNet50+FPNBackbone Strides4,8,16,32,64RPNAnchorScales32,64、12 8、2 56,512RPNAnchorRatios0.5、1、2BBoxSTDDEV0.1、0.1、0.2、0.2非极大值抑制阈值0.3分类分支全连接层尺寸1024梯度截断闵值5图像最大尺寸/像素1024图像最小尺寸/像素800学习动量0.9权值衰减率0.000 1掩膜池化尺寸14积。当预测目标与标定目标的交并比（Intersectionoverunion,IoU）大于所设定阈值时，判定为预测正确,反之为预测错误。AP值越高，模型性能越好。在实例分割中,对于每一种类别都有对应的AP值，对于全部目标的平均AP称为平均精确率均值(Mean average precision,mAP)。2结果与分析2.1目标检测和实例分割效果经试验证明，模型验证到第10 0 个周期后，损失趋于平稳（图4a）。因此，目标检测和实例分割的验证周期也取到第10 0 个。由图4b可以看出，模型的学习性能良好，且验证的平均精确率可以达到90%以上，且目标检测的AP大于图像分割，可知对目标的定位和分类效果优于分割。综上，模型对图像中所有种类的目标检测和实例分割可以达到较好的效果。改进的MaskR-CNN模型对柑橘主叶脉中的Pi、X、Ph 和Co的检测和分割的平均评价指标如表2 所示。由表2 可知，目标检测和实例分割的AP（I o U 为0.50）都达到9 0%以上。目标检测在loU为0.50 0.7 5、0.50 0.953个评价范围内整体的AP较实例分割更高，为97.7%、8 3.2%和7 3.4%。1.6元100801.2%/率睡研本60*目标检测二实例分割400.4201020406080100020406080100周期周期(a)(b)图4柑橘主叶脉实例分割模型验证结果Fig.4Validation results of citrus main vein instance segmentation model257第7 期翁海勇等：基于MaskR-CNN的柑橘主叶脉显微图像实例分割模型可知该模型对待检测区域的检测框定位和类别分类的精度比具体分割出特定区域的精度更高，尤其是在oU为0.7 5、0.50 0.95评价范围内，分割精度与目标检测精度相差较大。而分割端的结果是通过Mask分支得来的，因此本研究对Mask分支进行改进，在检测端保留原有的Rol-Align层。表2柑橘主叶脉中Pi、X、Ph 和Co的检测和分割mAPTab.2The mAP of detection and segmentation for allof Pi,X,Ph and Co in main vein%项目IoU为0.50IoU为0.7 5IoU为0.50 0.9 5目标检测97.783.273.4实例分割95.459.056.1对于各具体的组织区域类别，当IoU为0.50时，检测Pi、X、Ph 和Co的AP都可达到90%以上，如表3所示。其中Pi、Ph 和Co的检测AP达到100%，由此可知，该模型对这4个不同待测区域的检测框定位与分类效果良好；分割Pi、X、Ph 和Co的AP最低的也达到8 9.8%（X），其余均在90%以上，可知该模型对各组织区域具体分割任务也能取得较好的效果，表3各类别目标检测和实例分割的APTab.3AP of detection and segmentation foreachclass%项目髓部木质部韧皮部皮层细胞目标检测10090.8100100实例分割98.989.895.797.22.2模型预测效果随机选取2 幅未参与训练的图像进行预测，平均预测时间仅需0.54s。其预测效果如图5所示，其中，黄色掩膜部分为髓部预测区域，浅蓝色掩膜部分为木质部预测区域，浅绿色掩膜部分为韧皮部预测区域，白色掩膜部分为皮层细胞预测区域。图5a为图中只有待测目标，无背景干扰的柑橘主叶脉原图，图5b为其分割效果。图5c中除了待测目标外，还存在其他靠近目标且与目标类似的干扰物（同一载玻片上其他样本的部分皮层细胞Co），图5d为图5c的分割效果。对于无背景干扰的柑橘主叶脉原始图像，模型可对其中的Pi、X、Ph 和Co4种组织区域都能进行比较精准的定位和识别，类别得分都为99%，对各组织区域的分割也能取得较好的效果。对于有背景干扰的柑橘主叶脉原始图像，模型也可对其中的Pi、X、Ph 和Co4种组织区域进行精准的定位和识别，除了X的类别得分为92%外，其余都为99%，对各组织区域分割也能取得较好的效果。因此，无论有无背景干扰，预测区域均和真实部位重合度较高。200umm200um(a)无背景干扰的柑橘主叶脉原图(b)图5a实例分割效果干扰皮层细胞干扰皮层细脑200m200mCo:99%(c)有背景干扰的柑橘主叶脉原图(d)图5c实例分割效果图5模型预测效果Fig.5Model prediction performance2.3模型改进前后对比对比模型Mask分支改进前后的分割mAP,如表4所示。改进前检测和分割端共用一个RoI-Align,改进后的Mask分支利用一个不同的Rol-Align生成检测分支2 倍的特征图。可以看出，改进后的Mask分支，在IoU为0.50、0.7 5、0.50 0.953种条件下，平均分割精度均提升1 2 个百分点，分别为95.4%、59.0%、56.1%。表4Mask分支改进前后分割精度对比Tab.4Segmentation mAP before and after Maskbranchimprovement%Mask分支IoU为0.50IoU为0.7 5IoU为0.50 0.9 5改进后95.459.056.1改进前93.857.154.8改进后的模型，检测端保留原有的Rol-Align层，特征图尺寸与改进前相同，改进前后检测精度对比如表5所示。由表5可以看出，改进Mask分支前后的模型目标检测效果与改进前基本持平,在IoU为0.50、0.50 0.95情况下，改进后的模型检测mAP略微升高，IoU为0.7 5时，检测mAP略微降低，整体差别不大。由此可知，在Mask分支引出一个新的Rol-Align几乎不会影响检测端的效果。表51Mask分支改进前后检测精度对比Tab.5Detection mAP before and after Mask branchimprovement%Mask分支IoU为0.50IoU为0.7 5IoU为0.50 0.9 5改进后97.783.273.4改进前96.983.672.83结束语基于MaskR-CNN框架设计了柑橘主叶脉中下转第2 7 1页）农2023年258机业学报械的髓部、木质部、韧皮部和皮层细胞4种组织区域的实例分割方法，并对Mask分支添加独立的感兴趣区域对齐层（Rol一Align），进行对比试验。试验结果表明,改进后的Mask R-CNN对所有目标的检测mAP（I o U 为0.50）达到97.7%。其中，模型对髓部、木质部、韧皮部和皮层细胞的分割AP（I o U 为0.50）分别为98.9%、8 9.8%、95.7%和97.2%。对4个部位的mAP（I o U 为0.50）可达95.4%，与未在Mask分支添加RoI-Align的MaskR-CNN相比，准确率提升1.6 个百分点。结果表明，MaskR-CNN框架能够实现柑橘主叶脉中的髓部、木质部、韧皮部和皮层细胞4个组织区域的实例分割，研究结果可为生物/非生物胁迫下柑橘叶片解表型组学的图像分析提供新的技术手段。参考文献1PIERUSCHKA R,SCHURR U.Plant phenotyping:past,present,and futureJJ.Plant Phenomics,2019(3):1-6.2JEZ J M,TOPP C N,BUCKNER E,et al.High-throughput image segmentation and machine learning approaches in the plantsciences across multiple scalesJ.Emerging Topics in Life Sciences,2021,5(2):239-248.3邓寒冰，许童羽，周云成，等.基于深度掩码的玉米植株图像分割模型J农业工程学报，2 0 2 1，37（18）：10 912 0.DENG Hanbing,XU Tongyu,ZHOU Yuncheng,et al.Segmentation model for maize plant images based on depth maskJ.Transactions of the CSAE,2021,37(18):109-120.(in Chinese)4邓颖，吴华瑞，朱华吉基于实例分割的柑橘花朵识别及花量统计J农业工程学报，2 0 2 0，36（7）：2 0 0-2 0 7.DENG Ying,WU Huarui,ZHU Huaji.Recognition and counting of citrus flowers based on instance segmentation J.Transactions of the CSAE,2020,36(7):200-207.(in Chinese)5袁山，汤浩，郭亚.基于改进MaskR-CNN模型的植物叶片分割方法J.农业工程学报，2 0 2 2，38（1）：2 12-2 2 0.YUAN Shan,TANG Hao,CUO Ya.Segmentation method for plant leaves using an improved Mask R-CNN modelJ.Transactions of the CSAE,2022,38(1):212-220.(in Chinese)6FU L,WANG B.CUI Y,et al.Kiwifruit recognition at nighttime using artificial lighting based on machine visionJ.International Journal of Agricultural and Biological Engineering,2015,4:52-59.7STROCK C F,SCHNEIDER H M,LYNCH J P.Anatomics:phenotyping of plant anatomyJJ.Trends in Plant Science,2022,27(6):520-523.8王诗雅，郑殿峰，冯乃杰，等植物生长调节剂S_（330 7）对苗期淹水胁迫下大豆生理特性和显微结构的影响J.作物学报，2 0 2 1，47(10）：198 8-2 0 0 0.WANG Shiya,ZHENG Dianfeng,FENG Naijie,et al.Effects of uniconazole on physiological characteristics and microstructureunder waterlogging stress at seedling stage in soybeanJ.Acta Agronomica Sinica,2021,47(10):1988-2000.(in Chinese)9陈文妃，杜长霞，金佩颖，等模拟干旱胁迫对黄瓜幼苗组织结构的影响J浙江农林大学学报，2 0 17，34（6：11491154.CHEN Wenfei,DU Changxia,JIN Peiying,et al.Histological structure of cucumber seedlings with drought stress JJ.Journalof Zhejiang A&F University,2017,34(6):1149-1154.(in Chinese)10SCHNEIDER H.Anatomy of greening-diseased sweet orange shootsJ.Phytopathology,1968,58:1155-1160.11FOLIMONOVA S Y,ACHOR D S.Early events of citrus greening(Huanglongbing)disease development at the ultrastructurallevelJ.Phytopathology,2010,100(9):949-958.12黄镜浩，蔡子坚，谢钟琛，等。硼、镁缺乏诱发柑橘叶片维管组织变化差异研究J.园艺学报，2 0 12，39（10）：18 6 9-1875.HUANG Jinghao,CAI Zijian,XIE Zhongchen,et al.Differences of anatomic structure in citrus leaves caused by boron andmagnesium deficiencyJJ.Acta Horticulturae Sinica,2012,39(10):1869-1875.(in Chinese)13林少丹，李效彬，杨碧云，等适用于小样本显微图像数据集的柑橘黄龙病快速诊断模型J农业工程学报，2 0 2 2，38(12):216-223.LIN Shaodan,LI Xiaobin,YANG Biyun,et al.Detecting citrus Huanglongbing from few-shot microscopic images usin