1、第五届华美影像论坛影像组学及其在肿瘤研究与临床中的应用2024年3月1日中国科学院分子影像重点实验室田 捷IEEE,SPIE,IAMBE,AIMBE,IAPRFellowIEEE,SPIE,IAMBE,AIMBE,IAPRFellow背景癌症生存率无突破经过五十年的努力,癌症的五年生存期并没有得到明显的提高N=1,950,388.Updated May 12,2014DatafromNationalCancerInstituteofNIH(2014)%肿瘤基因组的时空异质性限制了靶向治疗的效果我们缺乏有效的手段去全面定量评估肿瘤异质性Gerlinger et al.N Engl J Med 3
2、66,883-92(2012).被引用2368次英国伦敦大学癌症研究中心CharlesSwanton,MD挑战缺乏定量评估手段肿瘤5mm才能被诊断缺乏早期诊断手段癌症的五年生存率没有实质性提高时空异质性影响治疗缺乏定量评估方法背景癌症生存率无突破原因N.Engl.J.Med.2010,363(1):4-6.医疗设备方面医疗软件方面N.Engl.J.Med.2012,366,883-92.分子影像分子影像分子影像早期诊断手段早期诊断手段早期诊断手段影像组学影像组学影像组学定量分析方法定量分析方法定量分析方法机遇影像组学肿瘤大小5mm1kg左左右肿瘤右肿瘤13年年520年细胞表达生物分子异常正正常
3、常基因基因异常异常开始开始增殖增殖前癌前癌病变病变形成形成癌灶癌灶出现出现病状病状死死亡亡转移转移传统成像技术难以实现早期微小肿瘤成像基因技术检测早期基因异常?影像组学影像组学融合基因信息和影像多模态信息,为实现精准诊断提供了新机遇基因异常新陈代谢异常器官结构异常时间影像组学(Radiomics)发展历程概念概念概念概念完善完善完善完善概念提出概念提出概念提出概念提出高 通 量 地从 M R I、PET及CT影像中提取大量高维的定量影像特征,并进行分析影像组学指高通量地提取大量描述肿瘤特性的影像特征,最初译为放射组学临床应用临床应用临床应用临床应用影像组学特征成功用于肺癌和头颈癌数据的临床预后
4、评估,得到良好效果Nat.Comm.2014,5:4006EJC2012,48:441-446MRI2012,30(9):1234.VirendraKumaretal,MagneticResonanceImaging,2012,30:1234.(被引55次)PhilippeLambin,EuropeanJournalofCancer2012;48:441-446.(被引100次)解剖结构物理组织层次代谢层次蛋白质层次转录学层次功能影像结构影像分子影像量化微环境定量异质性基因层次基因病理利用海量影像和基因病理信息全面定量肿瘤异质性癌症研究影像组学影像组学提供定量化研究手段影像组学流程特征提取预测
5、算法影像数据高维特征强度形状纹理小波其它功能影像结构影像分子影像基因病理诊疗决策肿瘤分期肿瘤分型预后分析诊疗方案合作优化提高病人生存期提高疾病早诊率减轻患者医疗负担缓解医院就诊压力推广应用影像组学利用大数据挖掘技术定量肿瘤异质性,实现精准诊疗决策,提高患者的生存期国际研究进展肺癌头颈癌预后分析(1/4)Aertsetal.NatureCommunications,2014,5:4006.影像组学通过融合影像、基因和病理信息可量化肿瘤微环境,早期定量肿瘤基因异质性基因表达影像特征病理信息数据分割特征分析预测强度形状小波纹理美国莫菲特癌症中心RobertJ.Gillies影像组学最早影像组学最早提
6、出者之一提出者之一临床问题:临床影像信息挖掘不足肿瘤异质性很难用影像定性评估收集数据:一千多个病人完整数据788个患有非小细胞肺癌病人数据231个患有头颈部鳞癌的病人数据提取特征:四百多个关键影像特征强度:最大值、标准方差、能量等形状:紧密度、最长直径、体积等纹理:和平均、最大可能、和熵等小波:边界、自由与粘贴面积比等实验结果:影像与临床显著性相关影像组学特征可用于预测肿瘤预后Aertsetal.NatureCommunications,2014,5:4006.国际研究进展肺癌头颈癌预后分析(2/4)Aertsetal.NatureCommunications,2014,5:4006.影像组学
7、特征有重要预后价值:特征各向异性越强,病人存活率越低,紧密或球形肿瘤预后更好国际研究进展肺癌头颈癌预后分析(3/4)Aertsetal.NatureCommunications,2014,5:4006.影像组学的标签与基因重要相关利用影像特征预测患者基因信息国际研究进展肺癌头颈癌预后分析(4/4)国际研究进展影像-基因回路关联分析(1/2)脑胶质瘤靶向治疗所需的基因数据难以获取,穿刺活检有创且难以得到整体信息临床问题组学方法临床数据斯坦福医院MR图像121例训练、TCGA公开数据集MR和对应的基因数据144例测试提取388个影像组学特征聚类为三类,与PARADIGM算法寻找的基因回路进行关联S
8、 Science Translational Medicinecience Translational Medicine,2015,DOI:10.1126/scitranslmed.aaa7582DOI:10.1126/scitranslmed.aaa7582 SCIIF(2015):SCIIF(2015):15.84315.843国际研究进展影像-基因回路关联分析(2/2)边缘毛刺边缘毛刺多病灶前期多病灶前期椭球形椭球形边缘规则边缘规则边缘强化边缘强化内部低信号内部低信号高高风风险险组组中中风风险险组组低低风风险险组组C-KitIL6-singalingAng/Tie2-signalingC
9、-KitFOXAPDGFRVEGFR酪氨酸激酶抑制剂:伊马替尼VEGFR抑制剂:贝伐单抗影像特征预后生存基因回路靶向治疗S Science Translational Medicinecience Translational Medicine,2015,DOI:10.1126/scitranslmed.aaa7582DOI:10.1126/scitranslmed.aaa7582 SCIIF(2015):SCIIF(2015):15.84315.843国内最新研究五月发表三篇影像组学论文结直肠癌JClinOncol非小细胞肺癌Radiology结直肠癌ClinCancerRes预 测结 直 肠
10、 癌淋巴结转移术前预 测 结 直 肠 癌辅助放化疗效果Clinical Cancer ResearchDOI:10.1158/1078-0432.CCR-15-2997浙大医学院邵逸夫医院预测非小细胞肺癌无进展生存率Radiologyaccepted,May,2016广东省人民医院中科院自动化所Journal of Clinical OncologyDOI:10.1200/JCO.2015.65.9128广东省人民医院中科院自动化所结直肠癌淋巴结转移预测(1/2)广东省人民医院与中科院自动化所合作结直肠癌淋巴结转移预测Journal of Clinical OncologyJournal of
11、 Clinical Oncology,20162016,DOI:10.1200/JCO.2015.65.9128DOI:10.1200/JCO.2015.65.9128 SCI SCI IF(2015):20.98IF(2015):20.98结直肠癌是否合并淋巴结转移很难在术前准确确定,是否转移决定患者手术过程中是否进行淋巴结清扫,显著影响临床决策临床问题组学方法临床数据病理证实是否淋巴结转移的影像病理数据广东省人民医院326训练、200测试数据利用影像组学方法提取转移高度相关24个影像组学特征和临床指标,绘制诺模图融合影像特征和临床指标的影像组学标签可对结直肠癌淋巴结转移进行个性化预测,指导
12、治疗决策预测模型诺模图结直肠癌淋巴结转移预测(2/2)Journal of Clinical OncologyJournal of Clinical Oncology,20162016,DOI:10.1200/JCO.2015.65.9128DOI:10.1200/JCO.2015.65.9128 SCI SCI IF(2015):20.98IF(2015):20.98非小细胞肺癌生存期预测(1/2)Radiology,Radiology,acceptedaccepted,May,May,20162016传统临床分期和病理对NSCLC患者无病生存期预测效果有限,需要新的预测方法临床问题组学方法
13、临床数据有完整无病生存期随访信息的282例早期(IAIIB期)NSCLC病例利用LASSOCox回归模型提取5个肺癌生存期相关的影像组学特征,构建预测模型广东省人民医院与中科院自动化所合作非小细胞肺癌生存预测对于早期非小细胞肺癌患者,影像组学特征比临床分期和临床病理有更好的生存期预示能力K-M生存曲线列线图Radiology,accepted,May,2016非小细胞肺癌生存期预测(2/2)广东省人民医院与中科院自动化所合作非小细胞肺癌生存预测结直肠癌新辅助放疗效果评价(1/2)浙大医学院邵逸夫浙大医学院邵逸夫医院进行结直肠癌新辅助放疗效果预测医院进行结直肠癌新辅助放疗效果预测结直肠癌新辅助放
14、疗效果很难在治疗前进行预测,需要更准确方法指导治疗决策临床问题组学方法临床数据48例接受新辅助放疗的结直肠癌病例,包括T1/T2/DWI/DCE等MRI扫描数据利用影像组学方法提取103个多参数影像组学特征,对于新辅助放疗效果进行预测Clin Cancer Res,2016,DOI:10.1158/1078-0432.CCR-15-2997针对结直肠癌新辅助放疗效果评估,多参数影像组学特征比常规影像分析有更准确预测性能没有没有缓解缓解结直肠癌新辅助放疗效果评价(2/2)Clin Cancer Res,2016,DOI:10.1158/1078-0432.CCR-15-2997病理病理缓解缓解没
15、有没有缓解缓解病理病理缓解缓解常规常规方法方法影像影像组学组学影像组学研究进展紧跟国际研究热点预测诊断软件开发研发一套专门读取临床影像数据并自动进行分期、生存率预测和治疗方案建议的软件系统基于临床数据的分期和预测算法研究利用工科优势,开展临床数据的分期和预测算法研究,发表高影响因子学术论文一系列一系列数据资源数据资源Radiomics资源数据库建设收集一系列格式规范、信息完整的8000例临床影像数据和基因数据,并整理成资源数据库一连串一连串关键技术关键技术一整套一整套影像软件影像软件一大批一大批合作医院合作医院30余家国内医院长期合作已经与北京、长三角、珠三角、河南等地区的30余家三甲为主的医
16、院建立长期合作关系已经超过30余家合作医院国内合作医院北上广+中西部广东省人民医院广东省人民医院广医一广医一附院附院汕大附属汕大附属肿瘤医院肿瘤医院上海肺科医院上海肺科医院上海长征医院上海长征医院哈哈医大四附院医大四附院哈哈医大二医大二附院附院西京西京医院医院华西医院华西医院301、协和医院协和医院天坛、佑天坛、佑安医院安医院中日友好医院中日友好医院医科院医科院肿瘤医院肿瘤医院北京肿瘤医院北京肿瘤医院河南省人民医院河南省人民医院郑大一附院郑大一附院贵州省贵州省人民人民医院医院珠海市人民医院珠海市人民医院影像组学数据资源建立了涵盖中国三大高发癌种的多中心、多肿瘤、多模态的数据资源平台,癌症数据近
17、万例脑脊索瘤1家合作医院200余例肺癌8家合作医院5000余例肝癌2家合作医院500余例结直肠癌2家合作医院800余例胃癌1家合作医院600余例乳腺癌1家合作医院600余例脑胶质瘤4家合作医院1100余例大量数据大量数据大数据大数据影像组学大数据是临床问题明确、格式规范、信息完整的病人数据=影像组学数据规范数据格式标准DICOM格式的CT、MR、PET等数据,支持多序列数据,同一批患者数据采集序列一致单幅图像512*512像素,数据层厚:0.625-2.5mm病理信息病理分类、TNM分期、复发转移等信息年龄、性别、是否吸烟等治疗信息药物治疗、手术治疗、放化疗、基因靶向治疗等药物用量、治疗次数、
18、靶向药物类型等预后信息2年以上病人随访,明确肿瘤进展和死亡时间基因信息致病基因突变、相关基因回路详细参考中国科学院分子影像重点实验室合作医院影像组学数据规范细则影像组学数据规范肿瘤强度肿瘤纹理临床经验小波特征低维特征视觉特征高维特征一定一定个数个数三维三维特征特征经验特征复杂特征影像组学特征提取同病异症异病同症深度学习大数据挖掘定量分析肿瘤形状将低维视觉特征、高维复杂特征和临床经验特征相结合,全面分析肿瘤异质性简单视觉二维特征放射科医生同病异症异病同症多年临床诊断经验高维复杂三维特征影像组学定量异质性提高诊疗率数据挖掘深度学习影像组学特征选择肺结节自动分割研究lLIDC公开数据集819例数据的
19、精度为81.57%.l较之于水平集方法和图割方法,精度提高14.95%(p60分预后良好,可推荐手术治疗、放化疗等60分预后较差,建议保守治疗、靶向治疗等可实现肿瘤的自动分割和592个特征的提取肿瘤分割结果软件进展肺癌预测软件研发(3/5)恶性肿瘤例子N分期良恶性生存期治疗方案软件进展肺癌预测软件研发(4/5)N分期良恶性生存期治疗方案软件进展肺癌预测软件研发(5/5)良性磨玻璃伪影(GGO)例子影像组学预测软件推广上海肺科医院 影像科 史景云主任上海长征医院 影像医学与核医学科 刘士远主任广东省人民医院 放射科 梁长虹主任广州医学院一附院 放射科 曾庆思主任河南省人民医院 史大鹏主任郑州大学
20、第一附属医院 程敬亮主任哈尔滨医科大学附属第四医院 申宝忠院长北京天坛医院 神经外科江涛、张亚卓主任项目组研发影像组学预测软件将在国内多家三甲医院进行试点,临床预测精度80%左右已经形成完整的自主知识产权体系研究基础专利软著研究基础科研奖项(第一完成单位)42国家技术发明奖二等奖(2010)国家技术发明奖二等奖(2012)国家科技进步奖二等奖(2003)国家科技进步奖二等奖(2004)在Radiomics理论方法及医学应用方面发表IEEETrans系列杂志,NatureComm,NatureProtoc,PNAS,LaserPhotonicsRev等SCI国际期刊论文70余 篇研究基础发表论文
21、方法技术系列论文方法技术系列论文方法技术系列论文方法技术系列论文生物医学应用系列论文生物医学应用系列论文生物医学应用系列论文生物医学应用系列论文临床影像顶级期刊Radiology临床肿瘤领域顶级期刊JCO影像处理顶级期刊IEEETMI研究基础代表性论文在肿瘤、放射、影像处理顶级期刊上都有文章发表田捷,博士,中国科学院自动化研究所研究员n nIEEE,SPIE,IAMBE,AIMBE,IAPRFellown n2002年度国家杰出青年科学基金获得者n n2003年度、2004年度国家科技进步二等奖(第一完成人)n n2010年度、2012年度国家技术发明二等奖(第一完成人)n n2006,201
22、2年两项973计划项目首席科学家实验室负责人徐敏高级工程师杨凤助研杨彩云助研董迪责任组长臧亚丽助研刘振宇助研李国栋博士生宛晓南博士生沈 伟博士生牟 玮博士生俞冬东博士生宋江典博士生6名老师、15名研究生(8博士、7硕士)Radiomics核心成员合作模式(1/3)源于临床高于临床回归临床肿瘤诊疗临床问题影像组学分析方法诊疗分析预测模型筛选数据选择特征特征提取模型构建临床医院自动化所共同发表国际期刊论文合作开展临床应用联合申请科研项目合作模式国家惠民工程移动医疗专项精准医疗项目等重大项目国际主流学术期刊论文如JCO、Radiology等肿瘤放化疗效果评估肿瘤诊疗方案辅助建议合作模式(2/3)合作模式(3/3)深入加强合作 共创互赢平台医院多:已经合作有三十余家三甲医院医生多:实验室人员三分之一医院医生交流多:实验室年均访问医院两百人次国家科技项目大力支持影像组学相关研究国家科技部发布了精准 医 学、数字诊疗装备干 细 胞与 转 化医 学等一系列重点研发专项国家自然科学基金委2015年10月通过了多模分子影像与肿瘤精准成像重大研究计 划希望得到各位专家的支持与指导!国家重大需求推动科学研究有必要:n n基于本团队前期成果与经验有基础:n n与国际研究暂处同一起跑线有机遇:n n利用影像组学实现精准医学有信心:结束语