大数据技术在油气勘探的应用方案.ppt

单击此处编辑母版标题样式,大家好,*,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,Inspur group,大数据技术在油气勘探的应用方案,大家好,大家好,国际数据公司（,IDC,）的研究结果表明，整个人类文明所获得的全部数据中，有,90%,是过去两年内产生的。而到了,2020,年，全世界所产生的数据规模将达到今天的,44,倍,石油行业销售,ERP,系统管理,8600,万吨,/,年的成品油销售业务，年处理,3450,万张单据，勘探与生产方面有,24,万口油气水井,;,炼油与化工方面有,1119,套炼化装置,业内人士指出，“石油工业是信息工业”，很少有其他工业领域像石油工业这样更依赖于数据,社会趋势,行业趋势,大数据时代,大家好,数据量大：以地震波反射方式来收集海量数据为例，每次采集的二维数据可达,12TB,，三维数据可高达几百,TB,甚至,PB,级，四维数据将更加庞大,石油物理勘探的地震波法所得到的数据量非常庞大,是现今三大大型计算领域之一,计算量大：以叠前时间偏移为例，一个地震道的输出需要至少,1000,万道甚至更多（偏移孔径决定）的输入道，每一个点要做两次均方根运算以及两次加法运算，振幅补偿两次乘法运算。以,1,毫秒采样，,6,秒数据为例，实现一道偏移需要,1000000 x60002(,平方,+,加法,+,乘法,),次数学运算，计算量和需要处理的数据量都极其巨大！,油气勘探大数据,大家好,解决性能主要途径,并行计算,传统计算模式,关注问题,发展趋势,?,大数据技术,大家好,油气勘探分布并行计算解决方案,大家好,油气勘探分布并行计算网络拓扑结构,NameNode,DataNode,MasterNode,RegionNode,大家好,并行分布技术架构优势,高性能：自动实现大规模数据分布并行计算，高效实现大规模数据读取,高可扩：在可用的计算机集簇间分配数据完成计算任务，这些集簇可以方便地扩展到数以千计的节点中,高效性：能够在节点之间动态地移动数据，以保证各个节点的动态平衡，处理速度非常快,高容错性：自动保存数据的多份副本，并且能够自动将失败的任务重新分配,经济性：,系统软件开源，应用软件开发简化。,通过,X86,系列组成的集群系统，和小型机相比成本优势明显,大家好,基于大数据一体机的油气勘探技术架构示意,大家好,大数据一体机物理示意,可根据负载需求扩展节点，理论上数据节点数量可扩至,4000,个，存储容量可相应增长，至少满足,PB,级大数据分布存储,在,Hadoop,技术框架的基础上提供并行处理及,IO,优化,可实现户外计算应用,单节点可支持配置：,8,路,CPU,128G,内存，,32TB,硬盘,浪潮大数据应用,-,卡口与智能交通,监控卡口1,监控卡口2,监控卡口3,监控卡口4,1亿/天车行轨迹,2300万车辆信息,9000千万人口,3000万驾驶员,卡口信息：,牌号：鲁,F123,*,车型：解放,j6p,颜色：蓝色,位置：济南经十山大路口,方向：自西向东,时间：,2013.2.5 8:45:30,全省17地市交通卡口每天采集行车记录数将近,1,亿,条,云计算数据中心,根据牌号比对车辆行驶信息查找嫌疑车辆,监控卡口.,大数据的分析计算,车牌号,车型,颜色,距离,.,卡口信息,卡口信息,卡口信息,卡口信息,卡口信息,数据调取,数据调取,计算,结果,大家好,浪潮大数据应用,-,推荐服务,大家好,浪潮大数据应用,-,淘宝天猫双,11,数据分析,税务云平台，,350.4,亿元,天猫商城,241.9,亿元,淘宝集市,108.5,亿元,阿里,官方公布,，淘宝和天猫,销售额,350.19,亿,2013,年全国双十一数据,C2C,模式暂不收税，税务云平台仅采集天猫商城交易明细数据。,电商大数据采集云平台双十一运行情况,大家好,浪潮大数据应用,-,电商平台税务局端数据比对,纳税人,税号,纳税人名称,网店不含税,销售额（元）,申报额,（元）,差异率,330,26458,杭州向上电子商务有限公司,239,257,654,108,374,100%,330,61404,杭州手拉手电子商务有限公司,91,847,718,0,100%,330,90156,杭州共海服饰有限公司,5,372,567,9,089,100%,330,87203,杭州秋果服饰有限公司,5,251,854,690,100%,330,45893,杭州简正电子商务有限公司,4,467,420,58,252,99%,330,41333,杭州兰帕达体育用品有限公司,4,418,967,111,474,97%,330,4745X,杭州维欧艾服饰有限公司,23,915,545,7,251,256,70%,330,52053,杭州老板电器股份有限公司,13,433,295,231,833,016,-1626%,2013,年,10,月份杭州市,B2C,网店（天猫）销售和申报数据比对,：,大家好,大家好,谢谢大家,!,结束,大家好,