基于开源软件平台的网格GIS原型系统PPT.ppt

单击此处编辑母版标题样式,*,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,基于开源软件平台的网格,GIS,原型系统,陈斌,北京大学遥感与地理信息系统研究所,2008.12.18,1,目录,网格,GIS,概念,网格,GIS,的体系结构,网格,GIS,的关键技术,第一阶段原型系统简介,2,网格,GIS,概念,网格计算的重要特征,资源服务化：实现异构平台的互操作；,资源的发现与调用：实现位置透明的分布式计算；,空间信息集成应用发展的需要,广域的地域级应用,行业级应用,空间信息规模化社会服务的需要,关键系统的防灾与安全需要,3,网格,GIS,的目标,实现空间数据资源的共享,实现空间计算资源的共享,实现基于全局虚拟视图的空间信息处理,实现空间信息系统计算工作的负载平衡,实现系统容错,实现面向问题的用户使用方式,4,863,：网格,GIS,软件及其重大应用,针对我国地理空间信息共享服务和国家级行业应用等重大需求，结合国内外网格计算技术的前沿研究成果：,研究网格环境下异构,GIS,软件互操作技术和空间信息网格计算技术；,开发高性能、高可用性的网格,GIS,应用服务软件和集成应用系统，形成新一代网格,GIS,软件平台，实现网格环境下异构,GIS,互操作和在线共享服务；,并在地质调查行业国家级空间信息网格计算、黑龙江省地理信息公共服务平台、苏州市数字城市工程等典型行业与区域开展示范应用显著提高我国地理信息共享服务能力和,GIS,软件的技术水平与国际竞争力。,5,网格,GIS,总体技术体系,6,网格,GIS,体系结构与协议规范研究,网格,GIS,的基本组成与功能，描述网格,GIS,各个组成部分的关系以及它们集成的方式或方法,能够将分布在各地的信息中心的空间信息资源以及地理信息服务进行汇集、共享和快速协同处理的框架。,7,网格,GIS,的软件支撑平台技术,根据空间信息协同处理中数据组织、资源分布和计算分布的特点,结合现有空间信息系统软件平台的处理结构，以及现有网格计算环境的结构和运行特征,研究实现空间信息协同网格计算支撑平台技术以及对应用系统构建的基本支持机制。,8,用户查询流程概貌,网格,门户,网格,门户,网格,节点,网格,节点,网格,节点,网格,节点,GSQL/API,结果,GSQL/API,结果,GSQL/API,结果,GSQL/API,结果,协同,9,网格,GIS,门户的基本功能,维护活动网格,GIS,节点的列表,活动网格,GIS,节点主动登记,定期轮询网格,GIS,节点是否可用,提供计算代理服务,接收全局视图的,GSQL,语句,返回查询操作结果,提供活动网格,GIS,节点查询服务,选择活动节点直接提交查询请求,10,网格,GIS,节点配置,全局资源视图,接收,模块,发送,模块,全局,解析,序列,执行,空间,数据库,调用,全局结果,序列转移,计算结果,节点状态,GSQL,本地序列,节点功能调用,节点状态查询,11,空间查询语言在网格,GIS,中的解析,空间信息的全局逻辑视图问题,空间实体集和空间对象等多层次上的全局逻辑视图的形式化描述问题,空间查询语言在网格,GIS,计算环境中解析为等价的多点并行与单点并发计算相结合的序列定义和实现方案。,12,网格,GIS,节点全局解析,词法,分析,语法,分析,GSQL,序列,生成,目录,检索,全局解析,全局资源,目录,查询,:,结果,EDP,序列,执行,结果返回段,执行段,加锁段,EDP,结果段,13,EDP,序列,Equivalent Distributed Program,等价分布程序,与全局,GSQL,语句,等价,分布式,协同执行,分布式执行管理,14,网格环境下的,GIS,全局空间索引技术,在协同网格环境中不同层次全局对象的基于分布式空间划分的索引技术,全局空间索引的分布式生成、分布式维护算法和全局查询优化所需的通用接口,15,基于网格的空间信息处理事务,协同计算环境中的空间信息处理事务一致性、完整性定义以及并发空间事务的协同执行控制问题；,分布式空间事务的执行管理技术,分布式协同计算环境中的空间事务的回滚、补偿、提交机制,16,网格节点序列执行流程,EDP,序列状态转换图,活动,加锁段成功,加锁段失败,就绪,返回,语句成功,恢复,语句失败,补偿成功,补偿失败,回滚序列,转出,转出执行结束,结束语句,17,网格节点内部流程：序列执行,EDP#1:,就绪,EDP,空间,数据库,空间,数据库,数据传送,节点,#1,节点,#2,EDP#2:,转出,EDP#3:,恢复,EDP#4:,活动,序列执行,序列执行,EDP#2:,活动,序列转出,EDP#5:,就绪,EDP#4:,转出,EDP#8:,活动,全局,目录,全局,目录,加锁,序列转出,18,网格环境下的空间资源一致性问题,空间数据分布的逻辑划分与全局视图访问机制问题,在网格环境下空间索引、空间数据分布和冗余所产生的数据一致性问题,19,空间资源目录同步更新机制,资源目录,空间,数据库,节点加入,/,退出通知,触发器通知,片段更新全局目录同步,节点资源变化通知,20,网格,GIS,中的负载均衡与容错,协同网格环境下的空间数据资源和空间计算资源的自适应配置问题,在规模化访问的情况下，以保持空间服务一致性、完整性为前提的空间服务负载均衡技术,系统级的容错，空间信息服务系统的不间断完好运行技术,空间信息服务的服务质量,QoS,保证技术,21,网格,GIS,安全支撑体系,网格环境下的空间信息安全机制,面向空间范围和专题图层的空间信息权限设置,基于角色的空间信息访问控制,动态网格资源的安全控制问题,22,网格环境下空间计算的实现步骤,客户端编制空间计算任务，向网格门户提交；,门户将任务转交网格计算节点，后者进行任务解译和空间查询优化，生成分布执行序列；,网格计算节点分发执行序列，发起协同计算；,相应计算节点接到计算任务并在本地空间数据库执行；,相应计算节点完成本地计算任务后，向指定节点提交，必要时进行同步协调；,指定结点进行结果汇总，返回客户端,23,第一阶段原型系统简介,Nebula,网格,GIS,分布式存储与协同原型系统,24,Nebula,运行开发环境介绍,硬件环境,10,台,IBM PC,服务器，千兆交换快速以太网,软件环境（跨平台兼容,Windows,）,操作系统：,Redhat Linux AS4,开发语言：,Java,C,开发工具：,Eclipse,空间数据库：,PostgreSQL8+PostGISP2P,基础支撑：,Project JXTA,客户端开发：,GeoTools,25,启动,Nebula,客户端,新建,/,打开工作空间,工作空间包含了用户操作的信息,连接网格门户,可以连接到任何已知的门户节点,可以向任何门户提交全局查询,通过门户查看节点组状态,活动节点列表,任务序列列表,全局资源目录,26,客户端的结构,地图,显示,门户,接口,查询,管理,ORDB,接口,状态显示,节点,信息,序列,信息,全局,目录,27,客户端：总体界面,28,查看各节点状态,29,查看全局资源目录,查看虚拟全局表的分布,/,冗余状况,全局表的空间范围,片段：空间数据分布,/,冗余的基本单位,图示表示每个活动节点所包含的片段,图示表示每个片段所在的活动节点,不同的全局表可以有不同的分布,/,冗余状况,查看,road,表,30,数据分布情况,31,执行全局查询,查看全局表整个图层,GSQL:select*from county;,结果数据来源追踪,用户交互式查询,开窗查询,查看,station,分布状况,拉框指定空间范围,线穿越查询,查看,county,分布状况,拉线指定穿越线段,32,空间数据的图形化显示,33,执行查询语句,34,空间范围查询,35,穿越查询,36,按来源显示结果,37,更加复杂的全局空间连接查询,系统支持分布在不同节点的多个全局表进行空间连接查询,查询：流量小于,200,的铁路所穿越的县,select county.name,county.the_geom,from county,rail,where,rail.the_geom&county.the_geom,and rail.flux 200;,38,查看执行序列流程,39,显示查询结果,40,节点动态加入与退出,无中心自动维护节点动态加入与退出,查看节点组状态的动态变化（所有门户）,查看全局资源目录的动态变化（所有门户）,查看全局表,Station,系统整体上仍然可用,全局查询结果不包括没有活动节点提供的片段,查询全局表,Station,41,并发的空间查询事务,系统支持多个用户同时发起全局空间查询,多个分布式空间查询事务并发执行,42,谢谢,欢迎指正！,43,