1、智慧城市大数据中心建设内容一、建设背景为深入贯彻落实党的十八大精神,抓住和用好新一轮科技革 命和产业变革机遇,在互联网经济、大数据时代大潮中赢得主动、 取得突破,促进智慧城市健康开展,推动全区经济社会转型升级, 智慧建设工作方案提出通过“一大数据中心十四大智慧平台 +N大智慧应用”的建设,努力把区打造成为具有国际影响力的 智慧城市建设先行示范区、具有一流竞争力的智慧经济开展产业 集聚区、具有较强辐射力的智慧民生服务创新先导区。二、建设原那么 推进共享,确保平安。确保处理加快共享与平安保障的关系,确保数据共享工作平安运行。先易后难,突出重点。强调需求导 向,稳步推进各类政府数据资源共享,逐步提高
2、向社会共享的广 度和深度。标准先行,加强推广。强化资源梳理,深化统一标准 规范的建设及推广应用。深化改革,创新产业。推进政府大数据 治理改革,打造大数据产业开展新引擎,助推产业转型升级。三、总体架构要求智慧城市大数据中心在统一的基础设施支撑下,围绕“一中 心四平台”总体框架,建立统一的城市大数据资源汇集、交换中 心;在自主可控的统一标准及管理制度体系、平安管理保障体系、 运维监控体系下,通过基础层、数据层、支持层、应用层、用户 层建设;覆盖全区的公共数据综合服务体系。智慧城市大数据中心总体架构如下列图所示:标准;三是明确数据采集、管理、使用、运维等技术规范,保障 数据中心的完整性实时性,对应数
3、据采集、管理、使用、运维等 制度规范,其主要内容如下:基础数据类标准:区基础信息库信息分类与代码规范区基础信息库元数据规范区基础信息库业务建模与数据字典规范区基础信息库数据质量规范数据采集、交换、处理、共享类技术标准:区基础信息库数据采集规范区基础信息库数据处理规范区基础信息库数据交换规范区基础平台通用技术要求规范区基础平台消息服务规范区基础平台服务接口规范数据采集、管理、使用、运维等制度规范:区基础信息库数据采集制度区基础信息库数据交换制度区基础信息库平台使用制度区基础数据库运维管理制度(3)平安管理标准平安标准将以直接采用为主。主要包括:根据国家公布的信 息系统等级保护相关法令、法规,制定
4、平安防护标准,如平安防 护策略、边界防护标准、访问控制机制、互联网出口管理规范等;制定平安管理标准,实现与上下级平安管理中心平安事件的交 互,如软硬件平安接口标准、平安审计和通报接口标准、平安事 件响应标准等;身份认证标准,将直接采用国家电子政务内网、 外网正式公布身份认证体系相关规范标准。区平台平安防护规范区平台平安管理规范区平台身份认证规范(4)工程管理标准按照科学的管理方法,利用标准化手段,对工程建设进行全 方位、全过程的管理和监督。工程管理标准指工程从立项、开发、 监理、验收、运行、管理等环节应遵循的管理规范标准的集合。区工程开发过程管理规范区系统软件开发技术规范区工程建设运维管理规范
5、区系统软件工程文档编制规范区工程验收测试规范3、基础信息资源池建设需求大型数据库软件需为能满足50个用户使用的企业版大型数 据库软件(如Oracle 11g),用于各类基础信息资源库的建设。(1)四大城市公共基础库人口基础信息库建设可按照基本信息、扩充信息和共享应用 信息三类,支持个人证照信息,并且根据需要可以及时追加基础 信息。数据采集、交换、共享部门数不少于40个。支持人口库 的统计和查询功能,包括数据的采集、交换、使用等情况的统计 和查询。满足为政务数据开放平台提供人口库的基础信息查询数 据要求。支持按区域、按规那么、按部门对人口基础信息的交换、 共享和数据发布,依据数据时效性要求实现数
6、据的双向同步。人 口基础信息采集后应满足数据质量要求,实现自动完成数据的清 洗、自动比对校验、入库。支持数据处理的自动调度、自动处理、 异常数据预警。支持与苏州市级人口库双向交换,支持本地人口 数据库信息登记、审核比照、信息交换、后台管理以及访问门户 等功能。法人单位基础信息库建设,按照核心基础信息、法人扩展信 息和法人共享信息三类划分,并且根据需要可以及时追加基础信 息。核心基础信息数据采集、交换、共享部门数不少于7个(区 市场监督管理局(工商、质监)、区地税局、区国税局、区民政 局、区人力资源和社会保障局、区编办),二期完善扩展。支持 法入库的统计和查询功能,包括数据的采集、交换、使用等情
7、况 的统计和查询。满足为政务数据开放平台提供法人库的基础信息 查询数据要求。支持按区域、按规那么、按部门对法人基础信息的 交换、共享和数据发布,依据数据时效性要求实现数据的双向同 步。法人基础信息采集后应满足数据质量要求,实现自动完成数 据的清洗、自动比对校验、入库。支持数据处理的自动调度、自 动处理、异常数据预警。地理空间基础信息库建设,通过调研掌握区空间地理信息需 求现状,依托于苏州市原有地理信息数据,在其基础上进行整合 区规划局、国土局等相关图层数据,以满足区现阶段需求,并符 合数据交换共享未来开展和建设方向。同时,将城市公共信息与 地理信息库对接,实现城市公共资源的二维平面在地理信息库
8、中 的三维立体化展示,即在“一张图”中查询阅览城市信息资源, 帮助各部门开展日常工作。支持地理基础信息的统计和查询功 能,包括数据的采集、交换、使用等情况的统计和查询。满足为 政务数据开放平台提供地理信息的基础信息查询数据要求。支持 按区域、按规那么、按部门对地理信息基础信息的交换、共享和数 据发布,依据数据时效性要求实现数据的双向同步。地理信息基 础信息采集后应满足数据质量要求,实现自动完成数据的清洗、 自动比对校验、入库。宏观经济基础信息库建设,需包含社会宏观经济常用的各项 数据,并且根据需要可以及时追加基础信息。对接统计局的数据 形成宏观经济基础信息库数据采集、交换、共享部门数不少于 4
9、0个。支持宏观经济库的统计和查询功能,包括数据的采集、 交换、使用等情况的统计和查询。满足为政务数据开放平台提供 宏观经济的基础信息查询数据要求。支持按区域、按规那么、按部 门对宏观经济基础信息的交换、共享和数据发布,依据数据时效 性要求实现数据的双向同步。宏观经济基础信息采集后应满足数 据质量要求,实现自动完成数据的清洗、自动比对校验、入库。 支持数据处理的自动调度、自动处理、异常数据预警。(2)公共业务库公共业务库是对四大公共基础数据库的补充和扩展,需全面 实现对政府所有组成部门的全科室、全业务非涉密数据全覆,数 据采集、交换、共享部门数不少于21个。支持相关公共业务类 数据集的统计和查询
10、功能,包括数据的采集、交换、使用等情况 的统计和查询。满足为政务数据开放平台提供公共业务基础信息 查询数据要求。支持按区域、按规那么、按部门对公共业务基础信 息的交换、共享和数据发布,依据数据时效性要求实现数据的双 向同步。公共业务基础库采集后应满足数据质量要求,实现自动 完成数据的清洗、自动比对校验、入库。支持数据处理的自动调 度、自动处理、异常数据预警。(3)公共专题库按照特定应用场景和服务型为各应用提供融合服务,并实施 分库管理,保障经济运行、城市管理、民生融合、电子政务四大 平台及各位智慧应用数据的专题应用,以支撑其他智慧应用的接 入。公共专题库应至少包含10个以上专题应用主题,并能根
11、据 实际需要不断动态扩展专题库建设。支持按区域、按规那么、按部 门对专题业务基础信息的交换、共享和数据发布,依据数据时效 性要求实现数据的双向同步。公共专题基础库满足数据质量要 求,实现自动完成数据的清洗、自动比对校验、入库。支持数据 处理的自动调度、自动处理、异常数据预警。4、大数据共享交换平台建设需求各类智慧应用数据、物联网数据、互联网数据、视频数据等 数据经交换平台交换到中心,通过资源整合、清洗比对转换处理, 在交换中心形成中心基础信息数据库及三级数据库,形成统一的 数据标准及管理规范,实现对城市大数据中心数据库的日常管理 与维护。数据库建设须实现城市大数据中心的数据从采集到入库,全 流
12、程严把数据质量关,制定详细的加工规那么及流程,从而保障基 础信息库能够存储较高质量与细颗粒度的数据资源,同时包括数 据过滤清洗、数据比对等功能。通过数据清洗比对,对采集库获 取的各部门汇总信息进行清洗、比对,形成标准、规范、准确、 可信度高的基础数据库。数据整合服务的作用表达在通过规那么进 行数据加工、数据整合、数据关联等功能,能够动态配置实现各 类信息处理,在基础数据库的基础上,通过进行清洗、转换、集 成;通过数据整合及服务能够提供对采集的数据进行转换、稽核、 关联聚合等一系列加工处理功能,对涉及到多个来源的共享数据 进行加工处理,对外提供一个完整的数据视图,并能够对数据质 量进行管控。大数
13、据共享交换平台将实现各部门之间的跨部门数据交换 和传输功能,支撑全区各部门相关应用间的数据交换,并通过该 系统汇总到信息资源中心,并能实现数据资源的采集、清洗、比 对、转行、加载等功能。要求包括:大数据采集模块、大数据清 洗加载模块,大数据共享交换模块、大数据质量管理模块、元数 据管理模块、数据资源管理模块、资源统一调度模块和基础服务 模块等建设。需能监控整个系统运行情况,如:使用部门、频率、 操作内容、数据流量、运行状态、非法使用等;对建立基础信息 库及相关指标体系的有效管理;实现中心的用户认证、信息授权、 系统管理等。(1) 大数据采集模块大数据采集模块提供多种类型的采集手段,以满足区政府
14、各 级行政单位IT系统对数据采集现状的要求。采集模块应满足以下业务要求:采集模块支撑大数据平台数据源的采集工具,支持各类 结构化和非结构化数据的采集;平台实现可视化的数据采集,采用元数据管理的方法, 由用户或专业技术人员在界面上操作实现数据采集;于专网或其他原因的用户,通过客户端应用实现数据采 集功能实现;并提供线上或线下的导入功能;对政府各机构业务,以及数据进行标准化定义,建立数 据字典,并建立目录资源库;实现数据和业务的唯一解 释;支持离线采集及实时数据采集模式;手段包括但不限于 “推”模式、“拉”模式、web上传模式、直连模式;数 据更新方式包括但不限于快照模式、触发器模式、日志 模式、
15、API模式、影子表法模式、时间戳模式;提供采集节点监控和异常处理机制,包括:采集任务中 断、采集数据失败等相关异常现象时,实现相关的补采 机制,并通过告警的方式通知系统用户以保障源数据采 集的可靠性;支持采集周期配置,可按实分、小时、天、 月等不同的时间周期进行配置。支持采集数据的存储路 径配置。采集模块应具备以下功能:定义采集字段:对数据源数据结构进行选择性采集;定 制采集ETL策略可视化的采集策略定制,采集策略应该包括:全量采集、增量采集、一次性采集;采集任务设置:设置采集任务的运行周期,如一次性采 集、周期性采集、定时采集;采集任务前必须具备的条 件;采集任务之后需要执行的任务调度与监控
16、:调度与监控,分为中心调度监控和节点调 度监控;中心控制整个网络系统;节点仅仅控制自身的 采集任务与调度;所有调度任务需要经过中心授权才能实现;任务失败处理:采集任务如果失败,可视化的可以设置 尝试重新采集的次数以及诸如报警灯其他可操作方式网络结构与解决方案:对于不同的网络结构,采取与业 务系统松耦合的数据采集策略;可以在节点与数据中心 之间以通信服务器(前置机)的方式进行解决; FTP方式定义多格式数据信息:数据中心接受FTP方式的 数据上传,但是所有以FTP方式上传的数据结构必须在 数据字典中已经定义确认;大数据清洗加载模块大数据清洗加载模块通过大规模,可扩展算法的ETL实现数 据的清洗、
17、转换、加载功能;保障采集的数据正确、完整、规范 地加载到目的地;实现数据整合过程中的传输异常、数据加载异 常、数据结构与质量异常等问题。数据清洗功能包括但不限于:数据转换、数据去脏和转换规 那么的计算,批量分布式清洗和实时不落地清洗,数据转换规那么配 置,数据处理过程日志,数据清洗转换处理多组件设置,硬编码 数据转换、库外数据转换。数据加载功能包括但不限于:全量数 据加载、增量数据加载、流式(实时)数据加载、数据加载过程 控制、数据校验、异常处理等。清洗、加载模块通过可视化的数据处理工具实现,该工具应 该提供新的数据源加入大数据平台体系;并可根据不同的清洗规 那么进行可视化配置;大数据共享交换
18、模块大数据交换与共享模块负责各委办局相关业务信息资源数 据的传输、交换、格式转换的工作,实现信息资源在全区范围内 的交换与共享。大数据交换与共享系统需包含应用集成ESB中间 件、应用集成ESB中间件适配器、数据集成中间件、消息中间件、 通用文件传输中间件、应用中间件、数据交换管理监控系统。应用集成ESB中间件必须采用SOA架构,能够在多个异 构系统(如不同的数据库、消息中间件、数据文件等) 之间进行数据和应用集成,实现互连互通、数据共享交 换、应用集成等功能,同时支持分布式多节点部署。在 网络不可达的情况下,可采用前置机部署。应用集成ESB中间件适配器应实现应用集成,包括:协议集成:数据通信、
19、节点通信、数据流监控、节点服务与 消息等;数据采集:支持异构数据库、同构数据库、非结构化数据的 采集交换和服务;服务封装、服务集成:采用C/S (节点应用);B/S (系统服务)应用程序无需重启服务实现可插拔部署;数据处理组件:应提供数据加载、加工转换、并行计算、高 性能入库、清洗比对能力,提供基于转换引擎和任务引擎的应用 框架。提供丰富的格式转换、异库链接,数据汇总、计算、数据 汇集、装载入库服务。消息中间件应基于队列技术,提供可靠数据传输服务,保 证大数据在网络异常、机器宕机、停电异常等情况确保数据不重、 不漏、不丢。应用中间件应提供JavaEE架构支撑服务,符合GB/T 26232-20
20、10国家标准。通用文件共享、交换、传输服务中间件:应提供非结构化 文件交换,满足点对点、路由、业务域、单向、双向、广播的交 换部署要求,提供基于交换任务、交换域的文件到文件、文件到 文件夹、文件夹到文件夹的多排列式交换,支持双向同步交换。数据交换管理监控系统应提供交换中心、交换接入、中间 件软件、数据交换量的统一监控,并支持用户管理、组织管理、 多维数据交换量统计分析。通过数据交换与共享平台将各个参建部门的业务信息资源 数据汇总到城市大数据中心,城市级数据交换与共享平台可支撑 多个交换域,从而形成区政务信息资源交换体系框架。利用交换 平台实现异构系统的数据采集、可靠信息传输等功能。(2) 大数
21、据质量管理模块大数据质量管理模块包含数据质量控制、数据质量评估及数 据稽核管理三局部。用户层区政府及各政府部门企业和社会机构社会公众开发者应用层支撑层数据层基础层通用构建数据报送平台U统-U证,、as OBM(数据管理大数据分析宏观经济库数据清洗数据采集数据交换共享平台数据质量管理系统分析方法工具非机构化分析1用户管理权限.消息:语义搜索,:模型构建工具公共基础库人口库地理库公共专题库盔部运行大数据 主题薮据库!;图形展示:;报表展示;数据资源管理系统元数据管理系统二次开发工具服务容器开发工具公共业务库智慧民政智慧农业数据加载(存入目标库):实时加载、离线加载数据映射管理清洗与转换规那么设置清
22、洗及转换组件统一调度gel监控鲍Q构建容器发布工具智慧环保其他执行引擎智慧应用数据采集物联网数据采集互联网数据采集I视频数据采集系统支撑库 一 异常处理异常处理数据直连管理数据监听数据抽取平安管理保障体系、统一运维及监控体系标准及管理制度体系;城市管理综合信息服务下吝:但乳鬲毒善宿面艮爵手与:屋而后彳者谷根菊喑演至公羹宿点意浴福翁距苞各类智慧应用智慧应用服务交换总线基础层:利用云计算中心的基础设施,兼容分布式服务、集群框架、 资源管控、备份容灾等功能,集成区物联网设备、视频资源、手 机终端等输入端,整合形成云化资源,为政府、企业和个人提供 计算、存储、平安等服务。数据层:利用大数据管理工具采集
23、、清洗数据,将大数据资源进行整 合,组成区城市大数据资源中心池。数据采集部件实现政务资源、 社会资源的数据采集,并提供多种采集方式,以满足数据接入单 位不同rr系统特定现状的数据采集需求。数据清洗转换部件, 实现采集数据的清洗、数据加载功能,以满足不同格式、不同内 容数据转换的要求,实现清洗转换数据的及时、高效、正确加载。 区城市大数据资源中心池包括三级,分别是人口库、法人库、宏数据质量控制部件支持数据质量规那么需求的手动配置和自 动化优化建议,依据历史运行信息自动调整算法、阀值、优先级 建议;支持数据质量执行周期配置;支持数据质量的数值、波动、平衡性、关联性、一致性监控。 数据评估部件支持数
24、据质量自动化评估,动态出具数据质量报 告、数据质量优化建议报告。数据稽核管理部件支持数据质量稽 核管理规那么配置、稽核任务调度配置、稽核结果分析等。(3) 元数据管理模块元数据与数据目录密切相关,良好的元数据管理是目录管理 的有效基础和前台。元数据的范围包括数据源数据结构、数据词典、字段维度、 程序映射逻辑、数据生命周期等。元数据管理包括元数据定义、存储、查询、维护、检查和分 析应用等功能。(4) 数据资源管理模块数据资源管理模块功能需包括但不限于:模型管理,构建专 业的模型设计器,创立、修改和设计所有数据对象;数据查阅, 构建视觉化数据查阅工具使运管团队高效创立和编辑数据查阅 方案;同步和迁
25、移,保证分布式应用环境下多服务器间数据结构 的一致性、平安性,实现字段对应、代码转换、量纲转换、数据 合并、数据拆分等功能;导入导出,完成从不同格式的文件导入 数据到数据中心,以及数据到各种格式导出控制;计划任务,设 置计划并在指定的时间运行,实现不同数据库在同一批处理作业中的统一调用;日志管理,实现日志信息查询统计与分析管理,包括但不限 于:登录登出日志、访问日志、操作日志、日志统计、用户状态 管理;运行监控,平台系统注册服务实时监控、运行平台性能(包 括CPU、内存等使用情况)实时监控和预警。(5) 资源统一调度模块资源统一调度模块完成数据中心所有数据处理工作的统一 执行调度,统一调度提供
26、以下功能:所有任务统一调度配置、智 能调度运行、资源控制、优先级管理评估、调度策略管控、调度 全面监控、集中的作业告警与错误反应等;调度管理根据业务需 要可以进行变更;基础服务模块城市大数据中心通过基础服务模块对“四平台”提供支撑服 务。基础服务模块实现的服务包括:流程服务、消息服务、检索 服务、报表服务大数据分析组件服务等。流务提供工作流引擎、工作流定义工具、管理控制台及工作单四 局部,并提供标准的API接口。消息服务支持邮件、短信、即时消息、 等多种方式实现信息通知 服务,并提供标准的API接口。检索服务搜索服务提供搜索的管理能力,以及开发的API规范。提供 基于数据中心开发与运行的所有平
27、台,进行站内搜索的统一支撑平台。包括索引的建立、权限的控制以及搜索分析等。报表服务提供高效的报表设计方案、强大的报表展现能力、 灵活的部署机制,并且具备强有力的填报功能,为应用报表展现 与数据分析提供高性能、高效率的报表解决方案。报表服务涵盖自定义报表、自定义图表、(一期中先做简单 的报表应用。)自定义指标、自定义维度、数据过滤、多数据源 连接、可视化拖拽、数据导出(Excel、pdf、xml、txt)、信息 加密、自定义SQL、SSL、定时任务。舆情服务模块重点针对城市管理、经济运行等方面,提供网络舆情服务, 网络舆情来源于互联网数据采集(包括网页、微博等)并实现不 同的专题分析,实现政府对
28、网络舆情的监测,为政府管理服务提 供数据支撑和依据。投标人需对功能模块进行详细说明。(10)大数据分析组件服务大数据分析组件提供高效的多维数据分析模型和数据算法, 为其他数据分析应用提供数据分析服务。该平台实现了分析模型 语义引擎、分析模型构建、结构化和非结构化的大数据分析等组 件服务功能。(一期对大数据分析组件进行简单实现,在二期中 进行扩展)数据交换通过前置机实现的,前置交换须满足:支持国家政务信息资源交换体系标准的要求,能满足未来各 种综合协同应用扩展的需要;支持不同交换信息库之间的双向信息交换。前置交换子系统 能够从交换信息库中提取数据交给交换传输子系统传递,也能够 从交换传输子系统中
29、获取数据存储到指定的信息库或其他数据 库中;采用应用适配器访问交换信息库,实现对交换信息库中数据 的获取与存储;提供图形化的服务定制工具,配置、测试、部署服务;提供详细的错误日志,具备异常的快速定位功能;5、智慧城市大数据中心门户智慧城市大数据中心门户整体设计满足SOA架构的要求,实 现数据的松耦合,支持第三方数据应用的二次开发。整个门户系 统由客户端层、应用服务层、应用支撑层和资源层组成,通过多 层体系架构保证系统的可靠性、可扩展性和可伸缩性。用户的各 种应用请求,通过门户网站发送到应用服务层,通过实现应用服 务接口,完成一般性服务的处理功能。如果客户端请求需要后台 支撑服务的支持或访问基础
30、信息资源,应用服务层将调用服务支 撑层和资源层的接口。智慧城市大数据中心门户的建设要求整合城市大数据中心 (一期)各类服务,表达服务型数据中心的形象、逐步扩展门户 应用功能,建设成为综合性的门户。其主要需要建设的功能模块 如下:1)首页:包括通知公告、图片新闻、大数据中心应用系 统入口、大数据中心简介、服务相关信息(涉及最新服务、热点 服务、服务动态、政策法规)、委办局数据提交情况、数据成果 展示、地图服务、常见问题解答等栏目信息。2)走进智慧:包括信息资源中心简介、机构职能、规划 开展、使用流程、管理方法、数据库建库规范、大记事、常见问 题解答等页面信息。3)信息动态:包括通知公告、服务动态
31、、政策法规等页 面信息。4)在线信息服务:提供宏观经济、法人等公共基础信息 的在线查询。5)信息资源目录:在线发布全区的信息资源目录,各委 办局通过资源目录可以查询各部门的信息资源情况。6)数据成果:包括数据应用、信息资源中心建设成果信 息展示页面。6、平安体系建设按照等级保护三级要求对城市大数据中心的平安体系进行 设计与建设,核心数据库(人口基础数据库)满足等级保护三级 要求,其余局部不低于二级等保要求。制定城市大数据中心信息平安规范,并据此建立符合国际标 准的信息平安保障体系,从物理平安、主机及应用环境的平安、 网络传输平安、区域边界平安、接入平安、CA系统和平安管理 平台等多个方面进行考
32、虑,确保网上信息传输的保密性,建立信 任机制与平安的访问控制,建立监控和平安审计,建立数据资源 的分级访问与管理功能,建立系统平安管理功能。六、一期非功能性要求1、总体架构设计要求(1)规范性系统设计开发遵循国家标准、工信部有关软件行业的通用规 范、通用的国际规范及各系统间接口标准,保障基础信息数据库 及应用系统之间能够根据业需要实现有效的互连。(2)开放性系统设计的各种接口在遵循规范性原那么的基础上,保证其可 以集成不同设备厂商、系统或平台供应商、软件供应商的产品; 保证系统的设备管理、系统扩容和业务维护不依赖于单一设备厂 商、系统或软件供应商的产品。(3)先进性与成熟性相结合系统设计采用先
33、进成熟的技术和手段,以保障系统具有高 效、全面和稳定等良好品质。系统采用先进成熟的总体构架,数 据采集、整合、应用服务等采用目前主流J2EE、中间件等技术。(4)实用性系统设计要切实保证实用性,能够解决工程的实际需求。(5)可扩展性系统设计应充分保证系统容量、处理能力和业务范围具有良 好的扩展能力;具有适应业务变化的能力,对于系统用户数量及 业务量的增长、规那么或代码的变化、业务单据的变更、业务流程 重组等,应保证业务变化对系统运行不造成影响。(6)可靠性保证系统具有较高的可靠性和完善的错误处理机制和自动 失效转移,保证系统能够提供7x24小时不间断访问服务。(7)易用性系统设计需要保证系统软
34、件容易使用,一方面是方便各类服 务对象,另一方面是方便系统管理员和业务管理员。功能界面风 格和操作流程一致,突出用户的中心地位,保证用户使用习惯。(8)可维护性采用面向服务的架构设计,以及结合动态流程建模,增强系 统的可配置能力。(9)可移植性采用J2EE体系统设计,保障系统能跨不同平台进行移植。(10)可管理性保证系统应该具有完善的管理机制,保证所选产品应具有良 好的可管理性和可维护性。(11)平安保密性保证系统在运营过程中管理的各种信息的平安,保证系统与 其它相关系统信息交换过程的平安;保证系统应用服务的平安。 对系统的操作需严格按照操作权限进行,并对每项操作留下完整 的日志记录备查。2、
35、整体性能要求 (1)交换体系性能需求上具体要求如下:对简单的数据量100M以内的数据传输,数据交换能在3秒 内完成从接受请求到处理完成;数据交换具有较高的稳定性,对10万次以上的连续请求处 理无故障;数据交换支持数据库、文件、服务的接入,消息队列传输,以及交换中心数据处理;对实时或批量的数据交换业务请求给予响应,支持至少10个并发请求的响应,具备大并发量处理机制,支持实时与批量处 理的均衡调度;对大数据包的处理,记录量在10万左右,能在10分钟以内 完成交易从接受请求到处理完成。(2)基础信息库性能要求如下:法人库的建设应以十万级法人单位的容量来设计,人口库的 建设应以百万级人口单位的容量来设
36、计,且能足将来数据扩展的 要求;所有公共基础数据库、业务数据库、专题数据库需满足以 下响应要求:吞吐量(每月数据、量高峰期每日数据量)在保证性能的前 担下,系统设计能满足未来五年的高峰量;系统不能宕机,响应时间应是即时(W 5秒)的,高峰期 最大响应时间不得超过8秒;事务处理查询时间平均不超过3秒;普通应用查询时间平均不超过2秒;统计分析类查询时间平均不超过4秒;平均时间响应不超过W 5秒;系统运行时峰值服务CPU所占比不超过60% (持续数秒为准, 瞬时不算),内存所占比不超过80%(持续2秒为准,瞬时不算);移植性要强,能够跨平台运行,能兼容Linux、Windows等 主流操作系统;应用
37、服务兼容性要强,能够多种应用服务中间件下部署运 行;样式和脚本要能够兼容多种不同内核浏览器进行访问;输入输出数据整数精确至个位数,小数至少精确到至百分 位,日期精确到天,时间精确到秒;可兼容多种数据库;法人单位基础信息数据库系统的设计必须充分满足以上性 能要求,并在此基础上,结合建设过程中的实际要求做相应提升。(3)系统稳定性系统有效工作时间299 %,系统故障平均间隔时间90天o(4)故障处理系统在设计时应充分考虑稳定性及对用户误操作的容错功 能,保证在正常情况下系统能保持长时间无故障运行。对于不可 预见的原因导致的系统故障,提供各种故障处理恢复机制使系统 在尽可能短的时间内恢复运行,保证数
38、据的平安性和完整性。七、一期工程实施要求1、系统集成要求城市大数据中心工程属于智慧“一中心四平台”的核心部 分,工程承建单位需要承当“一中心四平台”工程建设的总集成 角色。2、工程实施方案设计要求工程承建方需就工程技术要求的全部内容进行响应,并根据 采购内容编写工程详细实施方案。在工程实施方案中需提出实施 此工程的组织方式、工作机制建议,并设计工作流程和工作计划。3、施工组织人员要求在本工程的执行过程中,工程经理要专职于本工程,核心技 术人员要百分之百地投入到本工程中,并且整个工程团队的人员 要相对稳定。按照工程实施的要求,必须配置相应的工程管理、系统设计、 开发、测试、集成、培训、质量保证等
39、人员,在工程组织中应明 确各岗位的职责,确保工程顺利实施。参与此工程的核心技术人员必须具有承当过相关软件开发 和相关工程建设经验,能够与政府用户进行良好的沟通,掌握电 子政务业务的相关基础知识,具备相关产品集成、应用和开发的 能力。参与此工程的技术人员必须具有强烈的服务意识和高度的 责任感。对上述安排供应商应列出详细实施计划,包括人员姓名、学 历和在本工程中的职责分工。为保证工程顺利实施,组织实施管理和核心人员方面需遵循 下述要求:组织实施管理。工程承建方必须明确陈述工程组织与管理结 构,包括下述内容:工程管理体制、工程管理组织结构图、工程 管理方法、工程管理所采用的工具、工程人员名单、工程经
40、理和 技术负责人的详细情况说明。核心人员要求。在建设期内,工程经理、技术负责人必须长 驻工程现场,对工程建设和实施工作中出现的管理、协调和技术 问题及时作出响应并提出具体的意见和解决方案,并负责催促落 实。调整原那么。工程承建方应允许采购方单位的工作人员及运维 观经济库、空间地理库等组成的城市公共基础数据库;根据物联 网数据、互联网数据及业务应用需要扩展各类指标项形成的公共 业务数据库;结合公共基础数据库及公共业务数据库,根据特定 应用场景和服务型为各应用提供融合服务的专题应用库。三级数 据库融合贯通,初步组成大数据资源中心池;系统支撑库全面支 持上层数据处理及相关应用,面向公众、企业、政府提
41、供全方位 的信息服务。支撑层:支撑层将基础数据进行优化和提升,利用大数据基础平台体 系和大数据挖掘支撑体系实现“一中心四平台”的基础支撑, 为平台各级应用提供运行环境、开发接口与服务支撑。该层提供 针对“一中心四平台”的各类智能支撑工具。结合SOA服务框 架,为电子政务综合信息服务平台、城市管理综合信息服务平台、 经济运行综合信息服务平台、为民服务综合信息服务平台提供支 撑工具集、分析工具集、开发测试工具集等二次开发接口。为保 障数据采集的执行效率、异常处理,到达资源合理的利用,通过 统一调度实现资源的负载均衡和采集任务的有序展开。应用层本层为将优化的数据进行共享分发,利用支持层提供的数据 和
42、接口,加上各行业业务专业模型只是,构建诸多外部智慧应用, 服务于用户层。用户层该层为政府、企业社会机构、社会公众及开发者提供各类可 视化服务。为了保障城市大数据中心的有效、平安运行,以“一中心四 机构人员、监理人员自实施工作开始即参与本工程的需求分析、 详细设计、测试、安装部署等工作,并在实施方案中提出协同工 作计划。4、施工进度要求工程的总体工期为15个月。工程签订合同后9个月完成项 目初验,试运行6个月完成工程终验。第1个月,工程启动,制定工程工作说明书、工程总体计划, 召开工程启动会和数据库软件的采购;第2-8个月,完成深化总体设计、细化实施方案、制定实施 管理的相关制度与管理规范,完成
43、法人、人口、宏观经济、地理 信息四大基础库信息资源梳理工作;完成公共业务基础库建设, 完成大数据共享交换平台的需求、设计、开发、测试和产品部署;第9个月,完成系统初步验收;第9-11个月,完成用户培训、试运行推广工作。第12-14个月,进一步扩充提升完善法人基础库,优化大数 据共享交换平台;第15个月,工程最终验收,系统正式运行。5、施工质量要求工程全过程要求受监理方的监督管理,工程交付物要求通过 第三方软件测评,实施过程按IS09001质量管理体系,重点抓质 量审计、交付成果的质量检查和软硬件系统测试工作,对工程建 设各阶段进行严格的质量监督与控制。(1)监理的全过程管理本工程引入监理制,监
44、理对本工程进行全过程的监督。在项 目组织和实施计划中要考虑到监理要求,实施过程中要积极配合 监理工作,以保证工程实施的进度和质量。(2)质量审计文档审计。文档审计是以计划的内容为基础,以目标和方法 为依据、对所作的各种技术工作进行描述,同时提交执行文档, 所有提交审查的记录都将保存作为审计线索。工程审计。工程质量审计内容包括工程计划、工程管理内容、 实施方法、工程风险与健康性审计。文档管理。在工程实施过程中,由于工程实施的复杂性,双 方人员参加以及时间跨度长等因素,所以有关需求、建议、解决 方案和结论都必须文档化、标准化,以便查阅和引用。实施文档 应作为工程成果的一个组成局部。提供的工程文档至
45、少应包括:工程管理文档、客户提交的需 求文档、实施组提交并由客户确认的解决方案文档、客户需求改 变报告和批准书、开发文档、测试方案和测试结果报告、客户签 署的阶段成果确认书、工程总结报告等。文档管理内容主要包括文档命名标准、文档的版本控制、文 档的批准和存档。6、实施部署环境要求区城市大数据中心(一期)工程工程硬件平台统一部署在区云计算中心,工程承建方应承当系统总集成职责,依据工程的实际需求情况,提供具体可行的硬件平台设计方案和清单,统筹协 调软硬件的建设。7、交付成果、测试与验收要求(1)交付成果要求集成实施文档要求工程承建方在工程实施开始和结束时应向用户提供下述技术文档:技术文件:设备和软
46、件安装、运行、使用、测试、诊断和维 修的技术文件。安装部署计划:成交供应商应提供一个配制计划,包括配置 清单,以及所提供软件、设备的安装指南。测试文档:成交供应商应提供针对该工程的特点的测试方 案,并提供相应的测试文档。验收文档:验收时收集各项验收数据,汇总成册,并对所集 成系统进行综合评估。软件开发文档要求成交供应商必须承诺提供本工程建设过程中的完整的技术 文档和使用文档。所有的技术文件采用简体中文,需要在投标文件中详细列出 拟提交详细文档清单,包括文档提交的计划安排。a.标准规范文档要求完成招标文件中要求的全部标准规范。b.软件交付要求工程承建方必须向用户提供完整的软件安装介质(光盘或磁
47、盘),软件包括技术文档和程序代码,提供的工程实施过程中产 生的程序代码必须包含说明、源码、注释等。测试要求工程承建方在实施过程中必须制定系统的整体测试方案,保 证各子系统联接正确,数据传送正常。测试方案要明确测试关键点,分单元测试、整体测试等。测 试方法应包括功能测试、性能测试、系统确认测试等。整个系统测试内容必须包括功能要求、可靠性、平安性、可 扩充性、可维护性、平台移植性、整体性能、与其他平台接口等。(3)验收要求系统在到达了全部规定要求,并通过第三方平安风险评估 (评估费用列入工程总费用中),且在提交全部相关文档、报告、 源代码等交付物的前提下,可以向采购方提出系统竣工验收的申 请。用户按照验收标准组织验收。验收内容和标准包括:a.系统业务功能验收验收依据包括,需求规格说明书(以双方签字为准)、双 方签订的合同、建设过程中双方签订的工作备忘记录。确认系统实现的业务功能完备、正确、满足用户的需求。b.系统性能验收以供需双方确认的非功能需求规格说明书所定义的性能 要求为依据。确认系统的性能满足非功能需求规格说明书的要求。C.数据验收保证数据由原系统移植到新系统的正确无误;保证系统本身不产生新的错误数据。d.软件过程文档验收标