同方宏观库数据解决专业方案.doc

同方宏观经济和社会发展基础数据库系统处理方案技术白皮书

同方股份
12月

1. 系统概述
长久以来，政府各部门内部拥有着大量宏观经济和社会发展基础数据资源，但因为管理分散，制度规范不健全，造成反复采集、口径多乱、数出多门；各部门指标数据自成体系，标准不一，共享程度较差。伴随政府向“经济调整、市场监管、社会管理和公共服务”管理职能转变，就要求必需能够全方面、正确掌握全地域经济社会发展态势，强化政府部门掌控决议信息资源能力，政府部门间信息资源整合和共享需求越来越紧密，但目前部门间信息共享多是点对点方法，没有统一数据交换管理平台。所以各部门对加紧处理数据资源分散管理、数据共享不足问题需求十分迫切，需要建立宏观经济和社会发展基础数据库（以下简称宏观数据库）系统以处理以上问题。
依靠宏观数据库系统建设，能够实现各委办局、各所辖地域经济社会综合数据采集交换，为各部门提供更广泛信息共享支持，首先数据信息从各委办局、各所辖地域整合接入，其次也为政府和这些接入部门提供全方面共享服务。同时，以宏观数据库指标体系建立为基础，整合来自各委办局和各所辖地域、经过审核转换处理数据资源，可实现对经济社会信息统一和集中存放，确保数据唯一性和正确性，为以后政府工作提供一致基础数据支持。
数据整合共享只是手段，数据分析服务才是目标。依靠宏观数据库系统建设，可有效整合各政府部门所掌握全市经济社会信息资源，满足政府业务对统一数据资源共享需要，进而提升形势分析估计水平，对政府在发展计划、投资布局、资源环境、管理创新、科学决议等业务提供强有力支持，提升了政府部门掌控全市经济社会发展态势能力。
2. 建设目标
1）建立科学合理宏观数据库指标体系，努力争取全方面反应地域经济和社会发展总体情况：
2）有组织、有计划、连续地对政府统计部门、政府各部门和国民经济行业管理部门负责统计关系到地域经济和社会发展信息资源进行搜集、整合，建立全地域宏观经济和社会发展信息资源共建、共享统一管理机制；
3）依靠地域电子政务基础设施，充足利用现代信息技术，以科学地域宏观经济和社会发展指标体系为基础，建设支持政府宏观经济管理和社会友好发展基础数据库系统，提升信息资源建设、管理和共建共享能力；
4）为地域经济建设和社会友好发展提供一致宏观经济和社会发展基础数据，为各类应用系统建设提供基础数据支持，满足政府管理决议、部门信息共享和社会公共服务“三个层次”需求。
3. 系统架构
3.1. 总体架构

数据库体系
安
全
支
撑
体
系
组
织
管
理
运
行
维
护
支
撑
体
系
党政领导机构
项目共建单位
社会公众
元数据库
基础
数据库
中心
交换库
公布库
专题库
网络系统
信息共享平台软硬件系统
数据综合分析系统
标准规范支撑体系
发改委
应用系统
数据交换处理系统
应用支撑系统

宏观数据库系统关键是建立面向宏观经济发展、社会公共服务数据库和数据服务。总体架构由支撑体系（标准规范支撑体系、管理运行维护支撑体系、安全支撑体系）、网络系统、信息共享平台软硬件系统环境、数据库体系（中心交换库、基础数据库、专题库、公布库、宏观经济数据库管理系统、元数据库系统）、应用系统（数据交换处理系统、应用支撑系统、数据综合分析系统）组成。
信息共享平台经过网络搜集统计系统和各共建部门信息资源，并有效地将这些信息资源进行分类整理，实现跨部门、跨行业宏观经济管理信息共享，并向用户提供数据服务；
数据库体系：由元数据控制，实现数据交换、存放和公布，整合共建单位现有信息资源，构建专题库和公布库，为数据服务提供支持。
3.2. 体系结构

宏观数据库信息共享平台划分为工作（生产）区、公布（共享）区和互联网信息公布区。在工作（生产）区构建宏观经济数据采集、整合、处理和存放系统；在公布（共享）区构建宏观经济数据公布和共享、存放和备份和专网门户系统等环境支撑系统；在互联网信息公布区构建互联网门户系统，为社会公众提供宏观经济信息服务。
3.3. 总体步骤图
宏观数据库系统总体步骤图以下：

宏观数据库采取在线填报、数据库对接和基于消息数据交换三种采集方法，集中采集、整合、存放各共建部门指标数据。中心交换数据库存放各共建部门交换来原貌数据，基础数据库是对原貌数据进行审核转换和加工而成，是专题数据库和公布库组成基础。元数据库对数据采集交换、整合、存放、分析和公布全过程进行定义和约束。专网和互联网用户可经过门户系统，分别对公布（共享）区和互联网信息公布区数据进行访问。
3.4. 宏观数据库指标体系设计标准
宏观数据库包含到区域内经济社会发展各个方面数据，需要从全部相关政府部门采集数据。依据我企业实际项目经验，选择和确定宏观数据库项目共建单位关键依据以下标准：
1）共建单位拥有基础指标在反应地域经济社会发展进程暨地域宏观经济和社会发展指标体系中关键程度。根据设置指标依据和标准，参与共建单位基础指标必需能够较全方面地满足要求。
2）各方面对指标需求程度，包含政府领导对相关信息关注程度，发改委综合管理和宏观调控对指标需求程度，各委办局对指标需求等。依据党政领导日常需求和各部门提供信息产品，参与共建单位基础指标均涵盖在内。
3.5. 宏观数据库指标体系

3.6. 数据资源分布情况
表一：数据资源分布总表
序号
数据类别
数据关键起源
1
经济
统计系统、财政局、国税局、地税局、工商局、教委、民政局、园林局、农业局、建委、交通局、海关、商务局等
2
社会
统计系统、公安局、劳动局、民政局、教委、卫生局等
3
居民生活
统计系统等
4
环境资源
国土局、计划局、园林局、水务局、环境保护局、市政、民政局等
5
城市建设和管理
统计系统、交通局、市政、水务局、环境保护局、建委、公安局等
6
科技
统计系统、教委、科学技术委员会等

表二：各政府部门数据资源
序号
政府部门
数据资源情况
1
国土资源局
土地地籍情况、土地利用情况、地质情况等
2
气象局
气候和天气及其改变情况等
3
水务局
水资源情况、水利用和节水情况等
4
民政局
行政区划、优抚救助福利、婚姻、残疾人及小区情况等
5
工商局
工商企业登记、私营个体户等数据
6
财政局
财政收入及支出情况
7
地税局
地方税种收入情况
8
国税局
国家税种收入情况
9
公安局
户籍人口、外来人口等相关数据
10
劳动和社保局
登记失业率、社会保障等数据
11
建委
房屋建设及交易等数据
12
环境保护局
环境卫生、大气质量、水资源污染情况
13
园林局
园林绿化、城市绿化情况
14
农业局
各类农业、农村、农民相关数据
15
市政管委
城市水电气热供给、城市排水、市政工程等数据
16
交通局
公共交通、道路情况、交通事故等数据
17
海关
货物、人员、资金出入境统计数据
18
商务局
各类商务和利用外资统计数据
19
旅游局
中国旅游统计、黄金周统计等数据
20
人民银行
金融存款代开情况、金融市场交易情况
21
保监会
保险业务统计数据
22
教委
各类学校、教育机构统计数据
23
文化局
图书馆、艺术团体、剧院统计数据
24
新闻出版局
图书杂志报纸出版、音像出版统计数据
25
广电局
电视、电影、广播类统计数据
26
卫生局
各类医疗卫生机构基础情况、死因统计、婴儿新生儿死亡、农村改水等统计数据
27
体育局
运动会、运动员情况、体育彩票统计数据
28
司法局
律师、协调、法律服务统计数据
29
法院
行政案件、刑事案件、民事调解、协议纠纷、侵权纠纷等数据
30
检察院
办理各类案件统计
31
消防局
火灾及损失情况统计数据
……
……
……
3.7. 数据组成和结构
宏观数据库关键数据库业务体系要依据不一样数据起源、层次、粒度、业务内容和区域特征分成以下类型数据：
(1)根据数据起源：关键能够分成政府统计部门数据和政府其它各部门数据；
(2)根据数据层次：分成原貌数据层和整合数据层；原貌数据根据数据起源并保持原貌特征存放数据，整合数据是原貌数据经过整合处理后形成逻辑统一数据；
(3)按数据粒度：分为宏观和中观两个层面数据。宏观层指标为反应地域社会经济发展整体运行情况关键社会经济总量指标及其结构、速度、效益指标数据；中观层指标为根据产业、行业、区域等特征进行分组汇总数据和分类数据；
(4)按业务指标体系划分：关键包含经济运行、城市建设、人口就业、社会发展、环境资源；经济运行又能够分成总量、财政、税收、投资、工业生产、房地产开发等等；
(5)按区域特征：根据行政区划和区域功效划分数据。
4. 关键功效
经过对用户需求分析，依据宏观数据库系统技术特点，宏观数据库系统功效关键包含关键应用、辅助管理、支撑保障三大部分。
4.1. 关键应用功效
宏观数据库系统含有数据交换、存放、专题加工、查询分析和公布管理等宏观经济信息形成全过程功效。关键应用功效关键由计划设计和元数据库管理、数据交换处理、数据集中存放备份管理、数据整合处理、数据调度管理、专题管理和维护、数据分析应用、信息公布管理等组成。
1）计划设计和元数据管理：计划设计和元数据管理关键实现宏观经济数据库标准化建设过程，是对宏观库业务和技术标准设计和管理。关键包含元数据存放、元数据管理和计划设计三大功效模块：
（1）元数据存放（元数据库）是以管理中心元数据库为关键元数据存放管理体系；
（2）元数据管理关键是以中心元数据为基础，经过元数据读取、分发、同时更新和维护，建立宏观经济数据库统一元数据管理机制；
（3）计划设计是对以指标为关键业务元数据进行统一设计、维护和管理，是一个元数据应用过程。
2）数据交换处理：实现数据交换对接和数据审核转换处理，关键包含以下功效模块：
（1）网上交换处理就是经过专网方法实现数据交换；
（2）数据交换对接关键是把分散在各职能部门经过预处理数据经过交换机制，聚集到宏观数据库数据中心各自交换接口上；“包含数据通信、数据交换和数据对接功效。数据对接也是数据交换一个方法；数据交换对接还包含数据中心经过对接方法从中心向各节点下载交换数据”；
（3）数据审核转换是指抽取来各职能部门交换数据，根据数据交换标准要求，进行审核校验、转换和上载入库；
（4）交换监控管理关键是实现数据交换处理过程安全监控、异常处理、系统监控等功效。
3）数据存放和管理：数据集中存放和管理以基础数据库为主，关键包含以下功效：
(1)基础数据存放是对宏观经济社会发展数据集中存放管理；
(2)数据整合处理是在数据交换处理基础上，对存放和基础数据库原貌数据深入再加工处理，以达成数据逻辑统一；
(3)数据调度管理是实现系统内部数据统一ETL功效，能够进行数据资源配置和任务调度配置，是系统内部统一数据调度平台；
(4)统一数据管理以基础数据库为基础实现对宏观数据库各个层次数据统一管理和维护。
4）专题数据管理：关键包含专题数据库和专题数据管理两大功效模块。专题数据库依据专题应用系统不一样需求能够有不一样形式，专题库也能够有多个；专题数据管理包含专题数据抽取和加工处理、专题数据库更新、专题定义和维护等功效。
5）综合分析应用：
(1)提供分析应用数据环境；
(2)宏观经济基础信息和常规专题或专题分析结果查询和展现；
(3)领导个性化服务：针对市委市政府不一样职能领导需求关键指标分析；
(4)电子编辑出版功效。
6）信息公布管理：实现对宏观库综合数据和分析结果数据公布统一管理，确保公布数据正确和权威。
4.2. 辅助管理功效
辅助管理关键实现以宏观经济数据库数据中心管理功效，关键包含统一门户服务、工作流管理、电子存档管理、系统管理和监控等功效。
1）统一门户服务：经过宏观数据库提供统一用户管理、信息目录服务和应用集成服务，含有标准架构和定制规范宏观数据库统一门户管理，支持各类用户对宏观数据库广泛应用。
2）工作流管理：工作流管理系统作为系统基础运行环境一部分，对宏观经济数据库系统业务步骤进行定制和管理，对业务系统各项操作和管理、权限指派均能够经过工作流管理系统进行设计和定制。
3）电子存档管理：对各部门交换数据、分类加工整理数据、专题数据和公布数据、和相关工作文档等电子数据文件（各部门交换数据文件、报送多种资料文件、工作动态信息等），实施有效永久性介质保留和管理，提供归档数据目录查询、介质调阅、重载上线等服务。
4）系统管理和监控：确保宏观经济数据库信息时效性、统一性、稳定性，必需建立统一系统管理和监控系统，对整个系统资源进行配置和监控管理，确保系统多种软件、主机和网络安全高效运行。
4.3. 支撑保障功效
支撑保障功效确保网络正常运行和安全，是进行电子政务项目标基础条件，也是确保宏观经济数据库应用正常运行和安全稳定基础支撑保障平台，关键包含系统维护、信息安全等功效。
1）系统运行维护：提供系统正常运行所必需管理和维护功效，包含：数据备份和恢复、代码管理、数据中心网络硬件平台和交换对接系统网络硬件平台运维。
2）信息安全：能依据北京市宏观数据库密级，在网络层、系统层、数据层和应用层提供可靠安全保障；同时，保障共享信息和业务处理信息传输、存放和访问安全保密。
3）标准体系：建立宏观经济和社会发展指标体系、元数据标准规范和数据交换格式标准。
标准化建设是以宏观经济指标为关键业务，和技术标准设计、管理过程，数据中心是负担标准化建设关键职能机构。
标准化建设步骤以下图所表示：

5. 系统特色
l 基于元数据系统实现
Ø 经过使用元数据体系（包含指标、目录、规则等）描述统计业务报表、业务及实际数据，确保数据一致性和可追溯性；
Ø 功效强大报表设计器：可设计各类符合统计业务复杂报表，并基于元数据对报表内容进行描述；
Ø 规则引擎，以类似自然语言形式表示很复杂审核关系，在用户填报和采集时进行数据审核验证。
l 统一集中平台
本系统是一个数据采集和加工处理平台，在充足融合目前优异信息技术和统计业务处理模式基础上，使得各类填报用户经过此平台方便快捷地完成数据报送任务，同时使业务处理人员能够方便、灵活进行数据处理、统计分析和信息共享公布等工作；
1）是各级发改委机构人员工作平台，基于统一元数据，利于管理规范化；也降低了中间数据传输步骤，加紧了数据采集加工过程；
2）是各级发改委机构、政府其它部门、企业之间互动平台，即有利于数据快速采集，也有利于立即处理问题，从而不仅确保数据采集速度，也确保了数据质量；
3）是统一服务平台，即方便企业报送数据，也可经过此平台为其它政府部门、社会公众提供高质量数据共享服务；
l 统一数据标准
元数据使用是标准化、规范化过程，对业务、技术、数据基础元素进行抽象，描述其特征、属性，以统一口径在系统中应用，从而确保数据一致性，增强数据共享程度和使用能力。
l 快捷方便消息互动平台
为了增强企业和政府、下级对上级沟通效率，系统增加了消息引擎，可实时进行电话、短信、邮件等消息互动方法进行催报提醒；
l 步骤化管理统计业务处理
步骤型业务处理系统区分于过去功效型信息系统，愈加侧重于整体业务处理和融合而不是分散功效建立，能够有效消除信息孤岛。
l 支持数据分析能力扩展
支持基于数据中心高端数据分析应用，可应对用户要求，快速灵活进行大数据量复杂查询处理，以直观统计图表方法展现给用户，对统计指标分布结构、改变趋势等特征进行跟踪分析。并可支持利用数据仓库、多维数据库等技术手段，对统计数据进行深入挖掘，关键研究指标之间相互约束、相互影响内在逻辑关系，进行多种相关性分析。