宏观统计数据库项目建设方案

宏观统计数据库项目建设方案

北京国研数通软件技术有限公司

目录

1项目概述.....................................................................5

1.1项目背景及必要性......................................................5

1.1.1项目背景..............................................5

1.1.2项目建设的必要性......................................5

1.2项目建设目标..........................................................5

1.3项目建设内容..........................................................6

1.4建设周期...............................................................6

2需求分析.....................................................................7

2.1现状分析...............................................................7

2.2用户分析...............................................................7

2.3数据需求分析...........................................................8

2.3.1数据情况分析..........................................8

2.3.2部门数据资源分布情况分析..............................8

2.3.3元数据管理...........................................10

2.4功能需求分析..........................................................10

2.4.1数据交换处理.........................................10

2.4.2数据存储和管理.......................................11

2.4.3主题数据管理.........................................11

2.4.4综合分析应用.........................................11

2.4.5发布库功能改进.......................................11

2.5非功能性需求分析......................................................12

2.5.1性能要求.............................................12

2.5.2安全要求.............................................12

2.5.3其他非功能性要求.....................................13

3总体设计....................................................................15

3.1总体设计原则..........................................................15

3.2总体设计思想..........................................................15

3.3架构设计..............................................................16

3.3.1系统框架.............................................16

3.3.2应用架构.............................................17

3.3.3系统接口设计.........................................18

3.4关键技术路线..........................................................18

3.4.1J2EE技术架构........................................18

3.4.2WebService......................................................................................19

3.4.3移动计算技术.........................................21

3.4.4BI技术..............................................21

4数据库建设方案.............................................................23

4.1宏观统计指标体系建设.................................................23

4.1.1指标体系设计原则.....................................23

4.1.2宏观库指标体系.......................................23

4.2数据库系统设计........................................................24

4.2.1基础支撑库...........................................25

4.2.2文件柜...............................................26

4.2.3工作数据库...........................................26

4.2.4发布数据库...........................................26

5应用软件建设方案...........................................................27

5.1业务管理平台..........................................................27

5.1.1系统概述.............................................27

5.1.2系统功能结构.........................................27

5.1.3子系统之间联系.......................................27

5.1.4系统业务流程.........................................28

5.1.5宏观数据库系统功能设计...............................29

5.1.6元数据管理系统功能设计...............................33

5.1.7综合数据处理系统设计.................................34

5.2信息门户系统.........................................................37

5.2.1领导查询系统.........................................37

5.2.2内网发布系统.........................................39

5.2.3外网发布系统.........................................49

5.2.4离线查询系统.........................................53

5.2.5移动平台查询系统.....................................55

5.3通用基础支撑平台.....................................................57

5.3.1系统概述.............................................57

5.3.2系统功能结构.........................................57

5.3.3功能设计.............................................58

6软硬件配置方案.............................................................62

6.1软硬件选型原则.......................................................62

6.2软硬件设备清单.......................................................62

1项目概述

1.1项目背景及必要性

1.1.1项目背景

信息化是当今世界发展的大趋势，是推动经济社会变革的重要力量。统计信

息化是统计事业发展的必然趋势，是促进和推动统计服务科学发展的重要力量。

大力推进统计信息化，是统计部门深入贯彻落实科学发展观、充分发挥统计在促

进社会主义现代化建设中作用的迫切需要和必然选择。

LL2项目建设的必要性

统计信息资源是国家各类信息资源中，最重要的信息资源之一。但由于缺少

全面、及时、安全、规范的管理，缺少统一的数据和技术标准管理，缺少集约的

应用途径，其开发利用率低，损失浪费严重，大量有价值的统计信息未能实现有

效的信息共享，未能更好的在宏观决策中充分发挥其应有的作用。因此，建立宏

观统计数据库，对提高国民经济宏观决策服务的快速支持能力、提高政府数据信

息使用的方便性，实现信息资源的信息共享、开发利用是非常必要的。

1.2项目建设目标

依托兵团信息化基础设施，充分利用现代信息技术，通过建立全面反映兵团

经济和社会发展总体情况的科学宏观数据库指标体系，有组织、有计划、持续地

对兵团各共建部门的相关宏观信息资源进行收集、整合，建设支持兵团宏观经济

管理和社会和谐发展的宏观经济与社会发展基础数据，从而满足政府履行职能对

宏观经济和社会发展数据的需求，为政府在发展规划、投资布局、资源环境、管

理创新、科学决策等业务提供强有力支持。

1.3项目建设内容

本项目建设内容包括三个部分，具体包括：

第一部分为应用软件开发，其中包括通用基础支撑平台（包括基础服务、接

口服务、系统管理）、业务管理平台（包括部门宏观数据库系统、统计宏观数据

库系统、元数据管理系统）、信息门户系统（包括领导查询系统、内网发布系统、

外网发布系统、离线查询系统、移动平台查询系统、信息门户后台维护系统）；

第二部分为系统集成，其包括设备采购、设备安装及调试、全系统网络设备

的连接及调试、各应用软件的安装及调试、整个系统的试运行及验收；

第三部分为信息资源建设，其中包括统一的指标体系、分组、属性等基础支

撑信息资源的建设。

1.4建设周期

项目一期的建设周期初步计划为8个月o

2需求分析

2.1现状分析

针对目前信息化现状，需要解决的主要问题如下：

■部门信息资源的管理：实现宏观经济各有关部门纵向上信息资源的存储、

发布、统一管理。为各部门提供更广泛的信息共享支持；为形势分析预

测、发展规划、资源环境、管理创新、科学决策等业务提供强有力支持。

■元数据统一体系的构建：构建一套即包含多层次的统计宏观数据同时包

含政府各部门间宏观数据的基础支撑元数据体系。通过元数据的读取、

分发、同步更新和维护，建立宏观统计数据库的统一的元数据管理机制。

■移动终端查询：随着移动技术的普及应用，针对综合统计数据库也有必

要提供基于移动终端的数据查询。

■发布库功能的改进：针对发布库提供包括关键字查询、信息动态、景气

预警、主题分析、分析报表等在内的新功能。

2.2用户分析

综合统计数据库主要是服务统计各共建政府部门相关人员、统计局用户和公

众：

＞各共建政府部门用户：定期提供本部门宏观信息资源，可以浏览查询指

标体系（指标、分类等），查询信息资源目录，查询报表和数据提供情

况，提供业务数据标准和相关元数据变更维护信息；

＞统计局用户：定期提供统计数据，提供业务数据标准和相关元数据变更

维护信息。浏览查询指标体系（指标、分类等），查询信息资源目录，

查询报表和数据提供情况；

＞社会公众用户：通过互联网门户浏览查询宏观经济社会发布数据和相关

信息；

＞专业数据分析用户：综合业务部门和部分专业处室用户是数据分析用户。

系统提供专用工具，帮助用户建立模型，撰写分析报告；

＞系统管理用户：数据管理中心是系统管理用户。负责系统的运维、升级、

技术支持工作。

2.3数据需求分析

2.3.1数据情况分析

宏观数据库的核心数据库业务体系根据不同的数据来源、层次、粒度、业务

内容和区域特征分成以下类型数据：

■按照数据来源：主要可以分成政府统计部门数据和政府其他各部门数据;

■按照数据层次：分成原貌数据层和整合数据层；原貌数据按照数据来源

并保持原貌特征存储的数据，整合数据是原貌数据经过整合处理后形成

的逻辑统一的数据；

■按数据粒度：分为宏观和中观两个层面数据。宏观层指标为反映地区社

会经济发展整体运行状况的主要社会经济总量指标及其结构、速度、效

益指标数据；中观层指标为按照产业、行业、区域等特征进行分组的汇

总数据和分类数据；

■按业务指标体系划分：主要包括经济运行、城市建设、人口就业、社会

发展、环境资源；经济运行又可以分成总量、财政、税收、投资、工业

生产、房地产开发等等；

■按区域特征：按照行政区划和区域功能划分数据。

2.3.2部门数据资源分布情况分析

各政府共建部门数据资源分布情况如下图所示:

序号政府部门数据资源情况

1国土资源局土地地籍情况、土地利用情况、地质情况等

2气象局气候与天气及其变化情况等

3水务局水资源状况、水利用与节水情况等

4民政局行政区划、优抚救济福利、婚姻、残疾人及社区情况等

5工商局工商企业登记、私营个体户等数据

6财政局财政收入及支出情况

7地税局地方税种收入情况

8国税局国家税种收入情况

9公安局户籍人口、外来人口等相关数据

10劳动和社保局登记失业率、社会保障等数据

11建委房屋建设及交易等数据

12环保局环境卫生、大气质量、水资源污染情况

13园林局园林绿化、城市绿化情况

14农业局各类农业、农村、农民相关数据

15市政管委城市水电气热供应、城市排水、市政工程等数据

16交通局公共交通、道路状况、交通事故等数据

17海关货物、人员、资金出入境统计数据

18商务局各类商务与利用外资统计数据

19旅游局国内旅游统计、黄金周统计等数据

20人民银行金融存款代开情况、金融市场交易情况

21保监会保险业务统计数据

22教委各类学校、教育机构统计数据

23文化局图书馆、艺术团体、剧院统计数据

24新闻出版局图书杂志报纸出版、音像出版统计数据

25广电局电视、电影、广播类统计数据

26卫生局各类医疗卫生机构基本情况、死因统计、婴儿新生儿死亡、

农村改水等统计数据

27体育局运动会、运动员情况、体育彩票统计数据

28司法局律师、协调、法律服务统计数据

29法院行政案件、刑事案件、民事调解、合同纠纷、侵权纠纷等数

据

30检察院办理各类案件统计

..........

2.3.3元数据管理

元数据管理主要实现宏观经济数据库的标准化建设过程，是对宏观库业务和

技术标准的设计和管理。主要包括元数据存储、元数据管理和规划设计三大功能

模块：

（1）元数据存储（元数据库）是以管理元数据库为核心的元数据存储管理

体系；

（2）元数据管理主要是以元数据为基础，通过元数据的读取、分发、同步

更新和维护，建立宏观经济数据库的统一的元数据管理机制；

（3）规划设计是对以指标为核心的业务元数据进行统一的设计、维护和管

理，是一个元数据的应用过程。

2.4功能需求分析

宏观数据库系统具备数据交换、存储、主题加工、查询分析和发布管理等宏

观经济信息形成的全过程的功能。核心应用功能主要由元数据库管理、数据交换

处理、数据集中存储备份管理、数据整合处理、数据调度管理、主题管理和维护、

数据分析应用、信息发布管理等组成。

2.4.1数据交换处理

实现数据交换对接和数据审核转换处理，主要包括以下功能模块：

（1）网上交换处理就是通过专网的方式实现数据交换；

（2）数据交换对接主要是把分散在各职能部门的经过预处理的数据通过交

换机制，汇集到宏观数据库数据中心的各自交换接口上；包括数据通信、数据交

换和数据对接功能。数据对接也是数据交换的一种方式；

（3）数据审核转换是指抽取来各职能部门的交换数据，按照数据交换标准

的要求，进行审核校验、转换和上载入库；

（4）交换监控管理主要是实现数据交换处理过程的安全监控、异常处理、

系统监控等功能。

2.4.2数据存储和管理

数据集中存储和管理主要包括以下功能：

(1)基础数据存储是对宏观经济社会发展数据的集中存储管理；

(2)数据整合处理是在数据交换处理的基础上，对存储与基础数据库的原貌

数据进一步的再加工处理，以达到数据的逻辑统一；

(3)数据调度管理是实现系统内部数据的统一ETL功能，能够进行数据资源

配置和任务调度配置，是系统内部统一的数据调度平台；

(4)统一数据管理以基础数据库为基础实现对宏观数据库的各个层次数据统

一管理和维护。

2.4.3主题数据管理

主要包括主题数据库和主题数据管理两大功能模块。主题数据库根据主题应

用系统的不同需求可以有不同的形式，主题库也可以有多个；主题数据管理包括

主题数据的抽取和加工处理、主题数据库更新、主题的定义和维护等功能。

2.4.4综合分析应用

(1)提供分析应用数据环境；

(2)宏观经济基本信息和常规主题或专题分析成果的查询和展现；

(3)领导的个性化服务：针对市委市政府不同职能领导的需求关键指标分析。

2.4.5发布库功能改进

发布库功能的改进：针对发布库提供新的功能，包括信息动态、景气预警、

主题分析、分析报表等。

2.5非功能性需求分析

2.5.1性能要求

性能需求主要指作业响应时间方面的要求，作业响应时间指完成目标系统中

的交互或批量处理所需的响应时间。

根据业务处理类型的不同，把作业划分为两类：交互类业务、查询类业务,

分别给出响应时间要求的参考值，包括峰值响应时间、平均响应时间。

交互类业务

交互类业务在本项目中指体外运行的数据整理工具所完成的工作，如录入,

修改或删除一条表数据记录的操作等。

平均响应时间：0.5-1（秒）

峰值响应时间：1-2（秒）

查询类业务

如信息查询、统计报表生成等。查询业务由于受到查询的复杂程度、查询的

数据量大小等因素的影响，需要根据具体情况而定，在此给出一个参考范围。

简单查询平均响应时间：1-3（秒）

复杂查询平均响应时间：3-5（秒）

2.5.2安全要求

根据《信息安全等级保护管理办法》，我们建议兵团宏观统计数据库系统的

信息安全保护等级定为等级保护三级，信息安全保障体系的设计符合安全等级的

要求。主要的要求如下：

1）用户身份的鉴别：对应用系统内的所有用户要进行身份验证，防止非法

用户对系统的访问。

2）用户权限控制：在应用系统中要进行用户角色和级别的定义，分别为不

同级别的不同角色设置操作权限和数据访问权限，从而控制合法用户的

操作权限，避免因软件系统在权限控制方面的漏洞导致越权操作，产生

安全问题。

3）应用数据安全：应对数据进行加密。B/S结构，应采用建立在SSL（Secure

SocketsLayer）技术基础之上的HTTPS（SecureHypertextTransferProtocol）

超文本传输协议的安全版本。在必要安全的操作中，可以使用HTTPS

的加密访问和传输的方法。

4）日志和审计：应用系统利用安全审计系统，使具有完备的日志功能，通

过周期性审计、实时审计和事后审计等审计策略，以发现非法违规操作。

需要进行日志记录的内容包括：各类操作人员的关键操作信息、用户及

机构变更等与安全管理相关的信息等。同时，日志数据或文件应妥善保

存，并要限制业务操作员对其的访问权限。

2.5.3其他非功能性要求

1）开放性

基于各项业务具体需求，需使本系统具有良好的可移植性。本系统可运行在

不同的软硬件平台上，易于以后系统的升级。

2）可扩充性

基于可扩充的平台进行系统建设项目的开发建设，提高系统的可扩充性。

3）界面友好性

本系统在展现层面采用统一的风格和基调，并且提供统一的操作界面和方式。

4）服务个性化

系统针对不同的客户，在考虑整体负载和业务符合的情况下，为具体使用者

提供个性化的界面内容和界面形式，以满足用户的个性化业务需求。

5）可用性

操作快捷、内容丰富是保证本项目应用可推广的基础。因此，准确而详细地

理解各用户群特征、任务和使用环境，在“有效性”（完成特定任务和达到特定

目标时所具有的正确性和完整程度）、“效率”（完成任务的正确性和完整程度与

所使用资源，如时间，之间的比率）以及“满意度”（在使用产品过程中具有的

主观满意和接受程度）等方面满足各类用户对系统的要求。

6）可管理性

本系统建设项目内容涉及数据多，各项日常管理维护工作比较烦琐，系统需

提供良好的可管理性。

3总体设计

3.1总体设计原则

为了保证本系统的质量，我们在进行系统的设计、开发、部署和运行管理规

划时将遵循如下原则：

＞标准化

制定相关的数据分类标准及描述规范、数据采集流程规范及数据运维规范,

工程要严格按照规范及标准开展工作，保证流程规范化，数据标准化。

＞准确性

数据是数据分析的基础，需要保证基础数据的准确性、合理性。同时，在应

用系统的设计和实现中提供多种核查、审计手段,进一步保证系统处理的准确性。

＞安全性

系统设计需要采用严格的安全保密措施，针对不同类型的数据，分配对数据

的访问权限，提供多种安全检查审计手段，确保系统不被非授权用户侵入。

＞可靠性

采用多种高可靠、高可用性技术以使系统能够保证高可靠性，尤其是保证关

键信息服务的连续不间断运作和对非正常情况的可靠处理。

＞可伸缩性

系统应随着应用水平的提高、规模的扩大和需求的增加，能满足新增的需求,

而系统的体系结构不需做较大的改变。

＞易维护性

系统平台应可管理和易于维护，以保证平台易管理易维护的特点得到充分发

挥，以满足本系统的需要。

3.2总体设计思想

系统的总体设计主要坚持顶层设计的思路，首先通过业务需求主体管理职能

的界定，确定主要管理职能所包含的管理主体，并为每个管理主体建立相应的关

键应用系统，通过对关键应用系统的分析,确定实现关键应用系统要求的数据库,

以及底层的基础数据库。顶层设计的原则是：由上而下提出需求，自下而上提供

支持。

3.3架构设计

3.3.1系统框架

宏观数据库系统逻辑上分为IT基础设施层、信息资源层、应用支撑层、

应用系统层、终端展现层。

IT基础设施层：基础设施层是系统的运行保障层，包括通讯网、英特网、

政务网等网络基础设施和相应的硬件设施。硬件层为系统提供通信、安全等基

础设施。

信息资源层：信息资源层主要是系统的数据支撑层，包括了系统的数据资

源及数据资源管理功能。通过扩展，还可以提供数据的分层、分级安全共享。

信息资源层为系统提供真实的基础数据支持。

应用支撑层：应用支撑层层主要是系统业务应用系统的支撑平台，由各种

中间件、服务组件和接口组成，主要包括GIS服务组件、应用服务中间件等组

成。服务层是整个系统业务实现的支撑，并是将来系统功能和数据扩展的基础，

保障了系统的可扩展性。

应用系统层：系统应用层主要是系统的业务应用系统，包括两方面功能，

一是业务系统功能；一是GIS服务功能，为系统用户提供业务处理、交互服务

的工作平台。应用层是整个系统的业务逻辑集中点，直接为用户提供服务，在

整个系统总体架构中，处于非常重要的地位。

终端展现层：终端展现层主要提供网络等多种接入方式，是系统数据采集、

信息发布的重要途径。也是未来系统业务扩展的基础。

系统的框架如下图所示:

门户显R悬端京

应

用

系

统

层

=

标

应

用

支

撑

准

层

lr言

值

规

范

理

体

伍

系

系

息

信

源

资

昙

层

IT基

础设

施层

3.3.2应用架构

应用架构描述了宏观库系统内部通用基础支撑平台、业务管理系统、信息门

户系统的系统结构以及关联关系，以及与其它外部系统的关联关系，定义了业务

应用的基本特性。本系统的应用架构基于J2EE体系结构，采用B/S模式来构建。

如下图所示：

信息门户系统

领导查询内网发布外网发布寓线查询移动平台

系统系统系统系统查询系统

oftr___

通

综合数据处理系统用

其他

基

础

外部

支撑

系统

台

---------5T平

部门宏观数据库（统计宏观数揖库

元数据库

业务管理系统

3.3.3系统接口设计

系统接口设计通过如下方法实现：

1、访问外部WebService接口：本系统可通过WebService接口访问各子系统

提供的服务。

2、通用基础支撑平台对各子系统提供数据支持，子系统间访问关系包括：

ETL数据抽取、子系统间WebService接口服务调用、子系统间通过数据zip压缩

包进行数据交换等形式；

3、本次项目的应用软件开发都预留了开放、标准统一的规范接口，供外部

系统的调用。

3.4关键技术路线

3.4.1J2EE技术架构

J2EE是一种利用Java2平台来简化解决方案的开发、部署和管理相关的

复杂问题的体系结构。J2EE技术的基础就是核心Java平台或Java2平台的标

准版，J2EE不仅巩固了标准版中的许多优点，例如“编写一次、随处运行''的特

性、方便存取数据库的JDBCAPI、CORBA技术以及能够在Internet应用中保

护数据的安全模式等等，同时还提供了对EJB、JavaServlets.JSP、JMX以

及XML技术的全面支持。

J2EE体系结构提供中间层集成框架用来满足需要高可用性、高可靠性以及

可扩展性的应用的需求。通过提供统一的开发平台，J2EE降低了开发多层应用

的费用和复杂性，同时提供对现有应用程序集成强有力支持，增强了安全机制，

提高了性能。

J2EE为搭建具有可伸缩性、灵活性、易维护性的业务系统提供了良好的机

制。

1、支持异构环境：J2EE能够开发部署在异构环境中的可导入程序。基于

J2EE的应用程序不依赖任何特定操作系统、中间件、硬件。因此设计合理的基

于J2EE的程序只需开发一次就可部署到各种平台。这在典型的异构计算环境

中是十分关键的。J2EE标准也允许使用与J2EE兼容的第三方的现成组件，把

它们部署到异构环境中，节省了由自己制订整个方案所需的费用。

2、可伸缩性：基于J2EE平台的应用程序可被部署到各种操作系统上，为

消除系统中的瓶颈，允许多台服务器集成部署，实现可高度伸缩的系统，满足

未来业务系统的需要。

3、稳定的可用性：一个服务器端平台必须能全天候运转以满足业务运行

的需要。将J2EE部署到可靠的操作环境中，将支持长期的可用性。

4、强大的应用开发能力:J2EE框架中的多种技术提供了应用开发的手段，

如XML、JMS、RMI/IIOP.JCA,从数据级、组件级、应用级等层次支持应用的

集成。

3.4.2WebService

WebServices是自包含的、模块化的应用程序，它可以在网络（通常为

Web）中被描述、发布、查找以及调用。

WebServices是基于网络的、分布式的模块化组件，它执行特定的任务,

遵守具体的技术规范，这些规范使得WebService能与其他兼容的组件进行互

操作。

所谓Web服务，是指由企业发布的完成其特别商务需求的在线应用服务，

其他公司或应用软件能够通过Internet来访问并使用这项应用服务。

Web服务的一个主要思想，就是未来的应用将由一组应用于网络的服务组

合而成。只要两个等同的服务使用统一标准和中性的方法在网络上宣传自己，那

么从理论上说，一个应用程序就可以根据价格或者性能的标准，从两个彼此竞争

的服务之中选出一个。除此之外，一些服务允许在机器之间复制，因而可以通过

把有用的服务复制到本地储存库，来提高允许运行在特定的计算机（群）上的应

用程序的性能。

WebServices体系结构（如下图）是面向对象分析与设计（OOAD）的一种

合理发展，同时也是电子政务解决方案中面向体系结构、设计、实现与部署而采

用的组件化的合理发展。这两种方式在复杂的大型系统中经受住了考验。和面向

对象系统一样，封装、消息传递、动态绑定、服务描述和查询也是WebServices

中的基本概念，而且，WebServices另外一个基本概念就是：所有东西都是服务，

这些服务发布一个API供网络中的其他服务使用，并且封装了实现细节。

UDDI

Registries

WebServices以技术栈的形式规范了WebServices体系中的各类关键技术,

包括服务的描述、发布、发现以及消息的传输等。

3.4.3移动计算技术

所谓移动计算，是指移动终端通过无线通信与其他移动终端或者固定计算设

备进行有目的的信息交互。移动计算的三个要素为移动终端、无线通信、信息交

互。

移动终端的主要技术包括：

A无线通信技术：解决无线介质中的数据传输问题；

＞移动终端技术：解决移动应用的终端设备问题；

＞移动互联技术：解决移动终端之间的互联互通问题；

＞移动应用技术：提供各种应用系统及应用支撑系统。

移动计算的优势为：突破终端硬件限制，便捷的数据存取，智能均衡负载,

降低管理成本，按需服务降低成本。

3.4.4BI技术

BI是BusinessIntelligence的英文缩写，中文解释为商务智能，用来帮助企

业更好地利用数据提高决策质量的技术集合，是从大量的数据中钻取信息与知识

的过程。简单讲就是业务、数据、数据价值应用的过程。一个BI系统为了满足

企业管理者的要求，从浩如烟海的资料中找出其关心的数据，必须要做到以下几

步：

＞为了整合各种格式的数据，清除原有数据中的错误记录一一数据预处理

的要求。

＞对预处理过数据，应该统一集中起来一一元数据(MetaData)、数据仓

库(DataWarehouse)的要求；

＞最后，对于集中起来的庞大的数据集，还应进行相应的专业统计，从中

发掘出对企业决策有价值的新的机会一一OLAP(联机事务分析)和数据

挖掘(DataMining)的要求。

整个体系架构中包括：终端用户查询和报告工具、OLAP工具、数据挖掘

(DataMining)软件、数据仓库(DataWarehouse)和数据集市(DataMart)产

品、联机分析处理(OLAP)等工具。具体介绍如下：

■终端用户查询和报告工具：专门用来支持初级用户的原始数据访问，不

包括适应于专业人士的成品报告生成工具。

■数据预处理(STL-数据抽取、转换、装载)：许多来自不同的企业运作系

统的数据中提取出有用的数据并进行清理，以保证数据的正确性，然后

经过抽取(Extraction)、转换(Transformation)和装载(Load),

即ETL过程，合并到一个企业级的数据仓库里，从而得到企业数据的一

个全局视图。

■OLAP工具:提供多维数据管理环境，其典型的应用是对商业问题的建模

与商业数据分析。OLAP也被称为多维分析。

■数据挖掘(DataMining)软件：使用诸如神经网络、规则归纳等技术，

用来发现数据之间的关系，做出基于数据的推断。

■数据仓库(DataWarehouse)和数据集市(DataMart)产品：包括数

据转换、管理和存取等方面的预配置软件，通常还包括一些业务模型，

如财务分析模型。

■联机分析处理(OLAP)：OLAP是使分析人员、管理人员或执行人员能够从

多角度对信息进行快速、一致、交互地存取，从而获得对数据的更深入

了解的一类软件技术。

4数据库建设方案

4.1宏观统计指标体系建设

4.1.1指标体系设计原则

宏观数据库涉及到区域内经济社会发展各个方面的数据，需要从所有相关政

府部门采集数据。根据我公司实际项目经验，选择和确定宏观数据库项目共建单

位的主要依据以下原则：

1）共建单位拥有的基础指标在反映地区经济社会发展进程暨地区宏观经济

与社会发展指标体系中的重要程度。按照设置指标的依据和原则，参与共建单位

的基础指标必须能够较全面地满足要求。

2）各方面对指标的需求程度，包括政府领导对相关信息的关注程度，宏观

调控对指标的需求程度，各委办局对指标的需求等。根据党政领导的日常需求和

各部门提供的信息资源，参加共建单位的基础指标均涵盖在内。

4.1.2宏观库指标体系

宏观经济和社会发展指标体系涵盖的信息包括经济、社会、居民生活、城市

建设与管理、科技等五方面的内容，如下图所示:

交通运输、仓储

和眦政业

经济批发和零建业一

新住市和曹饮业

疆

生外一落胃片

产

建

设

兵

团

数

据

库

系

统

居民生

指

活

标

体

系

城镇建设

与管理

科技

4.2数据库系统设计

数据库体系由元数据控制，实现数据的交换、存储和发布，整合共建单位现

有信息资源，构建主题库和发布库，为数据服务提供支持。数据库组成结构如下

图所示：

图4-1数据库组成结构

宏观数据库体系中的数据库子系统包括：基础支撑数据库、综合数据文件柜、

综合数据工作库、发布库。

基础支撑数据库：各部门元数据，对宏观统计数据库系统提供支撑作用。

综合数据文件柜：主要是存储各类统计数据文件，主要以excel表的形式存

放。

综合数据工作库：存放经过转化的结构化的指标数据。

发布库：主要是存放发布的数据，包括整表数据和指标数据。发布库可以根

据用户的实际需求建立多个。

4.2.1基础支撑库

基础支撑库主要存放各类元数据，具体内容如下：

■指标体系数据：综合数据的指标体系，包括多个版本的指标体系;

■统计分组：综合数据的统计分组，包括多个版本的分组；

■计量单位：指标的计量单位信息；

■指标属性：指标的属性信息；

■统计报表：指标的excel报表信息，以及表样信息；

■调查制度：综合数据的统计调查制度信息；

■发布制度：综合数据的发布制度信息；

4.2.2文件柜

文件柜主要是存储各类统计数据文件，主要以excel表的形式存放。

4.2.3工作数据库

工作数据库存放经过转化的结构化的指标数据。为数据分析库提供支持。宏

观数据库体系下的工作数据库包括综合数据库的专业工作数据库。

4.2.4发布数据库

发布库存放从综合数据工作库中抽取来的发布数据，包括整表数据和指标数

据。可根据实际需求，针对不同的用户建立多个发布库。

5应用软件建设方案

5.1业务管理平台

5.1.1系统概述

业务管理平台包括部门宏观数据库系统、统计宏观数据库系统、元数据管理

系统三大子系统。其中，部门宏观数据库系统与统计宏观数据库系统实现了对部

门数据及统计数据的交换、存储、加工、分析、发布等全过程的功能；而元数据

管理系统构建了基于统计与各部门之间统一的元数据支撑体系，通过元数据的读

取、分发、同步更新和维护，建立宏观经济数据库的统一的元数据管理机制。

5.1.2系统功能结构

业务管理系统的功能结构如下图所示:

目录管理

衽密整理目录管理

文件管理:任务管理

文一文山|文件柜文件管理

年一年理］一套袤数据管理

文件柜。

现情况管理I文献管理

筑值提酸管理年签管理

归档情况管理

数据加载

,后信赍能管理

加载情况统计

数据加载

发布管理I工作库G部门宏观数据库系统

报表纠林管理］加载情况统计

统计宏观数据库系统°发布管理

数据加就管理I工作库

报表纠销管理

宏观库导入

数据加载管理

部门库导出数据交换业务管理系统

元数据导入宏观库导出

数据交换部门交导入

代码管理

元数据导入

日志管理

系统运维

状态监控一代码管理

口志管理

数据瞽份和恢复系统运维

砧状态监控

网站维护数据各位和恢复

主题分析模板维护

分析报告维护基础数据管理

元数据管理

统计分析维护二综合数据处理系统-指林佳系管理

遨邂再数据交换

景气预警管理

系统走维家身运♦

数据交萩

5.1.3子系统之间联系

1.应用部署：部门和宏观数据库系统按需部署在不同的网络中，部门交换

系统部署在政务专网，宏观统计数据库系统部署在统计专网。

2.元数据支撑：目前构建用于支撑部门和宏观数据库系统的统一的元数据

支撑体系。

3.数据层面：部门与宏观统计数据库系统分别处理部门和宏观的统计数据,

包含历年以及将要入库的宏观统计数据。

4.功能层面：部门和宏观统计数据库系统具有共同的基本功能，分别在基

本功能上有各自扩展功能。

5.数据交换：部门数据库系统与宏观库数据库系统实现数据的交换与同步。

通过在线同步与数据包同步两种方式。

5.1.4系统业务流程

宏观数据库系统业务流程，如下图所示:

6„a,

市静领导||区县统计局।

专网门户互联网门户

访问控制・访问控制-

应用支撑系统

使用

目

录

体

系

宏观数据库可采用在线填报、数据库对接和数据交换三种采集方式，集中采

集、整合、存储各共建部门与统计局各相关处室的指标数据。中心交换数据库存

储各共建部门交换来的原貌数据，基础数据库是对原貌数据进行审核转换和加工

而成，是主题数据库和发布库构成的基础。元数据库对数据的采集交换、整合、

存储、分析和发布全过程进行定义和约束。专网和互联网的用户可通过门户系统,

分别对发布（共享）区和互联网信息发布区的数据进行访问。

5.1.5宏观数据库系统功能设计

数据库系统功能设计如下图所示：

数据库系统功能设计

文件柜目录管理任务管理文献管理年鉴管理

数据加载发布管理报表红错管理

与元数据管理系与统计宏现数据与综合数据处理

统数据交换库系统数据交换系统数据交换

根据兵团现有信息化情况，部门宏观数据库系统需要新建，功能结构如上图

所示；统计宏观数据库系统可在现有系统的基础上进行升级完善。

文件本巨

文件柜系统是为了对统计宏观数据进行归档，防止数据及文件的丢失而开发

的系统。系统主要任务就是把现有的统计数据集中存储，为后面的数据管理、应

用提供统一的数据源。

1.目录管理

目录管理能够管理文件柜所存储文件及文献的存储位置信息，将存放位置与

文件及文献的分类有机的联系起来。目录管理要从数据的全局角度来进行目

录的划分。

2.任务管理

文件柜的文件和文献是按需上传的，任务管理有文件任务设置和文献