1、数据共享交换平台实施方案数据共享交换平台实施方案（V1.0）项目编号：项目名称：编写人：李斌编写日期：2018.05.10审核人：审核日期：2018.05.15批准人：批准日期：文档修订记录目录第1章.编写说明 (5)1.1编写目的 (5)1.2术语定义 (5)第2章.项目实施总述 (6)2.1项目建设目标与任务 (6)2.1.1.项目建设总体目标 (6)2.1.2.项目分阶段目标 (6)2.2项目建设内容 (7)2.2.1.项目总体设计 (7)2.2.1.1. 系统定位 (7)2.2.1.2. 技术架构 (8)2.2.1.3. 平台部署 (10)2.2.2.数据交换设计 (10)2.2.2.
2、1. 概述 (10)2.2.2.2. 模块和功能设计 (1)2.2.3.项目软硬件系统建设内容 (1)2.2.3.1. 数据共享交换 (1)2.2.3.2. 接口管理 (5)2.2.3.3. 交换前置 (7)2.2.3.4. 交换桥接 (8)2.2.3.5. 接口重构API (8)2.2.4.项目实施工作内容 (8)2.2.5.项目实施进度规划 (10)2.2.6.实施风险与关键点 (11)第3章.里程碑计划 (14)第4章. 2018年详细工作计划 (16)文档格式约定:：一级标题：左对齐黑体字二号字加粗二级标题：左对齐黑体字小二号字加粗三级标题：左对齐黑体字三号字加粗四级标题：左对齐黑体字
3、四号字加粗正文：正文首行缩进2字符 1.5倍行距宋体小四号字图片：居中表格：居中表格文字左对齐宋字五号字第1章.编写说明1.1编写目的本方案不仅从实施目标、任务、执行计划和组织分工等方面对沧州大数据中心项目数据中心项目（以下简称“本项目”）的实施工作进行了宏观定义，并对具体的基础设施建设、系统设计方案、标准规范及培训实施方案、系统实施、实施与保障等专项工作也做较为详细的定义，以指导后续的实施工作。1.2术语定义1共建单位：配合沧州大数据中心工程建设的政府机构、公共事业部门和企业。2承建单位：九次方大数据信息集团有限公司。第2章.项目实施总述2.1项目建设目标与任务2.1.1.项目建设总体目标利
4、用交换平台实现异构系统的数据采集、信息传输，通过原系统提供接口或市统一开发接口等多种方式打通“数据孤岛”，将各部门的业务数据汇总到沧州市大数据中心，再通过适配器实现对数据的抽取、加载、格式转换等操作，最终实现信息资源在全市范围内的交换与共享。应支持 ESB、ETL、API 等多种形式的数据共享交换。包括与省共享交换平台对接、与市直部门信息系统对接、与一体化在线服务平台等对接。2.1.2.项目分阶段目标1.第一阶段目标2018年5月15日工作目标（1）完成平台基础功能建设，部署开放数据、云接口、云服务以及用户中心频道部署、测试与运行。（2）完成与省“互联网+政务服务”平台对接。2.第二阶段目标2
5、018年7月工作目标（1）完成数据共享交换平台功能完善、部署、测试与运行。（2）完成数据管理系统功能完善、部署、测试功能建设。3.第三阶段目标2018年10月工作目标（1）完成与省共享交换平台对接、与市直部门信息系统对接、与一体化在线服务平台等对接。（2）完成数据共享交换平台初验、试运行和终验。2.2项目建设内容2.2.1.项目总体设计2.2.1.1.系统定位共享交换平台依托政务网络，将沧州市各政务部门接入到平台，作为市政务信息资源共享交换的基础设施。平台通过采集沧州市各政务部门人口、法人、空间地理、宏观经济等基础信息，经过系统的加工、整合、交换后形成四大基础库，并通过相匹配的信息服务系统，实
6、现政务基础信息资源的共享服务。图表 1-系统定位图各部门数据接入单位与共享交换平台之间的关系如上图所示，各部门之间交换数据、主题业务应用共享数据都是统一通过共享交换平台实现数据的接入采集、交换共享，为各部门提供统一的共享数据整合、存储等管理。平台各系统建设不涉及原有专业系统的内部业务流程，而是要求政务部门组织各自下属单位依托政务网络和共享交换平台实时提供信息。专业应用系统提供数据接口和程序，周期性提供相关数据到前置服务器，前置服务器经过防火墙，单向连接到平台数据库中，实现数据共享。2.2.1.2.技术架构共享交换平台系统框架如下图所示：图表 2-系统框架图平台架构是分层设计，各系统之间松散耦合
7、，便于灵活扩展。从平台总体架构图上可以看出共享交换平台包括：1、基础设施层基础设施层主要包括沧州市已有的电子政务网络平台、服务器、存储及其他设备，是构成服务平台的重要基础设施，支撑服务平台各类应用系统的运行。2、信息资源层信息资源层构建于基础设施层之上，提供各种信息资源，主要包括人口库、法人库、空间地理库、宏观经济库、元数据库和其他信息库，共同构成平台的共享信息库。共享信息库是通过数据交换系统和直报子系统采集各部门的信息资源形成的，能够被多个部门使用的信息库。3、共享交换层共享交换层在整个框架中承担着承上启下的关键作用，处于应用层和信息资源层之间。共享交换层由数据交换系统、平台管理系统、数据处
8、理系统组成。数据交换系统实现对各业务部门信息资源的采集和交换。平台管理系统实现对平台用户、权限的统一管理，以及对平台各系统的统一监控、巡检、审计的管理。数据处理系统实现对待共享数据的格式转换、清洗、核实比对以及存储管理等。4、应用层应用层主要由人口基础信息服务系统、法人基础信息服务系统、地理空间信息服务系统、宏观经济服务系统、服务管理系统和数据融合引擎组成，实现共享信息资源的加工整合、存储、服务的统一管理。5、标准规范体系平台建设，要遵循统一的标准规范，是平台各系统得以顺利建设和正常运行的保障体系。6、安全保障体系确保平台安全运行的保障体系，信息安全贯穿于平台的各个层面，平台各系统的建设都必须
9、具有相应软硬件安全保障措施，以保障外网及其支撑的电子政务业务系统的安全可靠运行。2.2.1.3.平台部署共享交换平台的交换系统服务器、平台管理系统服务器、数据处理系统服务器及各基础库、基础信息服务系统部署在信息资源管理中心。各接入部门通过政务网和共享交换平台实现信息共享交换。接入可以采用前置机、数据库适配器、WebService、FTP、直报等多种方式。基础库数据库采用备份。2.2.2.数据交换设计2.2.2.1.概述数据交换系统包括一个交换中心和若干个交换节点，交换中心是交换管理中枢，具有管理交换节点和交换流程，实现信息资源的交换及监控管理能功能，交换节点具有信息资源的适配、转换和传输功能。
10、数据交换系统安装部署在参建单位和资源中心，其中，交换节点部署在参建单位的前置机，交换中心部署在资源中心的数据交换服务器。在前置机系统与中心系统之间、中心系统内部，实现双向、自动、实时、安全、可靠的数据交换。2.2.2.2.模块和功能设计主要实现应用单位前置交换信息库之间的信息处理和稳定可靠、不间断的信息传递和数据同步；以及对交换过程的流程配置、部署、执行和整个信息交换系统运行进行监控、管理，包括交换流程管理、交换监控和管理。根据配置整合及订阅流程过程中，针对各个流程、字段选择不同的组件处理方式，将需要处理和转换的字段根据指定格式进行动态转换；以及提供数据采集数据源，文件和接口类型数据源接入；以
11、及使用方通过订阅模式订阅关注的资源，当资源同步到交换中心后，再通过中心将资源发送到资源的订阅者。数据采集交换运转关系如下图所示：数据共享交换平台功能结构图2.2.3.项目软硬件系统建设内容2.2.3.1.数据共享交换平台需要从配置管理、监控管理、故障恢复、服务质量四个维度提供系统化IT 治理服务功能，提升系统的可管理性、健壮性，降低运维成本。该体系主要包括对1数据交换共享与数据服务开发两大方面。数据共享治理：提供配置管理中心和监控管理中心，全面管理各个交换节点数据交换配置，实时监控数据传输过程、网络状况和数据交换节点的运行状态；并捕获数据传输异常、网络异常、网关运行状态异常等，提供断点续传、数
12、据重传等多种故障智能恢复机制。在数据服务开放方面，提供高可用的数据开放服务。采用云服务总线，提供服务注册管理、服务粒度监控、服务请求监控、服务调度次数控制、服务调度权限控制、服务代理访问权限控制、服务及服务方法的流量控制等功能，并提供服务质量保证。2.2.3.1.1.数据交换标准定义根据对目标系统综合性应用内容的需求分析，定义出一系列的数据交换标准。这些标准将反映各个应用所需要的数据的结构。同时在标准中定义的还有数据“宿主”位置等信息，表示该块数据将向哪个业务系统请求获得。所有的数据交换标准定义信息，均以XML结构记录。可以通过数据交换标准定义管理工具完成如下功能：新建标准、修改或删除标准；维
13、护标准中的属性，包括数据结构、数据“宿主”位置、缺省过滤条件等；实现对用户身份识别与管理权限控制。22.2.3.1.2.数据交换流程定义图1-数据交换业务流程模型数据交换是依据数据交换流程实现的，针对不同的数据，需要设定和管理不同的数据流转过程。该模块的作用是提供图形化界面，供给数据交换平台的管理人员实现数据流转过程的定义。数据交换流转过程的描述也采用XML方式。具体功能如下：新建流程、修改或删除流程；维护流程的规则、数据加工过程和数据路由方式；实现对用户身份识别与管理权限控制。2.2.3.1.3.数据交换标准与内部数据结构的映射管理由于数据交换标准并不知道在具体业务系统内的相应数据的位置、属
14、性、名称等等信息，所以需要在业务系统内对数据交换标准中的对应项有一个映射关系的定义。这种定义包括数据项与数据项的对应或组合对应（公式化）、数据类型的匹配或转换关系、数据项位置描述记录等等。以XML结构保存定义的内容。具体功能包括：数据交换标准定义信息的导入；3维护数据交换标准与内部数据结构间的映射定义表，包括数据项与数据项的对应或组合对应（公式化）、数据类型的匹配或转换关系、数据项位置描述记录等；实现对管理员的身份识别与管理权限控制。2.2.3.1.4.数据交换流执行数据交换流的执行是通过应用集成中间件实现的。采用中间件产品可以保证数据交换的高效、安全和可靠地进行。其工作原理是：读入数据交换流
15、程，根据流程设定，启动数据交换过程。根据业务需要，同时可以并发若干个数据交换流程。当业务变化时，只需修改数据交换流程定义，就可以实现基于新业务的数据交换过程，因此系统具有很好的可扩展能力。具体功能如下：接收数据验证数据分析流程定义根据流程进行数据交互过程数据交互的事务管理日志管理和交换数据存储消息队列管理实现对管理员的身份识别与管理权限控制2.2.3.1.5.数据交换管理1、数据交换请求管理用户通过门户发起数据交换请求，该请求总体分为两大类：第一类指数据传输采集交换，即由接入单位的IT系统、大数据主题应用发起数据采集请求；该请求通过审核审批后，直接传输到数据采集抽取系统；第二类指数据界面展现请求，即用户通过门户查询基础数据、主题数据及目录数据等，通过API形式（含jdbc等）将数据传输到门户界面进行展示，该请求无须审核，根据用户的权限进行数据展示。4
