数据共享交换平台实施方案.docx
- 文档编号:3297
- 上传时间:2023-04-28
- 格式:DOCX
- 页数:11
- 大小:247.65KB
数据共享交换平台实施方案.docx
《数据共享交换平台实施方案.docx》由会员分享,可在线阅读,更多相关《数据共享交换平台实施方案.docx(11页珍藏版)》请在冰点文库上搜索。
数据共享交换平台实施方案
数据共享交换平台实施方案
(V1.0)
项目编号:
项目名称:
编写人:
李斌编写日期:
2018.05.10
审核人:
审核日期:
2018.05.15
批准人:
批准日期:
文档修订记录
目录
第1章.编写说明(5)
1.1编写目的(5)
1.2术语定义(5)
第2章.项目实施总述(6)
2.1项目建设目标与任务(6)
2.1.1.项目建设总体目标(6)
2.1.2.项目分阶段目标(6)
2.2项目建设内容(7)
2.2.1.项目总体设计(7)
2.2.1.1.系统定位(7)
2.2.1.2.技术架构(8)
2.2.1.3.平台部署(10)
2.2.2.数据交换设计(10)
2.2.2.1.概述(10)
2.2.2.2.模块和功能设计
(1)
2.2.3.项目软硬件系统建设内容
(1)
2.2.3.1.数据共享交换
(1)
2.2.3.2.接口管理(5)
2.2.3.3.交换前置(7)
2.2.3.4.交换桥接(8)
2.2.3.5.接口重构API(8)
2.2.4.项目实施工作内容(8)
2.2.5.项目实施进度规划(10)
2.2.6.实施风险与关键点(11)
第3章.里程碑计划(14)
第4章.2018年详细工作计划(16)
文档格式约定:
:
一级标题:
左对齐黑体字二号字加粗
二级标题:
左对齐黑体字小二号字加粗
三级标题:
左对齐黑体字三号字加粗
四级标题:
左对齐黑体字四号字加粗
正文:
正文首行缩进2字符1.5倍行距宋体小四号字图片:
居中
表格:
居中表格文字左对齐宋字五号字
第1章.编写说明
1.1编写目的
本方案不仅从实施目标、任务、执行计划和组织分工等方面对沧州大数据中心项目数据中心项目(以下简称“本项目”)的实施工作进行了宏观定义,并对具体的基础设施建设、系统设计方案、标准规范及培训实施方案、系统实施、实施与保障等专项工作也做较为详细的定义,以指导后续的实施工作。
1.2术语定义
1.共建单位:
配合沧州大数据中心工程建设的政府机构、公共事业部门和企业。
2.承建单位:
九次方大数据信息集团有限公司。
第2章.项目实施总述
2.1项目建设目标与任务
2.1.1.项目建设总体目标
利用交换平台实现异构系统的数据采集、信息传输,通过原系统提供接口或市统一开发接口等多种方式打通“数据孤岛”,将各部门的业务数据汇总到沧州市大数据中心,再通过适配器实现对数据的抽取、加载、格式转换等操作,最终实现信息资源在全市范围内的交换与共享。
应支持ESB、ETL、API等多种形式的数据共享交换。
包括与省共享交换平台对接、与市直部门信息系统对接、与一体化在线服务平台等对接。
2.1.2.项目分阶段目标
1.第一阶段目标
2018年5月15日工作目标
(1)完成平台基础功能建设,部署开放数据、云接口、云服务以及用户中心频道部署、测试与运行。
(2)完成与省“互联网+政务服务”平台对接。
2.第二阶段目标
2018年7月工作目标
(1)完成数据共享交换平台功能完善、部署、测试与运行。
(2)完成数据管理系统功能完善、部署、测试功能建设。
3.第三阶段目标
2018年10月工作目标
(1)完成与省共享交换平台对接、与市直部门信息系统对接、与一体化在线服务平台等对接。
(2)完成数据共享交换平台初验、试运行和终验。
2.2项目建设内容
2.2.1.项目总体设计
2.2.1.1.系统定位
共享交换平台依托政务网络,将沧州市各政务部门接入到平台,作为市政务信息资源共享交换的基础设施。
平台通过采集沧州市各政务部门人口、法人、空间地理、宏观经济等基础信息,经过系统的加工、整合、交换后形成四大基础库,并通过相匹配的信息服务系统,实现政务基础信息资源的共享服务。
图表1-系统定位图
各部门数据接入单位与共享交换平台之间的关系如上图所示,各部门之间交换数据、主题业务应用共享数据都是统一通过共享交换平台实现数据的接入采集、交换共享,为各部门提供统一的共享数据整合、存储等管理。
平台各系统建设不涉及原有专业系统的内部业务流程,而是要求政务部门组织各自下属单位依托政务网络和共享交换平台实时提供信息。
专业应用系统提供数据接口和程序,周期性提供相关数据到前置服务器,前置服务器经过防火墙,单向连接到平台数据库中,实现数据共享。
2.2.1.2.技术架构
共享交换平台系统框架如下图所示:
图表2-系统框架图
平台架构是分层设计,各系统之间松散耦合,便于灵活扩展。
从平台总体架构图上可以看出共享交换平台包括:
1、基础设施层
基础设施层主要包括沧州市已有的电子政务网络平台、服务器、存储及其他设备,是构成服务平台的重要基础设施,支撑服务平台各类应用系统的运行。
2、信息资源层
信息资源层构建于基础设施层之上,提供各种信息资源,主要包括人口库、法人库、空间地理库、宏观经济库、元数据库和其他信息库,共同构成平台的共享信息库。
共享
信息库是通过数据交换系统和直报子系统采集各部门的信息资源形成的,能够被多个部门使用的信息库。
3、共享交换层
共享交换层在整个框架中承担着承上启下的关键作用,处于应用层和信息资源层之间。
共享交换层由数据交换系统、平台管理系统、数据处理系统组成。
数据交换系统实现对各业务部门信息资源的采集和交换。
平台管理系统实现对平台用户、权限的统一管理,以及对平台各系统的统一监控、巡检、审计的管理。
数据处理系统实现对待共享数据的格式转换、清洗、核实比对以及存储管理等。
4、应用层
应用层主要由人口基础信息服务系统、法人基础信息服务系统、地理空间信息服务系统、宏观经济服务系统、服务管理系统和数据融合引擎组成,实现共享信息资源的加工整合、存储、服务的统一管理。
5、标准规范体系
平台建设,要遵循统一的标准规范,是平台各系统得以顺利建设和正常运行的保障体系。
6、安全保障体系
确保平台安全运行的保障体系,信息安全贯穿于平台的各个层面,平台各系统的建设都必须具有相应软硬件安全保障措施,以保障外网及其支撑的电子政务业务系统的安全可靠运行。
2.2.1.
3.平台部署
共享交换平台的交换系统服务器、平台管理系统服务器、数据处理系统服务器及各基础库、基础信息服务系统部署在信息资源管理中心。
各接入部门通过政务网和共享交换平台实现信息共享交换。
接入可以采用前置机、数据库适配器、WebService、FTP、直报等多种方式。
基础库数据库采用备份。
2.2.2.数据交换设计
2.2.2.1.概述
数据交换系统包括一个交换中心和若干个交换节点,交换中心是交换管理中枢,具有管理交换节点和交换流程,实现信息资源的交换及监控管理能功能,交换节点具有信息资源的适配、转换和传输功能。
数据交换系统安装部署在参建单位和资源中心,其中,交换节点部署在参建
单位的前置机,交换中心部署在资源中心的数据交换服务器。
在前置机系统与中心系统之间、中心系统内部,实现双向、自动、实时、安全、可靠的数据交换。
2.2.2.2.模块和功能设计
主要实现应用单位前置交换信息库之间的信息处理和稳定可靠、不间断的信息传递和数据同步;以及对交换过程的流程配置、部署、执行和整个信息交换系统运行进行监控、管理,包括交换流程管理、交换监控和管理。
根据配置整合及订阅流程过程中,针对各个流程、字段选择不同的组件处理方式,将需要处理和转换的字段根据指定格式进行动态转换;以及提供数据采集数据源,文件和接口类型数据源接入;以及使用方通过订阅模式订阅关注的资源,当资源同步到交换中心后,再通过中心将资源发送到资源的订阅者。
数据采集交换运转关系如下图所示:
数据共享交换平台功能结构图
2.2.
3.项目软硬件系统建设内容
2.2.
3.1.数据共享交换
平台需要从配置管理、监控管理、故障恢复、服务质量四个维度提供系统化IT治理服务功能,提升系统的可管理性、健壮性,降低运维成本。
该体系主要包括对
1
数据交换共享与数据服务开发两大方面。
数据共享治理:
提供配置管理中心和监控管理中心,全面管理各个交换节点数据交换配置,实时监控数据传输过程、网络状况和数据交换节点的运行状态;并捕获数据传输异常、网络异常、网关运行状态异常等,提供断点续传、数据重传等多种故障智能恢复机制。
在数据服务开放方面,提供高可用的数据开放服务。
采用云服务总线,提供服务注册管理、服务粒度监控、服务请求监控、服务调度次数控制、服务调度权限控制、服务代理访问权限控制、服务及服务方法的流量控制等功能,并提供服务质量保证。
2.2.
3.1.1.数据交换标准定义
根据对目标系统综合性应用内容的需求分析,定义出一系列的数据交换标准。
这些标准将反映各个应用所需要的数据的结构。
同时在标准中定义的还有数据“宿主”位置等信息,表示该块数据将向哪个业务系统请求获得。
所有的数据交换标准定义信息,均以XML结构记录。
可以通过数据交换标准定义管理工具完成如下功能:
新建标准、修改或删除标准;
维护标准中的属性,包括数据结构、数据“宿主”位置、缺省过滤条件等;
实现对用户身份识别与管理权限控制。
2
2.2.
3.1.2.数据交换流程定义
图1-数据交换业务流程模型
数据交换是依据数据交换流程实现的,针对不同的数据,需要设定和管理不同的数据流转过程。
该模块的作用是提供图形化界面,供给数据交换平台的管理人员实现数据流转过程的定义。
数据交换流转过程的描述也采用XML方式。
具体功能如下:
新建流程、修改或删除流程;
维护流程的规则、数据加工过程和数据路由方式;
实现对用户身份识别与管理权限控制。
2.2.
3.1.3.数据交换标准与内部数据结构的映射管理
由于数据交换标准并不知道在具体业务系统内的相应数据的位置、属性、名称等等信息,所以需要在业务系统内对数据交换标准中的对应项有一个映射关系的定义。
这种定义包括数据项与数据项的对应或组合对应(公式化)、数据类型的匹配或转换关系、数据项位置描述记录等等。
以XML结构保存定义的内容。
具体功能包括:
数据交换标准定义信息的导入;
3
维护数据交换标准与内部数据结构间的映射定义表,包括数据项与数据项
的对应或组合对应(公式化)、数据类型的匹配或转换关系、数据项位置描述记
录等;
实现对管理员的身份识别与管理权限控制。
2.2.
3.1.
4.数据交换流执行
数据交换流的执行是通过应用集成中间件实现的。
采用中间件产品可以保
证数据交换的高效、安全和可靠地进行。
其工作原理是:
读入数据交换流程,
根据流程设定,启动数据交换过程。
根据业务需要,同时可以并发若干个数据
交换流程。
当业务变化时,只需修改数据交换流程定义,就可以实现基于新业
务的数据交换过程,因此系统具有很好的可扩展能力。
具体功能如下:
接收数据
验证数据
分析流程定义
根据流程进行数据交互过程
数据交互的事务管理
日志管理和交换数据存储
消息队列管理
实现对管理员的身份识别与管理权限控制
2.2.
3.1.5.数据交换管理
1、数据交换请求管理
用户通过门户发起数据交换请求,该请求总体分为两大类:
第一类指数据传输采集交换,即由接入单位的IT系统、大数据主题应用发起数据采集请求;该请求通过审核审批后,直接传输到数据采集抽取系统;
第二类指数据界面展现请求,即用户通过门户查询基础数据、主题数据及目录数据等,通过API形式(含jdbc等)将数据传输到门户界面进行展示,该请求无
须审核,根据用户的权限进行数据展示。
4
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 数据 共享 交换 平台 实施方案