组建大数据平台方案设计

《组建大数据平台方案设计》由会员分享，可在线阅读，更多相关《组建大数据平台方案设计（20页珍藏版）》请在文档大全上搜索。

1、.wd组建数据平台建设方案目 录第一章 概述 41.1 建设背景 41.2 术语介绍 5第二章 必要性、可行性及效益分析 62.1 必要性分析 62.2 可行性分析 62.3 效益分析 6第三章 建设目标、思路及原那么 73.1 建设目标 7.wd3.2 建设思路 73.3 建设原那么 7第四章 关键问题解析 84.1 数据交换平台能解决什么问题 84.2 数据交换平台与业务应用的关系 84.3 数据交换平台无法解决实时性的业务需求 8第五章 总体设计 95.1 系统总体构造 95.2 系统逻辑构造 95.3 系统物理构造 10第六章 数据交换平台功能设计 116.1 交换中心管理系统 116

2、.2 接入管理系统 126.3 运行监控平台 146.4 系统管理 15第七章 交换平台安全设计 167.1 威胁与风险分析 167.2 安全需求分析 167.3 身份认证和授权管理设计 177.4 数字证书认证 187.5 数据交换过程的安全保障 18第八章 数据交换中间件选型 198.1 数据交换中间件技术要求 19.wd第一章 概述1.1 建设背景户用表集中抄表系统以下简称“抄表系统是利用当代微机技术、数字通讯技术与户用仪表计量技术完满结合，集计量、数据采集、处理于一体，将城市居民用水、电、气、热信息加以综合处理的系统，使供水、供电、供气、供热公司及物业部门从 根本上减少人工上门抄表的繁

3、杂劳动强度。准确而便捷的收费系统，既可节省人工又可减少各部门与客户之间的纠纷，它不但能提高管理部门的工作效率，也适应现代用户对缴费的新需求。随着科技的进步和人们对信息化要求的提高，智能住宅将逐渐在全国范围内得到推广。智能化居住区的主要功能应当表达在快捷、高效、安全和方便上，智能楼宇控制系统中的智能抄表系统是智能建筑优点的充分表达。 远程数据采集及无线传输系统是基于人工数据收集思想改变和开展的一种表达，同时它也是一种新型现场数据收集的应用工程系统。在未来信息时代中，各种现场数据收集将以高效率、高可靠性和方便性H2F的要求为主导形式出现。在这种环境要求下，系统既要各个前端控制器具备分散的独立工作及

4、独立应付突发事件的能力，同时又要求它们通过抄表器或远程传输通信与计费中心数据库远程收发管理器实现彼此联系，并能实现自身协调、执行多种系统数据收集和监管功能等。户用表集中抄表系统是一个综合性、多学科技术合成的一种技术设备。在技术层次上它涉及计算机技术应用、通信工程、微电子技术、热力学等。由于冬季供热问题与我国北方地区广阔人民群众的生活、工作密切相关，产品社会需求量之大是可想而知的，同时它也是创立和谐社会的一个重要根基条件。户用表集中抄表系统在国内还是一项新兴的产业技术，其技术层面的更新必将摧生更多新兴社会服务行业的开展。另外户用表集中抄表系统的启动，还可以带动一批相关产业链的开展、增加国家整体就

5、业时机，比方在原材料业、电子器件业、计算机业和加工业等。正因为热能无线自动抄表系统对技术先进性的要求，这也向相关产业的技术更新提出相应要求，从而极大地促进了相关产业的技术进步。.wd1.2 术语介绍1交换前置机企业根基信息交换平台连接的交换前置服务器。2信息交换桥接业务应用信息库与前置交换信息库之间信息安全交换的连接通道。3企业根基信息库存储、管理企业根基信息的数据库。4前置交换信息库企业根基信息交换平台之间共享信息双向交换的中转数据库。5业务数据库业务数据库是指各个保存业务数据的数据库，运行在内网中。6应用系统应用系统是指本工程开发的部署在各节点前置机上的桥接系统、中心数据管理系统、数据比对

6、和整合系统等应用的总称。7中心数据管理系统中心数据管理系统是指本工程开发的实现交换数据查询和管理等功能的应用系统。8数据比对整合系统数据比对系统是用来加工整理各单位发送的企业根基信息的系统。按照一定的比对规那么和条件，数据比对系统对各部门的信息进展比照，形成完整、统一的 XX 市根基信息数据库。.wd第二章 必要性、可行性及效益分析2.1 必要性分析在信息化建设过程中，各职能部门通常采用不同的技术和体系构造来构建自身的信息系统，虽然为各自业务开展起到了很好的促进作用，但各信息系统数据独立存储形成一个个信息孤岛，使得各业务系统之间很难实现数据共享，严重制约着政府各职能部门、业务系统之间的协作及工

7、作效率的提升。若何在不改变原有系统的根基上实现跨平台数据访问也成为信息化建设道路上必须思考的一个问题。2.2 可行性分析从当前现状来看，在技术上，当前市场已经涌现很多实现数据交换的平台产品，形成先进的信息交换和共享服务技术体系，能为数据交换平台的建设提供很好的技术架构。2.3 效益分析通过数据交换平台的建设可以打破当前的“信息孤岛现象，建设不同业务系统的数据共享平台，形成政府综合信息库。同时，通过统一的数据交换平台实现各业务系统之间数据交换的单一安全通道，在实现信息共享的根基上也确保了各自数据信息的安全。从未来开展的角度看，当前建设数据交换平台可以为以后新的业务系统的建设提供标准，一旦标准形成

8、，审批、监察等业务都可以直接利用共享的根基信息库数据，从而减少了数据采集的资本投入，也提高了监管工作效率和公共服务水平，取得了良好的经济效益和社会效益。.wd第三章 建设目标、思路及原那么3.1 建设目标核心目标是建设数据交换平台，作为今后数据交换的支撑，将来在平台上不断的扩展应用。建设目标搭建数据交换中心，实现集抄业务系统之间的数据交换，为内部办公提供数据交换采集综合信息库；建设能源管理的标准和标准，为以后信息系统的建设提供标准指导。通过数据交换建设能源监测信息库，实现数据共享，为网上行政审批提供决策数据；建设业务数据的集中采集平台，实现了行政审批电子监察数据的在线、实时采集。3.2 建设思

9、路要实现各数据共享，必须先建设统一的数据交换平台，通过交换平台实现各异构数据库之间的数据集成，实现原有各业务系统在数据级集成，保证异构数据库之间的数据交换与共享。在建设的数据交换平台根基上，针对各业务系统的技术和体系构造，配置各业务系统的数据交换映射关系，形成各业务系统的应用。当平台建设好以后，业务应用可以任意扩展，添加新的共享数据。3.3 建设原那么数据信息交换平台建设必须遵守以下原那么：不影响现有或其它相关信息系统的使用和信息安全；技术要成熟、可靠，在节约成本投入的前提下确保平台建设质量；建设一个坚实的系统应用平台，便于系统的管理和维护，技术易于更新，网络及业务规模可以逐步扩展。统一规划，

10、分步实施。.wd第四章 关键问题解析4.1 数据交换平台能解决什么问题对数据交换平台的理解有一种误区，就是有了数据交换平台不同系统之间的信息交换就可以随便实现了，而不需要任何编码；实际上这是不对的。数据交换平台的应用主要是在异构系统之间的信息交换，但在信息交换过程中交换平台本身要解决的问题只是一小局部，它本质是一个中间件，面向客户时屏蔽了很多系统底层的信息，比方网络的协议、数据的传输安全等，据交换平台本身不具有业务本身的处理功能，比方无法自动从某个业务系统中直接获取数据信息，只能通过编程把数据从业务系统中提取出来，再送到数据交换平台。利用数据交换平台使开发过程中不需要关注数据各式转换、消息的传

11、输、数据路由等，只需要关注与业务本身的数据处理局部。4.2 数据交换平台与业务应用的关系在能源管理系统建设过程中，有些应用系统必须充分利用数据交换平台，比方资源目录管理系统、人口根基信息库、企业根基信息库的关系、决策支持系统等。这些业务系统从不同单位的不同系统中获取数据，数据交换平台为信息交换和传递提供一个安全可靠的通道，不同的应用系统可以公用一样的数据交换平台，因为数据交换平台好比是高速公路，可以有不同的车道和车辆，而业务系统本身有自身的业务逻辑。所以从功能和应用层次的角度交换平台业务应用。4.3 数据交换平台无法解决实时性的业务需求假设有 A、B 两套完全独立的系统，中间通过数据交换平台连