数据交换共享整合系统平台建设方案.pdf

该【数据交换共享整合系统平台建设方案 】是由【青山代下】上传分享，文档一共【24】页，该文档可以免费在线阅读，需要了解更多关于【数据交换共享整合系统平台建设方案 】的内容，可以使用淘豆网的站内搜索功能，选择自己适合的文档，以下文字是截取该文章内的部分文字，如需要获得完整电子版，请下载此文档到您的设备，方便您编辑和打印。:..本文讨论了整合协同平台的设计,该平台的主要功能是提取共享数据并对多来源渠道的数据进行融合处理。整合协同平台通过数据字典对实时数据和历史数据进行组织,以保证数据间关系的正确性、可理解性并避免数据冗余。此外,该平台还维护基础信息、动态业务数据以及系统管理配置参数,支撑系统的网络构架、信息安全、网络管理、流程管理、数据库维护和备份等运维能力。整合协同平台分为两个部分。第一部分是基础数据和共享数据的交换服务和路由流程管理,包括静态交换数据、动态交换数据、图形数据及表格、统计资料等属性数据。第二部分是各子系统之间的接口实现,根据事先制订好的规范、标准,实现各子系统之间的数据共享和传输操作。在接入中心平台时,应按系统集成要求设计系统结构,各类数据接口遵循系统集成规范。:..范的、高效的、安全的数据交换机制。该平台由部署在数据中心和各业务部门的数据交换服务器、数据接口系统共同组成,解决数据采集、更新、汇总、分发、一致性等数据交换问题,解决按需查询、公共数据存取控制等问题。各业务子系统都要统一使用整合协同平台进行数据交换。数据中心统一管理和制定数据交换标准。各业务部门通过数据级整合或者应用级整合通过整合协同平台向数据中心提供数据,也通过整合协同平台访问共享数据。整合协同平台的基本功能包括共享数据库的数据采集、更新、维护,业务资料库、公共服务数据库的数据采集,提供安全可靠的共享数据服务,业务部门之间的业务数据交换,结合工作流的协调数据服务,以及管理、控制、配置、传输等功能。该平台还提供了管理、安全接口,运行管理,部署管理,服务管理,系统日志,数据解析,数据转换,数据模板,数据路由,会话策略,会话模式,会话控制,传输管理,数据压缩,加解密,传输故障检测,协议管理,传输控制,连接共享,数据需方,数据转换,接口适配,数据层接口,共享交换等功能。:..稳定性和可靠性。平台必须支持故障转移、负载均衡、数据备份等功能,以保证系统在任何情况下都能正常运行。同时,平台还应该具备监控和报警功能,能够及时发现和解决问题,保证系统的稳定性和可靠性。,包含了大量的敏感信息。因此,数据库的安全性是至关重要的。数据库设计必须考虑到数据的保密性、完整性和可用性,采取相应的安全措施,如权限管理、加密、备份等,以保证数据的安全性。:..据库设计必须考虑到数据的访问频率、数据量、数据结构等因素,采取相应的优化措施,如索引优化、存储优化、查询优化等,以提高数据库的性能。,数据库的容量和性能也需要不断扩展。因此,数据库设计必须考虑到数据库的可扩展性,采取相应的扩展措施,如分布式架构、集群等,以满足企业不断变化的需求。。数据库管理员必须定期备份数据库,以保证数据的安全性和可用性。同时,在数据库发生故障时,管理员必须能够及时恢复数据库,以避免数据的丢失和损坏。:..。管理员必须对数据库进行定期的性能测试和优化,以提高数据库的性能和响应速度。同时,管理员还需要对数据库进行监控和调整,及时发现和解决问题,保证数据库的稳定性和可靠性。。管理员必须对数据库进行权限管理、加密、审计等安全措施,以保证数据的安全性和保密性。同时,管理员还需要对数据库进行***和修复,及时发现和解决安全问题,保证数据库的安全性和可靠性。总之,数据库设计和管理是企业信息化建设的重要组成部分,必须注重安全性、性能和可扩展性,并且采取相应的措施来保证数据库的稳定性和可靠性。:..多。为了提高整体计算能力,整合协同平台需要支持负载平衡,在分布式的体系结构上可以添加主机。这样可以实现面向服务的适应性负载平衡。XMA整合协同平台具有日志监控功能,可以通过数据服务日志记录和跟踪数据交换的细节。日志可以用于监控系统的运行状态,也可以用于审计、故障处理、系统开发调试和交易跟踪。用户可以通过监控管理、权限管理、运行日志查看和性能统计来管理数据服务。XMA整合协同平台支持各个分支数据源将数据汇总到数据中心。通过XMA整合协同平台将各业务部门的公共数据采集回来,汇集到数据中心的缓存数据库。经过数据管理系统的比对、校验和转换,可以得到一致的数据。数据分发是从数据中心的角度,主动向各数据使用方提供数据的过程。通过公开数据服务,依照数据使用权限的规则,从数据中心把数据分发到各个数据使用部门,实现数据共享和信息联动。XMA整合协同平台提供实时按需的数据存取访问:..作为标准数据格式,对各种技术平台提供访问支持。数据交换服务可以将某个数据库的数据转换成标准XML数据集。通过数据转换模块,可以实现对各种异构数据转换到统一标准规范、具有一致性和完整性的公共数据。用户可以自己配置和管理相关的服务,如数据提取服务、数据发送服务、数据接收服务和数据存储服务等。XMA整合协同平台是一个开放的系统,提供可扩充的接口和二次开发接口,支持用户基于这些接口来定义自己的特色服务。对数据服务进行监控管理,用户权限管理,运行日志查看和性能统计,可以记录和跟踪数据交换的细节。对数据交换节点进行管理,提供安全策略指南和服务器安全管理配置。XMA整合协同平台可以支持不同方式的机构和系统间的数据交换与协同,主要包括基于WebServices服务的方式用于外部机构与中心平台间的实时交换。:..种方式。前者主要用于内部系统间实时或非实时交换,而后者则用于外部或内部系统间非实时批量交换。另外,还有一种基于WebServices服务的方式,主要用于外部机构部门与数据中心间实时的数据交换和业务协同应用。这种方式通过WebServices协议如SOAP、XMLRPC等协议的无缝集成,支持应用系统的接口,提供应用系统整合适配器,并提供快速整合WebServices应用的工具和接口API。在基于数据库接口的方式中,交换的双方通过定义发送和接收任务来进行数据库接口的交换。根据交换的数据格式的不同,这种数据交换方式又可以细分为两种类型:一种是数据落地的数据共享,一种是数据不落地的数据交换。同时,基于标准XML元数据和数据字典的数据交换由XMA整合协同平台自动从前置机交换数据库中提取数据,并按照定义好的模板打包生成标准的XML数据包,由定制好的发送路由发送给接收方。接收方接收到XML数据包后自动进行解包处理,并将数据存储到接收方的前置机交换数据库中。:..据交换方式。交换的双方通过定义发送和接收任务来进行数据文件的交换。根据交换的数据文件的不同,这种数据交换方式又可以细分为两种类型:一种是基于标准文件的数据交换,一种是基于其他文件格式的数据交换。XMA整合协同平台可以自动从前置机交换数据库中提取数据,并按照预定义的模板打包生成标准的XML文件,然后通过定制好的发送任务发送给接收方。接收方收到XML文件后会自动进行解包处理,并将数据存储到接收方的前置机交换数据库中。如果是基于其他文件格式的数据交换,业务系统会将需要交换的数据文件放置到前置机上的规定路径下,通过XMA整合协同平台发送到目的地,然后由接收部门自行处理。第二章平台接口设计的接口规范内容涉及整合协同平台和各接入部门之间的系统互联所涉及的数据交换接口。系统之间的信息传输和交换通过计算机系统互联网络来完成。数据接口方面,整合协同平台和接入部门信息系统之间通信的通用接口模型如图所示。运输层以下层次的通信协议选用合适的标准协议,运输层和网络层建议选用统一的TCP/IP协:..际通信条件情况灵活选用,如、,为了满足对信息的各种需求,维护一个用于数据共享的标准数据注册中心,采用标准化数据的方式向各接入系统及各应用系统提供共享的信息。各接入系统在整合协同平台处对应维护一张数据字典,用于完成非标数据和标准数据的翻译,从而向共享的标准数据库提供标准化的数据信息。对于单一功能领域的特殊数据信息,系统提供在各子系统之间直接进行交换的途径,满足特定功能的应用需求。系统需要有一个专门的维护和管理机构,分别对系统的数据字典、标准共享数据库进行增添、更新等维护管理,以满足新的接入系统接入和系统发展的需求。在数据传输中,由于系统数据的异构特性,在数据发送接口和接收接口需要对数据格式按照数据字典的要求进行转换,统一于标准的数据格式满足应用的要求。接口扩展方面,数据接口的分层次、模块化、规范化设计,将有利于系统的扩展性,对扩展性设计主要体现在以下几个方面:应用层协议的分层设计,各层功能明确,层之间可通过规范化的接口进行调用和传:..品化软件来实现通信子层;某一层协议的功能扩展或变化时,将不影响另一层协议的功能。本系统采用基于XML格式的数据接口方案设计,符合数据登记标准,具有良好的灵活性和系统扩展性,方便接入新系统和扩展信息内容,满足系统发展和新需求的要求。同时,数据传输协议基于主流的成熟协议,能够适应系统扩展的需求。在资源目录管理方面,数据中心通过XMA整合协同平台以数据服务的形式采集各业务部门的数据,并保存到公共数据缓存库。随后,通过公共数据管理对数据进行比对、冲突检查、数据审核和数据转换,当数据达到一致性和完整性要求后,发布到公共数据发布库,以数据服务的形式提供给数据使用方。该系统不仅要满足基于现状条件下的信息资源整合利用和规范管理,还要适应未来对信息资源深度开发和多媒体信息资源库扩展的要求。资源目录管理的结构以主题的方式组织数据资源,提供元数据管理、数据供需关系管理和数据标准规范管理。与XMA整合协同平台结合,提供数据转换、整理、发布等功能。主题:..台、数据采集、更新、维护、使用机制和数据标准规范等是数据机构的重要组成部分。数据提供者和数据使用者是数据共享平台的主要参与方。资源目录管理的功能包括元数据管理、服务注册与接口发布、数据转换、数据整理和主题管理。元数据目录集中管理数据元数据的发布与维护,系统授权给分系统管理员完成对本部门元数据的维护工作。服务注册与接口发布包括前置机注册、数据源注册、适配器注册、服务注册、服务删除、服务订阅、服务审核和服务启动。数据转换建立业务部门数据与标准规范数据的转换映射关系和转换规则,将业务部门的数据转换为符合标准规范的数据。数据整理通过XMA整合协同平台从区级数据中心及各业务部门采集数据并放入数据中心的缓存数据库中,然后通过数据管理系统对数据进行比对、清洗,检查数据冲突,对数据进行审核校验,确保数据一致性和完整性。主题管理以主题为单位实现数据采集、数据交换、数据共享、数据比对以及数据发布,提供主题管理功能。:..情况,监控系统性能指标、数据质量指标和服务质量指标,及时发现问题并进行处理。同时,还需要提供日志管理、异常处理和安全管理等功能,确保系统的稳定运行和数据的安全性。为了保障数据中心系统和信息资源的高可靠性、高可控性和高效性,需要一套功能完整的运行管理与监控维护系统。该系统主要面向数据中心的系统管理人员,用于保证数据中心的安全可靠和高效运行。其中,其功能主要包括面向安全性的用户管理、权限管理和密码管理;面向可用性的节点管理和状态监控;面向可靠性的数据备份和恢复;面向性能优化的性能监控;面向运行管理机制的信息管理等。此外,该系统还提供了满足监测统计要求的功能,提供对检测日志内容的简单统计分析表等。运行管理与监控系统的管理对象包括XMA整合协同平台、数据库服务器、主机服务器、网络设备、备份和存储设备、数据交换节点设备和系统等。在运行监控管理模型中,需要涉及不同领域的多种协议和接口,比如SNMP用于网络管理,桌面管理接口(DMI)用于桌面系统管理。基于Web的企业管理(WBEM)是这个行业的一个倡议,能够收集、管理并合并多种:..有两个关键的组成部分,即公共信息模型(CIM)规范和CIM架构,它们分别定义了WBEM实施的要求和数据存储库的内容。运行监控管理平台的体系结构包括管理应用程序管理控制台、管理单元、CIM对象管理器、CIM对象库、管理对象提供者、WDM内核对象、SNMP对象、DMI对象和其他对象等。而运行监控管理结构则通过数据整合协同平台的资源管理体系和智能代理共同来完成。运行管理与监控系统的系统结构包括管理监控系统、CIM信息模型、管理层、CIM对象管理、JMX管理器、监控服务、代理层、智能代理、WBEM提供者、JMXMBean服务、SNMP提供者、TMN提供者和装配层等。资源管理体系和智能代理的实现符合WBEM标准和JMX规范,JMX规范包含若干现有标准管理协议的JavaAPI,JMX通过广泛应用的两个管理协议:SNMP管理者API和CIM/WBEM管理者与提供者API与WBEM达成无缝的集成。:..能代理、实现分布式管理中间件和管理者的方式,同时也可以将这些解决方案平滑地集成到现有管理系统中。此外,JMX规范还提供了多种现有标准管理技术的JavaAPI。JMX侧重于管理软件架构和数据接口系统,并部署到各个部门的前置机。而WBEM则侧重于管理网络设备,两者各有分工,但又互相合作。第三章是关于安全认证管理的。数据中心系统结合安全认证平台的应用主要包括数据中心应用单点登录认证和数据共享交换安全认证。在项目中,根据需求,将安全认证平台应用到每个功能和模块。在技术上,安全认证采用了大量先进成熟的安全技术,支持的功能和相应的技术特性如下:访问权限控制:对业务流程中的操作、对数据和资源的访问,都能进行权限控制;用户身份验证:提供对用户的身份验证,支持单点注册;:..标准的数字认证体系,通过CA认证中心的证书进行数字认证、数字签名等保障措施,来认证用户、实体的身份,保证消息的完整性和交易的不可否认性,确保交易合法有效;安全通信通道:通过SSL等标准的安全通道协议,提供通信层的安全,保障通信双方的身份正确性,通道和会话的私密性,消息的完整性和交易的不可否认性。安全认证还具备以下技术特性:身份认证(n)强身份认证单点登录(SingleSign-on)授权访问控制(n)可定制的访问控制列表(ACL)权限管理(Group、User、n、n)数据加密插件式的数据加密模块的部署数字认证基于PKI的CA认证、数字证书、数字签名:..、HTTPS等集成其他安全服务兼容LDAP、XXX等安全服务数据交换加密认证的过程如下:通过接口API之间的数据流通道接收请求方发送的XML请求数据;对请求方进行身份认证和权限控制;写请求日志,存储请求XML数据文件;解析请求XML数据;验证数字签名;对XML数据中的加密数据进行解密;根据解析后的明文请求数据进行对应的业务处理;对处理后的响应数据按需要进行加密;进行数字签名;将数据封装成XML数据文件;通过数据流通道发送XML数据。写响应日志并存储响应XML数据文件是系统的一项重要功能。在涉及到安全体系的过程中,第2、第5、第6、第8:..步是必不可少的。除了登陆认证之外,数据的加解密过程也是安全体系的重要步骤。系统技术实现的优势特性有以下几点。首先,平台提供了数据层、应用层等多层次的数据交换,并支持多种交换方式,如基于文件、数据库和应用层的交换。因此,该系统已经在多个政府、银行和电信企业中得到应用,具有高效可靠的可扩展平台特性。其次,该系统设计了统一的管理总线和安全总线接口,并采用了即插即用”的管理模型,具有即插即用的特性,能够快速、动态地部署和集成适配器。因此,该系统具备即插即用的柔性架构特性。第三,系统具有高扩展低维护的特性,各部分之间松散耦合,新增模块只需在一处配置,可以被多个子系统共享。这使得系统具有高扩展低维护的特性。:..符合信息化建设中的安全要求,并能与认证中心系统无缝结合。因此,该系统具有安全可靠的特性。第五,系统具有灵活可靠的数据传输特性,支持即插即用协议栈、可靠传输、存储转发、群组消息协议等多种协议。这使得系统具有灵活可靠的数据传输特性。最后,通过对应用支撑体系的实现,该系统不仅可以支持数据中心的数据整合、共享交换,还可以为其他部门或综合应用提供支撑,如公共服务系统、决策支持系统等,真正做到成为企业信息系统的枢纽。在第四章中,系统的能力及性能指标将会被详细介绍。TheXXXPlatformserverisacriticalsystemthatXXX。Theplexstructure。largebusinessvolume。highthroughput。andrequiresgoodsecurity。stability。availability。scalability。XXX.:..EAI。ETL。andXML。ItisbuiltontopofJ2EE'sdistributedarchitecture。withXMLasthedataexchangemethod。supportingwebservicesandSOAPprotocols。ItusesJMXXXXarearchitecturemanagement。makingitthecoreofmanagementmoduletechnology。XXXassurance。ItalsoprovidesaXXXhighavailability。reliability。andscalability。XXX。plexityofresourcenandn。XXX。andasaplatformfordatacentern。。adoptsanadvanced。mainstream。reliable。secure。open。practical。andcost-effectivesystemarchitecture。:Projecttechnicalindicators::..EnterpriseServiceBus(ESB)technologyadherestostandardns。followstheJ2EEstandardarchitecture。:Webservicemethods。supportingmainstreamprotocolinterfacessuchasSOAP。REST。andmultipleexchangemethods。。supportingtheinterfaceofmainstreamnaldatabases。includingORACLE。SQLSERVER。SYBASE。。。includingusdataXXX。structured。XML。:..textdata。WEBdata。vectormaps。images。videos。s。。messages。databases。andfiles。andhasgoodloadbalancingcapability。Itsupportstheexchangeoflargedatapackets。performsblockn。andthedatavolumesizeshouldnotbeXXXnspeed。。dataexchangen。:Exchangesecuritymanagement。。providingdynamicrouting-basedexchange。.:..、数据清洗、数据比对、数据校验、数据转换等处理。该工具支持异构数据源或数据访问接口,包括XXX、Sybase、SQLServer、XXXInformix、XXXDB2、JDBC、ODBC、XML和文本文件等。实时数据同步是指支持异构数据源之间的数据复制,应支持实时、定时、订阅/发布、手工等数据复制模式。此外,还需要对共享数据进行访问权限设置、访问标准或者分发标准。安全性是非常重要的,因此需要基于安全基础服务,通过对敏感信息进行加密等手段,提供消息的加密/解密、数字证书认证等功能,实现信息内容的保密和操作的不可抵赖性。同时,还需要基于日志,实现对数据交换任务进行追踪和事后审计。:..24小时的连续运行,软件版本升级或改进应在不影响业务的情况下进行,保证系统可以稳定、平滑过渡。此外,还需要支持数据断点续传、可靠传输,系统运行稳定,具有高可靠性,%。易维护性也是非常重要的,因此整合协同平台系统提供集中的可视化的管理服务,能集中方便地配置、监视、控制、管理整个系统,并且能够监视本系统中各类应用情况,及时消除隐患、降低管理成本、提高效率。在技术标准方面,数据访问遵循JPA、JDBC、ODBC等标准,数据格式遵循XML标准。性能指标包括交换响应时限、交换数据量、共享数据容量、数据访问速度和并发用户数等。交换响应时限指操作过程的响应时间平均不超过3秒,最大不超过10秒(不包含外部系统对于平台的响应时间)。支持大数据包的交换,理论数据量大小不应受限制,各类数据总量支持TB级以上,多种数据源的复杂操作响应时间不超过30秒。