目前企业所面临的数据交换问题
【作者】网站采编
【关键词】
【摘要】企业对数据服务的需求日趋迫切,如何有效的管理数据、高效的提供数据服务是目前企业对所面临的关键挑战。目前集团层面客户信息分散,各子公司之间的客户信息无共享。内部系统
企业对数据服务的需求日趋迫切,如何有效的管理数据、高效的提供数据服务是目前企业对所面临的关键挑战。目前集团层面客户信息分散,各子公司之间的客户信息无共享。内部系统获取客户数据来源系统分散,方式多样难以管理,且获取客户数据时效性较低,供数标准不统一,缺乏统一的客户数据服务平台。
1. 数据平台中数据内容繁多,难以全面掌控。
通过多年的信息化建设和运营,企业已经建立了完善的业务应用系统,有效的支撑了核心业务的创新和发展,但随着应用系统的增多,数据量和数据应用环境增大,在对这些数据进行使用的过程中逐渐存在不合理、不统一的问题。
2. 数据平台中数据的流转和逻辑过程复杂,难以追溯数据来源。
许多企业目前没有统一的数据资产标准,各业务系统中数据质量参差不齐,存在信息孤岛现象,不同部门同一名称数据可能有不同的含义,同一个数据可能又有不同的命名,数据有效交互和共享存在问题。存在部分系统数据更新不及时的问题,核心业务数据无法朔源,数据的准确性和及时性较低,现有报表在建模时几乎每个报表都要重复建模,人为参与工作过多且层次复杂,无法高效的对流程及指标进行精确监控及分析,数据的利用效率和模型重复使用率较低。
3. 业务部门对数据结构和质量无法管控
目前数据管控的发展方向和需求是由业务部门提出,但业务人员对公司复杂的系统无法进行全面深入掌握,特别是技术层面。为了使业务部门从数据结构到数据质量上更好的管控,梳理业务系统与数据库结构关系,成为目前急需解决的问题之一。
随着企业单位研究业务的变化、经济社会的转型和信息技术的发展,数据交换越来越频繁,经常需要进行更复杂的数据交换,尤其是不同系统和业务之间,这些数据交换大多是要求跨平台、跨系统的。在全面数字化的当下如果不“主动出击”,如何玩转数据呢?亿信华辰的数据交换管理平台(EsDataExchange)不光能主动进行数据交换,还能容纳多种多样数据格式,提供可视化数据交换监控,是一个统一、安全、高效的全局数据共享交换平台。
亿信华辰的数据交换产品就有多种数据“主动”交换方式供君选择
1、事件触发式的主动交换在设置好数据交换任务之后,可以直接发起事件触发类型的数据交换。这种方式不用等到具体的时间再执行,它会根据事先定义的事件来决定是否触发交换任务。
事件触发式的主动交换现有两种事件类型:库表监听和文件监听。库表监听会根据库表时间戳类型字段的变化或者是库表的行数变化来决定是否触发此次数据交换任务。文件监听会根据文件是否存在来触发,或者是已存在文件的修改时间的变动来触发。
如果发起了事件触发类型的数据交换,那么只要绑定的事件返回肯定的结果,系统就会立即执行此次数据交换。这种主动式的数据交换能够避免系统做无谓的等待,使数据传输更加实时高效。
很多的业务系统之间由于网络不能互通、保密性质不同、业务逻辑不一样等原因,导致他们的数据库不能直接进行数据交换。此时可以利用数据交换产品中内置的FTP文件传输工具和MQ文件传输工具以主动推送文件的方式来实现。
数据交换内置的FTP客户端工具,只要业务系统的两台物理机之间可以进行通信,就可以使用数据交换来主动推送文件到目标机器。同时也可以下载源机器上的文件来获取数据。
数据交换的MQ文件传输系统是将开源的ActiveMQ技术集成到了数据交换产品中,并做了优化和增强。只要配置好mq压缩包,就可以实现两台物理机之间的实时通信,源机器可以随时将数据推送到目标机器,让数据交换没有“时差”。
3、接口式的主动交换现在市面上很多的数据交换工具并不能对接口类型的数据做有效处理,而亿信华辰的数据交换产品支持接口数据作为源数据,并且可以在接口数据的URL中传入自定义的参数,支持在真正获取数据的时候对该自定义参数进行赋值,然后接收数据。只要接口返回的数据带有一定的格式(比如JSON格式),都可以将其解析出来存到数据库表中。