睿治

智能数据治理平台

睿治作为国内功能最全的数据治理产品之一,入选IDC企业数据治理实施部署指南。同时,在IDC发布的《中国数据治理市场份额,2022》报告中,蝉联数据治理解决方案市场份额第一。

如何摆脱数据孤岛问题?

时间:2022-09-30来源:小亿浏览数:173

某银行有着良好的信息化基础与数字化积淀,已建成了以综合业务系统、CM2006信贷管理系统、国际结算系统为主体的业务处理系统,以及以统计数据集中管理系统、债券核算系统、人力资源管理系统等为主体的信息管理系统。

但随着内部管理和外部监管要求的不断提高,以及面向数据分析的管理应用需求日益增加,在银行对数据的应用提出了更高的要求的背景下,原有的数据整体建设方面的问题逐渐凸显:
综合业务系统与信贷管理系统数据不同步;
缺乏统一的数据标准和规范,跨系统进行业务综合分析难以实现;
各业务部门数据理解不一致,导致数据难以得到有效应用;
……

这些问题归结起来,就是我们常说的数据孤岛问题。

01、八成企业都受到数据孤岛问题的阻碍

Forrester调研发现,82%的企业都受到数据孤岛的阻碍。

由于烟囱林立、数据顶层设计缺失、职权不明、部门划分模糊、业务流程不规范、数据管理混乱等原因,各部门之间、组织之间数据墙林立,数据共享互通难,成为了许多企业在数字化转型道路上面对的挑战之一。

细分一点来讲,数据孤岛分为两类,一类是逻辑性数据孤岛,主要是由于不同部门对数据的定义与理解不同而产生;另一类是物理性数据孤岛,则是由于数据分散在不同部门独立存储与维护而导致的。

尽管在某些特定需求下,数据孤岛是必要的。比如对于一些需要保持信息机密的组织或部门来说,保持在“孤岛”状态,独立存档与维护数据,有助于保障数据安全。但对于大多数场景来说,数据孤岛导致的一系列问题,如数据冗余、决策失误、效率低下等,都阻碍着数据价值的发挥。

如何摆脱数据孤岛状态,让数据进一步流通、应用?搭建一个全局的数据共享交换平台,是必要手段。

02、搭建平台,连通孤岛

一个完整高效的数据交换共享平台,能够帮助业务应用系统信息共享和数据整合,为各级数据中心、各类应用系统的数据交换提供一个统一的、规范化的、方便使用的数据交换系统。

亿信华辰经过深入研究,结合多年业务实践,运用成熟的数据交换技术,打造统一、安全、高效的全局数据交换管理平台——EsDataExchange,能够容纳多种多样数据格式,提供丰富数据处理与交换任务设计与可视化的数据交换监控,为用户构建安全可靠易用的数据交换通道。

平台分为数据源层、落地区、资源库和服务区。通过这四个分区,平台一方面能够实现分布式数据库间的数据同步、交换与整合,另一方面能能够连接各类应用和应用所需的信息资源,组织和整合各类数据、组件和服务,从这两方面来助力数据孤岛问题的解决。

(1)数据源层

平台支持多种主流数据库源、平面文本文件、Execl 文件和其它格式数据,并通过异构数据源适配层来实现对数据源层的整合。

(2)落地区

落地区为数据提供持久化存储和访问的场所。包括源数据区、处理数据区、及文件存储区。

其核心任务是要将互相关联的异构数据源集成到一起,使用户能够以透明的方式访问这些数据源,从而保障数据源整体上的一致性、提高信息共享利用的效率。

(3)资源库

资源库主要是提供增量识别、数据清洗、数据传输、数据压缩、一致性验证等多种手段保证数据的接入,规范数据流转,提升数据共享水平。利用底层整合的信息资源,以实现各部门业务数据在应用层面的互联互通和信息共享,更加有效发挥数据资产价值,并提供多套数据脱敏方案和加密算法保证数据的安全性。

资源库分为运行区和设计区,运行区是数据运行环境,提供传输、调度控制服务,作业实时运行监控和系统服务质量监控,设计区是数据交换作业流程设计环境,内置码制转换、调式校验等控件。

(4)服务区

服务区主要是通过服务门户和接口支持,提供标准化服务给应用系统调用,满足各种场景下应用系统对数据的使用和共享交换需求。EsDataExchange平台提供 webservices、api 等多种接口服务,直接面向运维和浏览用户进行查询,可以使更多的人充分地使用已有数据资源,减少资料收集、数据采集等重复劳动和相应费用。

EsDataExchange平台立足于解决相互独立的业务系统之间的业务数据可以无障碍传输共享的问题,通过丰富的数据处理和交换任务设计,对分散的业务系统进行数据整合,消除“信息孤岛”,实现各类业务系统的互通互联和数据共享,形成统一的数据服务层,为政企机构业务信息服务提供可靠的数据基础。

03、小结

回到我们开头提到的某银行遇到的一系列数据孤岛问题。

这些问题最终借助亿信华辰的数据交换平台得到了解决。通过以囊括会计核心系统(CBS),信贷系统(CM2006),外汇系统(EE)和债券系统(BOND)四大主要业务系统所有业务分析数据、并完全记录其历史变化信息的数据仓库为数据源,实现了各报表应用的数据同源、同构,统一数据口径;接着,逐渐将行内的主要指标数据统一到一个平台内,实现指标共享,解决各报表系统的数据来源不一,缺乏统一的数据标准和规范,跨系统进行业务综合分析难以实现的问题。

各系统的数据通过亿信数据交换平台进行统一抽取,通过数据转义、码值转换等实现数据标准化,并将处理后的数据以文件或库表等形式下发给消费系统。

数据是在流通、应用中创造价值的,做好数据交换与共享是数据价值进一步得到激活与发挥的必要条件。亿信华辰的数据交换管理平台EsDataExchange,兼具通用性、易用性、高性能与安全性,让数据交换管理统一、安全、高效,真正让数据服务于用户。

(部分内容来源网络,如有侵权请联系删除)
立即申请数据分析/数据治理产品免费试用 我要试用
customer

在线咨询