数据治理平台基本功能介绍

数据治理(DataGovernance)，是企业数据治理部门发起并推行的，关于如何制定和实施针对整个企业内部数据的商业应用和技术管理的一系列政策和流程。数据治理是一套持续改善管理机制，通常包括了数据架构组织、数据模型、政策及体系制定、技术工具、数据标准、数据质量、影响度分析、作业流程、监督及考核等内容。

数据治理(DataGovernance)，是企业数据治理部门发起并推行的，关于如何制定和实施针对整个企业内部数据的商业应用和技术管理的一系列政策和流程。数据治理是一套持续改善管理机制，通常包括了数据架构组织、数据模型、政策及体系制定、技术工具、数据标准、数据质量、影响度分析、作业流程、监督及考核等内容。
轻量级数据平台含数据采集汇聚、数据治理、数据共享服务三大组件。
一、数据采集汇聚
1、数据资源管理：将各类外部数据源接入到平台中，同时实现接入验证；包括关系型数据库oracle、mysql、postgresql、sqlserver；非关系型数据库MongoDB；消息队列kafka；数据仓库hive。
2、数据建模：支持将数据模型物化到数据库和将数据库扫描到数据模型；支持构建归集层数据模型，支持常规字段类型、索引、是否允许空值等；
3、数据采集：支持API到数据库、数据库到数据库、文件到数据的数据采集、消息中间件到数据库，支持采集任务调度，可自定义采集任务分组管理、采集日志查看、采集周期等，支持增量采集、全量采集模式；
二、数据治理
1、数据标准：支持转换标准，可以转换字符串实现数据脱敏以及去除空格等，支持命名标准，通过命名标准约束数据建模过程中对于数据模型的命名；
2、数据加工：支持加工任务调度，可以自定义任务周期；支持数据加工任务的分类管理，实现数据从归集层到专题库的ETL，并在ETL过程中自定义实现数据加工算法；
3、数据资源管理：功能与采集汇聚平台类似。
三、数据共享服务
1、接口服务：支持接口浏览、订阅、取消订阅、接口测试等；
2、审核管理：支持接口订阅审核管理功能，可对于申请订阅的请求进行审核，接口审核后调用者才能正常调用接口请求；
3、接口管理：支持自定义开发接口，可以开发数据库接口及实时数据接口，并以json格式返回数据；可以自定义数据返回格式；支持接口分级分类管理。
四、数据填报
1、文件填报，支持用户通过excel文件方式，按照指定格式将数据填报到归集库或专题库中；
2、表单填报，支持用户通过页面表单进行数据填报，填报完成后数据直接进入归集库或专题库。

五、数据治理平台商业案例
亿信睿治是一款覆盖数据全生命周期的数据治理平台，它通过对数据从创建到消亡的全过程的监控和治理，实现数据的统一管理，为企业保证了业务数据在采集、集中、转换、存储、应用整个过程中的完整性、准确性、一致性和时效性，从而帮助客户建立起符合自身特征的数据架构和数据治理体系。亿信睿治主要涵盖了以下内容：
1）数据标准：数据标准是对数据进行统一的、规范的定义，确保数据在复杂数据环境中保持一致性、规范性，提高数据管控的效率，完善数据治理体系。
2）元数据：元数据是数据治理的基础，是对数据的描述，可总览分析元数据之间的关系和互相之间的影响。
3）数据处理：数据处理主要用于对数据进行清洗、转换、整合、模型管理等处理工作，既可以用于对数据问题进行可行的修正，也可以用于为数据应用提供可靠的数据模型。
4）数据质量：数据质量包括对数据质量规则的定义、数据质量检查方案的定义，支持定时自动执行质量检查，自动生成质检报告，监控并揭示数据质量问题，提供问题明细查询和质量改进建议。
5）数据资产：数据资产是将全部数据作为资产，进行不同角色的目录化管理，分析数据资产之间的关系，获知资产访问、利用情况等。
6）主数据：主数据是对需要共享的数据建立的统一管理，为各业务系统数据调用提供黄金数据。
7）数据生命周期：对数据的全生命周期进行管理，主要是根据设置对数据进行自动归档和销毁，对近线数据和离线数据分别管理。
8）数据安全：数据安全贯穿于数据治理全过程，用于保证数据的安全性，提供对隐私数据的加密、模糊化处理。
9）数据交换：数据交换用于实现不同机构不同系统之间的数据传输交换，完成基本的数据汇集，确保数据在传输中的完整性、一致性。