元数据管理工具-元数据采集

如兽般的姿态

2023-01-05

通过元数据管理平台可以将分散、异构的信息资源进行统一采集、描述、定位、检索、评估、分析，实现数据的结构化，为机器处理创造可能，从而大大降低数据治理的人工成本。

1. 采集内容
元数据采集内容主要包括业务元数据、技术元数据和操作元数据，详细说明见下表。

元数据采集内容说明

2. 采集方式
元数据管理工具是否强大，部分体现在其对各类数据源的采集能力上，支持的各类数据源类型越多，说明元数据采集能力越强大。元数据采集方式主要有两种：自动化采集和人工采集。

（1）自动化采集
自动化采集主要是通过元数据管理工具提供的各类适配器进行元数据采集。在元数据采集过程中，元数据采集适配器十分重要，元数据采集既要适配各种DB、各类ETL、各类数据仓库和报表产品，还要适配各类结构化或半结构化数据源。元数据采集适配器可以通过自动化的方式对企业各类数据源的元数据进行统一采集、统一管理。

亿信元数据管理平台内置57个采集适配器，让用户通过配置数据源参数及定时采集任务，进行自动化采集，实现直连数据源的端到端元数据采集。在保证自动化采集的同时，还支持对适配器进行扩展。

（2）人工采集
在元数据管理实践中，最难采集的往往不是技术元数据或操作元数据，而是业务元数据。由于企业缺乏统一的数据标准，业务系统竖井化建设，系统建设过程中没有对业务元数据进行统一定义，所以即使通过元数据适配器将业务系统的技术元数据采集到元数据仓库中，也很难识别这些表、视图、存储过程、数据结构的业务含义。这就需要采用人工的方式对现有数据的业务元数据进行补齐，以实现元数据的统一管理。