• 产品
  • 产品解决方案
  • 行业解决方案
  • 案例
  • 数据资产入表
  • 赋能中心
  • 伙伴
  • 关于

申请试用

睿治

智能数据治理平台

睿治作为国内功能最全的数据治理产品之一，入选IDC企业数据治理实施部署指南。同时，在IDC发布的《中国数据治理市场份额,2022》报告中，蝉联数据治理解决方案市场份额第一。

在线免费试用 DEMO体验 视频介绍

睿治 智能数据治理平台

IDC蝉联数据治理解决方案市场第一

首页数据治理数据质量问题分析

数据质量问题分析

时间：2019-01-07来源：亿信华辰浏览数：1861次

数据质量问题主要包含四个问题域：技术问题、信息问题、流程问题、管理问题。

1、技术问题

由于具体数据处理的各技术环节异常所造成的数据质量问题，它产生的直接原因是技术实现上的某种缺陷。技术类数据质量问题产生的环节主要包括：数据创建、数据获取、数据传递、数据装载、数据使用、数据维护等方面：

数据创建质量问题主要包括：创建数据默认值使用不当和数据录入的校验规则不当，导致指标统计结果不一致、数据无效、记录重复等；

数据传递质量问题主要包括：接口数据及时率低、接口数据漏传、网络传输过程不可靠，如包丢失、文件传输方式错误、传输技术问题、协议使用不当导致的数据不完整等；

数据装载质量问题主要包括：数据清洗算法、数据转换算法和数据加载算法的错误；

2、信息问题

由于对数据本身的描述、理解及其度量标准的偏差而造成的数据质量问题。产生这类数据质量问题的原因主要有：元数据描述及理解错误、数据度量的各种性质得不到保证、变化频度不恰当等。

元数据描述及理解错误中的相关元数据主要包括：

业务元数据——主要包括业务描述、业务规则、业务术语、业务指标口径等；

技术元数据——主要包括接口规范、执行顺序、依赖关系、ETL转换、数据建模和工具等方面的内容。

数据度量和变化频度提供了衡量数据质量好坏的手段。数据度量主要包括完整性、唯一性、一致性、准确性、合法性。变化频度主要包括业务系统数据的变化周期和实体数据的刷新周期。

3、流程问题

由于系统作业流程和人工操作流程设置不当造成的数据质量问题，主要来源于系统数据的创建流程、传递流程、装载流程、使用流程、维护流程等各环节：

创建流程质量问题主要指操作员数据录入时缺乏审核流程；

传递流程质量问题主要指通信流程沟通不畅；

装载流程质量问题主要指清洗流程缺乏/不当、调度流程逻辑错误、数据加载流程逻辑错误及数据转换流程逻辑错误；

使用流程质量问题主要指数据使用流程缺乏流程管理；

维护流程质量问题主要指缺乏变更维护流程、缺乏错误数据维护流程、缺乏数据测试流程以及对人工后台调整数据没有严格的流程监控；

4、管理问题

由于人员素质及管理机制方面的 原因 造成的数据质量问题如：

数据库设计原则不严谨，数据使用不规范导致的业务数据重复，数据不一致。

人员培训所产生的质量问题主要指对数据质量相关人员缺少长期培训计划。

没有建立管理数据质量的专门机构，出现数据质量问题后无专人负责

没有明确的数据质量目标；

缺少管理数据质量的管理办法等。

此对数据质量产品的问题进行了部分的描述，高质量的数据都是一致的，差质量的数据却各有不同。可能因为行业的不同，数据的复杂程度不同，产生的问题也会各有差别。但都可以在四个问题域里找到对应的问题。所有这个总结，还是很全面的解释了相关数据质量产生的相关问题。


（部分内容来源网络，如有侵权请联系删除）
立即申请数据分析/数据治理产品免费试用 我要试用

上一篇：为什么我们需要数据仓库...

下一篇：Spring Boot、微服务架构和大数据治理三者之间的故事...

  • 相关主题
  • 相关大数据问答
  • 相关大数据知识
高校数据中心解决方案工业数据三维建模主数据管理平台数据采集数据分析与展示平台企业税务风险管控数据可视化呈现数据仓库数据质量智慧分析系统用例数据统一管理ES的分布式存储统计图制作智慧校园数据管理平台政务驾驶舱 智能问答数据大屏的作用电力监控系统报表

1 数据治理与人工智能的关系

2 主数据管理的时机

3 主数据模型分类

4 BI分析

5 数据产品资产化

1 常用数据分析方法

2 数据仓库系统建设中的工作流及优化

3 主数据模型：数据管理的基础与关键

4 数据化、数字化与信息化，你真的弄清了吗？

5 白酒行业数据安全合规实践：从法规遵从到价值释放

睿治-智能数据治理平台
产品功能
平台化

全面覆盖数据治理9大领域，采用微服务架构，融合度高，延展性强

可视化

实现数据从创建到消亡全生命周期的可视化，也实现全角色的可视化

智能化

丰富的智能元素和功能，大大缩短数据管理周期、减少成本浪费

相关产品
EsDataFactory

数据工厂系统
EsDataExchange

数据交换管理平台
PetaBase-s

湖仓一体化平台
EsMDM

主数据管理平台
EsPowerMeta

元数据管理平台
EsDataStandard

数据标准管理平台
EsDataClean

数据质量管理平台
EsDataAssets

数据资产管理平台
推荐文章
如何通过主数据管理开启数据治理
如何通过主数据管理开启数据治理

2024-03-19
汽车行业数据治理方案，助力车企研产供销数据一体化
汽车行业数据治理方案，助力车企研产供销数据一体化

2023-09-26
医院数据管理、应用难？这套智慧运营管理数字化方案直接搞定
医院数据管理、应用难？这套智慧运营管理数字化方案直接搞定

2023-08-14
什么是数据编织，与数据中台、数据湖、数据治理、DataOps有何关系
什么是数据编织，与数据中台、数据湖、数据治理、DataOps有何关系

2023-07-11
主数据项目实战：一个实例详解实施全流程及重难点
主数据项目实战：一个实例详解实施全流程及重难点

2023-07-06
最近文章

美军发布：《数据全生命周期管理指南》

你在第几阶段？企业数据治理体系的五级进化论

什么是高质量数据集？如何建设高质量数据集？

面向人工智能的数据分类分级治理！

低代码平台，用户到底是谁？

customer

在线咨询
在线咨询

点击进入在线咨询