睿治

智能数据治理平台

睿治作为国内功能最全的数据治理产品之一,入选IDC企业数据治理实施部署指南。同时,在IDC发布的《中国数据治理市场份额,2022》报告中,蝉联数据治理解决方案市场份额第一。

5部智慧民航建设数据治理规范标准发布

时间:2022-01-31来源:抓不住你说的梦浏览数:268

民航局于2022年1月21日下午举行智慧民航建设专题新闻发布会,民航局发展计划司副司长包毅介绍了《5部智慧民航建设数据治理规范标准》。

民航业是一个沉浸在大数据中的行业,航班数据、旅客数据、货邮数据、监管数据均具有海量化、异构化、快速化等大数据的特征。

“管好、用好、治理好”行业数据,提升行业数据的共享、质量及安全水平,发挥数据业务价值,是民航业应对发展环境变化、实现新旧动能转换、推动行业转型升级的根本之策,也是智慧民航建设基础中的基础、关键中的关键。

为贯彻落实智慧民航建设要求,提升行业数据治理能力,2021年,民航局提出了行业数据治理顶层框架,确定了“7+1”智慧民航数据治理规范体系,分别为民航数据治理《框架与管理机制》、《数据架构》《数据安全》《数据质量》《数据服务》《数据共享》以及《数据治理技术》7部行业标准和典型实践案例信息通告。

在深入调研民航多家运行保障单位数据治理现状和需求、行业内外科研机构和信息技术公司数据治理理念和实践的基础上,并面向社会公开征求意见,经民航工程建设标准化技术委员会审议通过,先后发布了5部数据治理规范标准。在编制过程中,着重考虑了当前民航数据治理4个方面的需求:1.着力营造民航数据治理法制环境,从数据治理体系、组织、制度等多方面增强数据治理系统性2.坚持多方运营主体共商、共建、共治、共享,打破信息碎片、信息孤岛现象;3.面向数据全生命周期进行数据质量与数据安全治理,提升数据可用性和安全性;4.着力构建功能复用、自主高效的数据服务,充分释放民航数据价值

第一部  《数据治理规范框架与管理机制》

《数据治理规范框架与管理机制》标准旨在统一民航数据治理框架体系,指导民航数据治理制度、组织建设,为民航数据治理提供管理保障。提出行业数据治理的体系框架、建设目标、实施要点、组织保障以及制度建设的总体要求。

第二部《数据架构》

《数据架构》旨在指导和规范民航数据架构建设,搭建民航业务与应用系统建设的数据桥梁,提升民航业务在应用系统的集成效率。

从数据资产目录、数据标准、数据模型、元数据管理主数据管理等方面,提出了数据架构建设的基本要求、一般原则和管理流程,指导业务单位实现业务需求向IT软硬件设施的首次“翻译”和转移。

第三部 《数据质量》 《数据质量》旨在规范数据质量要求,指导行业数据质量管理工作,实现数据质量的有效评价、控制和改进。构建了数据全生命周期的质量管控体系和评价策略,提出了数据质量管理流程、指标规则、监测控制、问题分析与改进、组织保障等方面的具体措施。第四部《数据安全》

《数据安全》旨在指导行业单位建立科学的数据安全分级与防护机制,强化行业数据安全保护能力。提出了由数据安全原则、数据安全分级管理、数据全生命周期安全防护和数据安全组织保障构成的民航数据安全治理体系框架。

第五部《数据服务》

《数据服务》标准旨在构建民航行业高效、可复用的数据服务体系,指导行业单位数据服务建设,提升行业数据应用能力。提出了民航数据服务基本框架,以及民航数据集服务、数据API服务、数据分析服务等能力建设的规范标准。

以上是5部规范标准的概要情况。2022年民航局还将发布《数据共享》《数据治理技术》2部标准和《智慧民航数据治理典型实践案例》信息通告,希望通过上述规范标准体系促进行业各方形成合力,确保民航数据管起来、用起来、活起来。数据治理规范助力智慧民航建设

民航业是一个沉浸在大数据中的行业,航班数据、旅客数据、货邮数据、行业监管数据均具有海量化、异构化、快速化等大数据的特征。如何管好、用好、治理好行业数据,是加快推进行业治理体系和治理能力现代化的重要课题,也是新时期推动行业发展的一项艰巨考验。

数据治理成为

智慧民航发展的关键路径与抓手

数据作为民航行业一种新的生产要素和经济社会资源,既是行业数字化转型的基础,也是智慧民航建设的核心元素。数据治理正是实现民航业务的数据化和数据的业务化,提升行业数据的共享、质量及安全水平,发挥数据业务价值的重要举措和必经之路。无论是以数据为治理对象,还是利用数据进行行业治理,都需要加强对数据治理的理论研究和实践探索,充分发掘数据的价值,以尽量降低成本和减少风险。随着大数据技术和产业的发展,“数据治理”这一概念的内涵和外延在不断演化。国际数据管理协会给出的数据治理定义为:“数据治理是对数据资产管理行使权力和控制的活动集合。”国际数据治理研究所给出的定义为:“数据治理是一个通过一系列信息相关的过程来实现决策权和职责分工的系统。”结合我国民航发展现状和行业特点,笔者认为“智慧民航数据治理”应该是指以民航行业数据为主要对象,以最大限度实现数据价值为最终目标,在确保数据安全的前提下,通过多方主体共建、共治、共享的方式,实现面向行业数据全生命周期的优化数据质量、改进数据服务、释放数据价值的过程。民航业是一个沉浸在大数据中的行业,航班数据、旅客数据、货邮数据、行业监管数据均具有海量化、异构化、快速化等大数据的特征。如何管好、用好、治理好行业数据,是加快推进行业治理体系和治理能力现代化的重要课题,也是新时期推动行业发展的一项艰巨考验。从目前行业数据使用和管理现状来看,尚缺少行业数据管控体系,数据来源多样,过于分散,可信度低,价值大打折扣。同时缺少行业数据治理标准,口径不一,数据质量、安全和服务模式难以保证。针对行业数据特征,亟须从理论和框架技术上完善治理方式、治理手段和治理标准,促进各方形成合力,共同管好、用好这些数据,以实现数据的价值创造。

智慧民航数据治理规范体系

的初步设想

2020年底,民航局印发《推动新型基础设施建设促进民航高质量发展实施意见》和《推进新型基础设施建设五年行动方案》,提出要“建立健全民航数据治理标准,完善符合高质量发展要求的统计指标体系。制定关键数据项标准和数据目录清单,规范数据来源和数据质量要求,确保数据准确性和时效性等。构建数据共享机制,做到数据分级分类开放共享。建立数据治理的评估与监管制度,以保障各单位的数据治理工作顺利进行”。笔者通过对国内各行业、各地方政府已发布的数据治理相关法律法规、标准规范和技术文件,以及国外经典数据治理案例的学习、梳理、研究,提出智慧民航数据治理规范体系架构的初步构想,包括《智慧民航数据治理框架与管理机制规范》《数据架构规范》《数据质量规范》《数据安全规范》《数据共享规范》《数据治理技术规范》《数据服务规范》和《数据治理实践案例》等八个部分。其涵盖的主要内容如下:

一  数据治理框架与管理机制

数据治理问题的复杂性和难度决定了数据治理工作不但需要建设实体化的数据管理专业组织,而且需要制定大家共同遵循的统一的数据管理政策、流程和规范要求。作为一种战略资产的管理,需要明确的框架和机制,保障业务管理和IT技术管理的协同;需要明确的管理制度、责任边界,以及责权利交叉时的判定机制,从数据产生到发挥要素作用的全过程保障治理要求的落实落地。《智慧民航数据治理框架与管理机制规范》的设想主要是立足行业发展现状,给出数据治理的内涵与目标、体系框架、实施、组织保障以及制度建设的总体要求,对行业单位开展数据治理工作予以指导。比如在组织保障方面,数据治理组织结构设计包括建立单位层面数据管理组织、各业务数据管理组织、信息技术支撑组织以及跨领域数据联合工作组在内的多层级结构,分别负责单位数据治理工作的统筹和各业务数据治理工作的实施,并通过分层分级原则任命数据责任人,将数据责任落实到业务主体,支撑数据治理工作的实施。

二  数据架构

打通业务和应用系统建设的壁垒是民航业数据治理的关键。数据架构作为统一的数据语言和操作手段,在实现应用系统设计开发与业务架构的深度融合上发挥着至关重要的作用,既是疏通业务流、消除信息孤岛和提升业务流集成效率的关键要素,也是原始业务数据通过治理成为有价值的数据资源,甚至数据要素的决定性环节。《智慧民航数据治理数据架构规范》的设想主要是以识别数据类型和来源为核心,从数据资产目录、数据标准、数据模型、元数据管理、主数据管理等方面,提出数据架构建设的基本要求、一般原则和管理流程,作为后续应用系统和技术架构设计、开发的依据将为什么干、谁来干、怎么干、干什么这些实际工作当中的具体业务要求映射到应用系统和技术设施中,指导业务单位顺利实现业务需求向IT软硬件设施的首次“翻译”和转移。

三  数据质量

数据质量是数据价值得以发挥的前提,糟糕的数据质量往往意味着糟糕的业务决策。如果数据质量得不到保证,再先进的数据分析工具、再科学的模型和算法,也无法从一堆垃圾数据中得出有意义的数据结论,作出正确的分析判断。随着民航业数据量的飞速增长,数据类型和来源的不断丰富,亟须建立一套行之有效的数据质量管理评价体系和“自愈”“自强”机制,帮助各类用户管控好数据,做好数据质量的提升工作。《智慧民航数据治理数据质量规范》的设想主要是以持续改进数据质量为目标,构建数据全生命周期的质量管控体系和评价策略,在数据设计、产生、汇聚、应用等各个阶段,提出数据质量管理流程、指标规则、监测控制、问题分析与改进、组织保障等方面的具体建议措施,细化各数据项数据质量量化规则,从完整性、及时性、准确性、一致性、有效性及可访问性等多个维度评估数据质量,落实各级数据责任人的职责,定位问题、分析原因、加以修正,避免问题数据流入后续环节,导致质量问题扩大化。

四  数据安全

今年6月,《中华人民共和国数据安全法》正式颁布,标志着我国数据安全进入了有法可依、依法建设的新发展阶段。其中明确“数据安全,是指通过采取必要措施,确保数据处于有效保护和合法利用的状态,以及具备保障持续安全状态的能力”“维护数据安全,应当坚持总体国家安全观,建立健全数据安全治理体系,提高数据安全保障能力”。有别于信息安全防护,数据安全侧重面向单位内部用户,通过安全管理和技术手段,在信息安全防护的基础上实现对数据使用人员和治理行为的安全管控。《智慧民航数据治理数据安全规范》的设想主要是以数据使用更安全为目标,提出由数据安全原则、数据安全分级管理、数据全生命周期安全防护和数据安全组织保障构成的民航数据安全治理体系框架,根据安全分级原则,确定数据在采集、传输、存储、使用、共享以及销毁等各个环节应采取的安全防护策略和管控措施,在促进民航数据安全应用和正常流动的同时,提高本单位的数据管理和安全防护水平。

五  数据共享

过去20年,建设IT系统的标准流程往往是业务部门提出业务需求,信息部门采购系统集成商,再经过需求收集、分析、开发、测试、上线等阶段,生产出一个满足业务需求的“烟囱”系统。但是,这种“烟囱”式的信息系统规划建设模式却成为互联网时代业务发展最大的障碍。如何更好地整合内部资源、更好地提升用户体验,实现系统间的交互是如今各类信息系统规划建设的基本要求。《智慧民航数据治理数据共享规范》的设想主要是从民航业数据共享的原则与范围、共享模式、共享技术、组织保障等方面提出相关规范,解决数据共享中存在的数据标准不一、“烟囱”林立和数据质量、数据安全问题,推动数据的汇聚与主题连接,建立统一的数据资源池,实现数据的打通与复用,并通过技术保障促进行业数据高效共享,营造行业数据开放共享的良好生态。

六  数据治理技术

近年来,数据库(即数据管理技术)经历了从SQL到NoSQL,再到NewSQL,以及从面向交易处理(OLTP)到交易处理与分析处理相结合(OLTP与OLAP)的演进,数据的计算处理技术也出现了分布式处理(如MapReduce等)、流计算(如Storm、Flink等)、图计算(如GraphX等)以及针对特定应用场景的各类融合计算模式等多种类型,数据的分析与挖掘更是涌现出深度学习、知识图谱、多源多模态处理等突破性的方法。这些技术都将与针对元数据、主数据、数据模型等的自动化、智能化技术一道,成为广义数据治理成功的重要基石。《智慧民航数据治理技术规范》的设想主要是从主数据管理、元数据管理技术体系、数据管理技术、数据处理技术、数据分析技术、数据资源池与主题连接技术等维度对数据的汇聚、存储、分析与应用技术提出规范,指导各单位数据平台与信息系统的建设。

七  数据服务

治理数据的目的是为了更好地使用数据,发挥数据的价值,随着信息服务建设的野蛮生长,数据与信息平台数量的快速增加和规模的快速扩大,传统的数据集成方式不仅财务成本高,数据质量难以保证,而且无法满足用户便捷、自主使用数据的实际需要。参考IEEE规范和互联网领域提出的数据服务概念,希望通过发展新的数据服务形式来改进原有数据集成方式,解决数据交互协作过程中的诸多问题,改善数据集成关系,提升数据获取效率和数据安全。《智慧民航数据治理数据服务规范》的主要设想是坚持面向用户、自助服务的原则搭建民航数据服务基本框架,在数据服务内涵与准则、数据服务设计与运营流程、数据服务分类与建设、数据集服务与数据API服务、数据分析能力等方面提出相关规范。指导用户通过数据集或数据API方式按需获取公共数据服务,并可基于数据分析组件进行自助性的数据应用;指导服务提供者逐步实现API接口向API服务能力的转变,更好地对接服务治理工具,提供组件级别的服务治理能力,为用户提供更加自主、高效、可复用的数据服务。

八  数据治理实践案例

身处新一代科技革命和建设数字国家的历史交汇期,在整个社会都在开展数字化转型的浪潮中,民航业内政府部门、企事业单位、行业各运行主体在数据治理理念和治理架构方面也开展了很多有益的实践。“他山之石,可以攻玉”。《智慧民航数据治理实践案例》的主要设想是以行业信息通告的形式,将智慧监管示范项目以及来自航空公司、机场、空管和运行保障单位数据治理的典型案例介绍给行业内外各类用户,为开展民航业务的数字化转型工作提供可借鉴与参考的范例。以行业的智慧监管为例,将通过业务中台和数据中台的构建,形成行业监管业务功能与数据的细分和高复用,进而实现各类信息系统从分散建设到统筹共用、行业监管从经验到数据决策的重要转变。

民航“新基建”

是数据治理理论实践与验证的主战场

实践是认识的源泉,也是认识的目的。面对民航业分散、多样的管理与运行主体,高安全要求、紧耦合的既有信息系统架构和纷繁复杂的应用场景,行业数据治理工作将是一项长期、艰巨和有的放矢的系统工程,绝不会是一蹴而就的节奏,也很难形成“处处适用”“包治百病”的方法和技术。比如,面向航空公司、机场运行的很多智能化应用场景需要行业人员更丰富的经验与知识,以及业务逻辑。这和计算机视觉、自然语言理解这类通用性问题是完全不一样的,不能单一地平移深度学习等技术路线,需要构造适用于高维特征的数据架构和算法模型。这就更需要我们在底层数据与技术方面发挥工匠精神,聚焦行业基础数据治理,一方面构建面向应用的高质量数据治理体系,另一方面构建规则与数据多重驱动、可以不断优化的定制化算法。这样才能打牢基础,真正有所突破。正如技术理念和体系架构只有给用户带来业务价值才有意义,设想只有付诸广泛实践才会得以完善,才可能产生价值,希望本文提出的规范架构对智慧民航“新基建”中开展行业数据治理工作有所启发裨益。(作者包毅系中国民用航空局发展计划司副司长,作者刘一系中国民航管理干部学院大数据与信息管理研究中心主任)来源:中国民航报智慧民航数据治理系列规范的编制背景是怎样的?此次发布的5部行业标准分别包含哪些要点?系列规范将为行业带来哪些积极影响?记者就这些问题采访了民航局发展计划司有关负责同志。

记者:智慧民航数据治理系列规范是在什么背景下进行编制的?

答:民航业是一个沉浸在大数据中的行业,航班数据、旅客数据、货邮数据、行业监管数据均具有海量化、异构化、快速化等大数据的特征。数据作为民航行业新的生产要素和经济社会资源,是行业数字化转型的基础,也是智慧民航建设的支撑元素。如何“管好、用好、治理好”行业数据,是加快推进行业治理体系和治理能力现代化的重要课题,也是新时期推动行业发展的一项艰巨考验。而“数据治理”正是实现民航业务的数据化和数据的业务化,提升行业数据的共享、质量及安全水平,发挥数据业务价值的重要举措和必经之路。2020年底,民航局印发了《推动新型基础设施建设促进民航高质量发展实施意见》《推进新型基础设施建设五年行动方案》,旨在结合民航“十四五”规划中以“安全为底线、智慧民航为主线”的有关要求,积极主动推动行业数字化、智能化、智慧化转型升级。《推动新型基础设施建设促进民航高质量发展实施意见》指出,要建立健全民航数据治理标准,完善符合高质量发展要求的统计指标体系;制定关键数据项标准和数据目录清单,规范数据来源和数据质量要求,确保数据准确性和时效性等;构建数据共享机制做到数据分级分类开放共享;建立数据治理的评估与监管制度,以保障各单位的数据治理工作顺利进行。在此背景下,《智慧民航建设2021年工作计划》要求,组织编制智慧民航数据治理规范。

记者:系列规范的编制工作具体是怎样开展的?

答:系列规范由民航局发展计划司(智慧民航建设领导小组办公室)提出,民航局发展计划司和中国民航管理干部学院大数据与信息管理研究中心联合编制。编制组系统梳理了国内外各行业、各领域已发布的数据治理相关法律法规、标准规范和技术文件,深入调研了行业多家运行保障单位的数据治理需求和实践方案,学习借鉴了行业内外科研机构和信息技术公司的创新经验,确定了本系列规范编制的框架原则、技术路线和边界范围,经广泛征集行业意见和多次专家论证审查,最终形成了此次发布的5部行业标准。

记者:请为我们分别介绍一下,此次发布的5部行业标准的主旨和内容要点。

答:此次发布了系列规范中的《框架与管理机制》《数据架构》《数据质量》《数据安全》《数据服务》等5部行业标准,其主旨和内容要点如下:《智慧民航数据治理规范 框架与管理机制》旨在统一民航数据治理框架体系,指导民航数据治理制度、组织建设,为民航数据治理提供管理保障。该标准给出了行业数据治理的体系框架、建设目标、实施要点、组织保障以及制度建设的总体要求。比如在组织保障方面,该标准设计了民航数据治理组织结构,包括单位层面建立的数据管理组织、各业务数据管理组织、信息技术支撑组织以及跨领域数据工作组在内的多层级结构,并通过分层分级原则任命数据责任人,将数据责任落实到业务主体,支撑数据治理工作的实施。《智慧民航数据治理规范 数据架构》旨在指导和规范民航数据架构建设,搭建民航业务与应用系统建设的数据桥梁,提升民航业务在应用系统的集成效率。该标准从数据资产目录、数据标准、数据模型、元数据管理、主数据管理等方面,提出了数据架构建设的基本要求、一般原则和管理流程,以作为后续应用架构、技术架构设计、开发的依据,并将具体业务要求映射到应用系统技术实施中,指导业务单位实现业务需求向IT软硬件设施的首次“翻译”和转移。《智慧民航数据治理规范 数据质量》旨在规范数据质量要求,指导行业数据质量管理工作,实现数据质量的有效评价、控制和改进。该标准构建了数据全生命周期的质量管控体系和评价策略,提出了数据质量管理流程、指标规则、监测控制、问题分析与改进、组织保障等方面的具体建议措施。比如该标准细化了数据质量评价规则,从完整性、及时性、准确性、一致性、有效性及可访问性等6个维度、16种评价指标评估数据质量,落实了相关组织和各级数据责任人的职责分工,以确保行业数据质量治理工作有序开展。《智慧民航数据治理规范 数据安全》旨在指导行业单位建立科学的数据安全分级与防护机制,强化行业数据安全保护能力。该标准提出了由数据安全原则、数据安全分级管理、数据全生命周期安全防护和数据安全组织保障构成的民航数据安全治理体系框架。行业各单位应基于数据安全分级,确定在采集、传输、存储、使用、共享以及销毁等各个环节应采取的安全防护措施,在促进民航数据安全应用和正常流动的同时,提高本单位的数据安全保护水平。《智慧民航数据治理规范 数据服务》旨在构建民航行业高效、可复用的数据服务体系,指导行业单位数据服务建设,提升行业数据应用能力。该标准坚持以功能复用、自主高效的原则搭建民航数据服务基本框架,在数据服务内涵与原则、数据服务建设流程、数据集服务与数据API服务、数据分析能力等方面提出相关规范。

记者:作为聚焦“十四五”时期民航发展主线的行业标准,智慧民航数据治理系列规范预计将为行业带来哪些积极影响?

答:当前,中国民航正从单一航空运输强国向多领域民航强国转段进阶,以“智慧民航”为主线,加快行业数字化转型,提升行业治理能力和治理水平,是行业发展的迫切需求。系列规范从管理机制、数据架构、数据质量、数据安全、数据服务等维度为行业数据治理提供规范,为行业“数据怎么管、数据怎么用”的问题提供了有效解决方案。系列规范将为民航局行业大数据管理提供重要的支撑手段和依据,为民航行业各单位数据治理和数字化转型工作提供指导。对于行业各单位而言,系列规范的指导将助力实现数据和业务的统一管理,为推动行业主体间的数据互通和安全共享提供技术保障,有利于实现各单位内部及单位间的数据融合与复用,从而降低运行成本、大幅提高数字化转型效率。

(部分内容来源网络,如有侵权请联系删除)
立即申请数据分析/数据治理产品免费试用 我要试用
customer

在线咨询