睿治

智能数据治理平台

睿治作为国内功能最全的数据治理产品之一,入选IDC企业数据治理实施部署指南。同时,在IDC发布的《中国数据治理市场份额,2022》报告中,蝉联数据治理解决方案市场份额第一。

交通行业提升数据利用效率的核心是做好数据交换与共享

时间:2022-04-22来源:小亿浏览数:147

近年来,政策环境的持续优化让数据红利在交通行业加速释放,比如:2016年,交通运输部部署了综合交通运输大数据应用中心建设工作,同时也委托交通运输部交科院开展综合交通运输大数据政策标准研究等任务。

2017年10月,交通运输部认定了5家交通大数据研发中心,2家重点实验室,加大对交通大数据理论研究和技术研发的支持力度。在政策环境方面,交通运输部印发《推进综合交通运输大数据发展行动纲要(2020~2035)》等纲领性文件;

2019年部级交通运输数据资源共享交换平台建成,且上线运行,全行业数据共享交换框架基本形成。

以上表明大数据已成为智能交通的重要战略资源,大数据的深度应用不仅有助于智能交通产品精细化,还有利于推动国民经济发展。今天小亿就来为大家从以下几个方面说说交通行业的数据交换与共享。

01、什么是数据的交换与共享?

出于各种原因,组织会选择数据交换与共享。例如,内部与内部的数据交换共享,企业与企业之间的数据交换共享,以及政府或企业对个人或服务提供商的数据交换与共享。数据交换共享就是让不同地方使用不同计算机、不同软件的用户能够读取他人数据并进行各种操作运算和分析。

也就是当数据从一个系统跨授权边界访问或传递到另一个系统时,就需要使用一个或多个协议来指定每个组织的责任、要访问或交换的数据类型和影响界别、如何使用交换数据,以及在交换系统的两端处理、存储或传输数据时如何保证数据安全。

常见的数据交换/共享场景包括但不限于:在授权用户之间共享数据和信息;提供对数据的自定义访问;合作进行联合项目;提供完整的、短暂的、间歇性的、永久的或临时的数据交换共享活动;通过交换共享减少数据收集工作量和成本;提供在线培训;为关键数据和备份文件提供安全存储。

02、交通行业数据交换共享的价值与意义

随着近年来信息化建设的不断深入,各级交通运输业务部门根据自身需求已经建设了相应的信息系统,涉及行业包括公路交通、路网运行、道路运输、水路交通、综合服务管理等。

不过,这些系统的建立只服务于独立的业务部门,且在不同时期完成,缺少统一的管理规划,业务系统各自掌握的数据不能及时有效提供给相关需求单位,影响到了交通运输行业公众服务和政务管理的质量与效率。因此交通行业需要发展对应的高质量高效率交通运输数据资源共享交换体系。

比如,交通行业数据中心作为整个智慧城市数据中心的交换子节点之一,负责横向疏通运管、公路、港航等部门信息资源交换与共享的渠道,纵向打通与地区智慧城市数据交换平台之间桥梁,实现与其他行业部门之间信息资源的共享和交换,最终汇集形成智慧交通行业数据库群,支撑整个智慧交通各相关系统。

在应用层面,对于出行者来说,可以提供准确最佳的出行时间,交通路径及交通方式;对城市交通管理者来说,由于能实时获取交通监控数据,能帮助提高管理决策能力。

03、交通行业的交换共享的数据都有哪些?

交通行业需要交换与共享的数据有两种,分别是行业间数据和行业内数据。

1.行业间数据交换

交通行业间数据交换主要针对的是地区公安局交警大队、建设局、旅游委员会、气象局等跨行业部门单位之间的数据。开发与智慧城市数据交换平台的数据接口,使智慧交通行业数据中心能够共享到公安、旅游、气象等信息资源,同时也能将各类需求数据资源推送至公安局交警大队、建设局、旅游委员会、气象局等跨行业部门。两级交换平台的关系如下图所示:

2.行业内数据交换

交通行业内数据交换与共享主要针对的是交通局及其下属各部门之间的数据交换与共享,如公路局、运管局和港航所。通过开发与交通局各个下属部门的数据接口,使智慧交通行业数据中心能够共享到公路局、港航所、运管局的信息资源,同时也能将各类需求数据资源推送至交通局、公路局、运管局和港航所等行业内部门。

04、交通行业如何做好数据交换共享平台的设计

数据交换平台是业务应用系统信息共享和数据整合的手段与工具,主要解决因数据库类型、开发运行环境、网络环境各异导致的“信息孤岛”问题,提高数据传输的效率和可靠性。

与此同时,数据交换平台可以为各级数据中心、各类应用系统的数据交换提供一个统一的、规范化的、方便使用的数据交换系统,主要包括数据交换系统和数据共享系统。

(1)数据交换系统实现分布式数据库间的数据同步、交换与整合,以及支撑跨区域分散应用间的数据共享;
(2)数据共享系统能够让各个业务系统之后不再出现网状图的结构,呈现星状结构,连接各类应用和应用所需的信息资源,组织和整合各类数据、组件和服务。

数据资源交换共享与开发应用平台按数据的流向自下而上分为五层,分别为外部数据资源层、数据汇聚层、数据融合层、服务管理层和服务门户层。数据交换共享平台系统架构如图所示。

△数据交换共享平台系统架构图

1.外部数据资源层

外部数据资源层即源数据库,为系统外部数据的来源,其主要包括行业内系统共享数据、行业外系统共享数据及互联网数据。

2.数据汇聚层

数据汇聚层主要实现对外部数据源层的数据整合,其主要根据获取数据的特性不同而采用不同的采集方案。对离线批处理数据,实时性要求不高的情况下,采用传统的ETL工具来实现。对数据实时性要求高、采集频度较高的数据(如GPS、传感器、移动终端发送数据等),采用实时数据接入方案。

3.数据融合层

数据融合层为工程数据提供持久化存储和访问的场所。通过“一体化数据库+分布式数据库+Hadoop大数据库”的混合架构形成平台的数据融合层。其中核心生产系统结构化数据存储查询等通过一体机数据库提供,实现高并发的数据查询分析能力;非结构化数据通过分布式存储架构的存储节点上部署的数据库提供。

4.服务管理层

主要包括目录管理、资源管理、服务管理、交换管理等功能。

目录管理提供目录编制、目录维护、目录变更、目录审核、目录发布等操作功能,能够方便快捷检索到交通行业不同分类信息资源目录情况。

资源管理部分主要是进行资源注册,根据已编制完成的信息资源目录,在进行了数据接入后进行资源的注册操作,将目录编目时录入的“标准化”信息项与数据接入时的实际信息项建立的匹配信息进行注册以便发布服务使用。

服务管理提供服务发布,服务启用/停用,服务监控,服务调用日志,统计分析等管理能力,实现服务的全生命周期管理,从开发、测试、发布、调用、注销,到服务监控、安全等的管理。

交换管理提供资源服务共享申请,交换管理,任务监控等功能,通过接口、数据库、文件等不同方式提供数据服务以满足不同数据需求,对共享任务动态监控告警方便跟踪数据链路的联通性。

5.服务门户层

通过服务门户和接口支持,提供标准化服务给应用系统调用,满足各种场景下应用系统对数据的使用和共享交换需求。

05、交通行业数据共享交换平台建设注意事项

1.需要有顶层思维

交通行业数据共享交换项目需要有顶层思维,因为无论从资金上还是规模上都是一个系统性工程,所以前期需要对“为什么建,给谁建,怎么建,怎么用”进行充分研究,结合交通运输部的要求和规范,因地制宜地进行规划与布局。

2.构建可持续的数据驱动管理的运营环境

交通行业搭建数据共享交换平台需要考虑可持续发展,而可持续发展需要考虑包括数据源头质量数据治理、数据安全管理、数据共享管理架构和数据应用模式等。此外,还需要有技术、有能力且有运营经验的团队进行管理。

3.实现数据深层次的应用

交通行业的数据共享交换平台不能只追求数据量大,而是要把不同渠道汇聚融合的数据盘活,只有不停地实现数据深层次的应用,挖掘数据背后的关系和价值,才能如滚雪球一般,使数据之间的相互关系更丰富更完善。

4.做好数据安全管理

交通行业的数据共享交换过程中,数据安全非常重要,安全不仅仅是存储环境的安全,应该涉及方方面面,涵盖技术安全和管理安全,我们的数据采集、传输,以及数据和系统的管理、对外展示和服务等各个环节都要有安全措施及各种预案。这里亿信华辰数据交换管理平台(EsDataExchange)能帮到你。

亿信华辰数据交换管理平台可容纳多种多样数据格式,提供丰富数据处理与交换任务设计,提供可视化数据交换监控,满足不同场景下的数据传输交换需求。

例如,四川省运管局综合管理与服务信息平台就是借助亿信华辰数据交换平台搭建,围绕运管局相关业务,建设了一个交换中心,统筹规划厅运管局内部数据的交换共享、厅运管局与部省运政跨省协同业务数据交换共享以及同公安交通违章事故数据、卡口数据、安监事故数据等外部门交换数据。

最终帮助四川省运管局成功整合了各类道路运输信息资源,构建成为全省统一规划、结构合理、灵活共享的数据中心体系。建立了信息资源目录体系,实现了信息资源注册、发布、分类管理及目录检索、标准管理、共享目录管理等功能。

06、小结

国家和交通运输部在“新基建”和“数字交通”建设的相关规划和文件里均提出了加快大数据中心和交通运输“综合大脑”的建设,而其核心就是数据的共享与交换。

交通行业的数据共享交换是以交通运输管理部门业务应用需求为出发点,以大数据画像为核心,以探究交通问题本质、支撑多交通模式协同应用为目标,最终希望实现海量综合交通数据的共享交换、特征分析和可视化展示,从而能充分挖掘交通数据中的价值。

从国家层面看,这不仅能够对冲疫情对经济的负面影响,为中国经济转型升级打下坚实基础,从行业发展层面看,这也有主力完善交通行业资源的共享和交换,进而促进交通运输各业务之间的协同,推动数据赋能交通运输行业的快速发展。
(部分内容来源网络,如有侵权请联系删除)
立即申请数据分析/数据治理产品免费试用 我要试用
customer

在线咨询