.

广西交通运输大数据资源管控平台项目

北京看白癜风哪里看的好 https://myyk.familydoctor.com.cn/2831/newslist_8_1.html

来源:首席数据官精英荟

一、项目背景

广西交通运输大数据资源管控平台是广西交通运输云数据中心的重要内容,由广西壮族自治区交通运输信息管理中心与广西交通设计集团有限公司共同建设。平台旨在系统开展数据收集与整理,充分整合相关交通运输信息资源,形成全面、系统、高效的信息归集与共享机制,提高业务协同效率,进一步推动交通运输大数据建设与应用,提升交通运输行业监管、服务和决策的治理与运营能力。

二、建设目标

平台定位为广西交通运输行业“横纵向”数据资源池,实现行业数据资源归集,支撑存储、计算、共享、交换、分析、应用、展示等,并开展全生命周期的数据治理,保障数据质量。纵向上实现行业内“部省市”跨地域、跨层级、跨部门的多层级共享应用,横向上与广西政务数据共享交换平台级联,完成与交通以外行业的数据共享和应用。定位如下图所示:

平台的任务是建成“资源丰富、目录清晰、质量保障、共享充分、交换稳定、应用便利”的交通运输大数据资源管控平台,具体目标有以下四点:

1、建成省级数据汇聚平台和行业信息资源目录,有效汇聚和融合广西交通运输行业数据,形成权威的行业数据资源池。

2、建成省级数据共享交换与开放平台,按照数据权属,实现横纵向的数据共享与开放管理,促进数据资源的流通,规范管理数据资源的共享应用。

3、深化数据治理,提升数据质量。开展元数据采集工作,形成数据资源地图;梳理国家、行业数据标准,完成数据资源的规范化工程;依托标准规则与业务规则,开展数据质量审计,推动质量问题闭环处理。

4、大数据技术平台扩展升级。应用行业主流的Hadoop技术,形成存储安全、功能齐全、扩张性良好的大数据平台,全面支撑离线、在线、实时流等多类型数据采集与整合。

三、解决方案介绍

1、总体设计方案

平台主要包含数据资源管理层、业务承载及数据分析挖掘层、数据展示层以及数据服务层。其技术架构如图所示:

云基础设施层主要完成对所有硬件设备资源的管理以及调度,充分利用虚拟化与分布式技术,实现云数据中心计算、存储及网络资源的弹性调配机制;数据资源管理层主要包括数据采集子系统、数据资源库、数据交换子系统、数据资源目录、数据标准体系、统一管理中心等;业务承载及数据分析挖掘层主要完成利用下层数据进行的相应业务支撑以及相关的数据挖掘分析服务;数据展示层主要完成对数据的多样性可视化展示;数据服务层主要完成对外统一共享交换资源服务。数据对外服务主要通过共享门户、开放门户、数据接口封装服务(包括服务接口的设计管理、封装发布管理、服务监控管理等)、数据交换引擎4类渠道对外提供。

2、大数据资源管控平台建设

为适应现代化信息管理的需要,在数据资源整合完成的基础上,我们需要建立一套统一的大数据资源管理平台,实现对数据资源的有效、实时管控。按照管理功能的不同,主要包括大数据资源中心、大数据基础平台、元数据管理、数据质量管理、资源目录管理、数据交换管理、数据共享管理、数据开放管理、数据共享门户、数据开放门户等子系统的建设。

2.1大数据资源中心

建设大数据资源中心系统,主要实现对结构化、半结构化和非结构化的数据进行采集汇聚。大数据资源中心主要对数据资源进行信息采集、维护、查询、分析、运行监控等管理。具体功能主要有数据源管理、数据采集配置、实时数据采集、数据转换配置、数据导出配置、数据资源编目、数据仓库管理、任务调度、数据接口管理和系统监控。

2.2大数据基础平台

建设大数据基础平台,主要实现基于Hadoop架构的大数据存储平台提供分布式数据存储、并行数据处理和统一管理维护等能力,并与大数据资源中心无缝对接,有效应对DT时代数据爆发式增长的挑战。除满足海量结构化数据的存储分析,还可以存储海量非结构化数据,如图片、音频、视频、文本等,并且在资源汇聚整合后,大数据平台提供数据分布式计算的能力以及分析挖掘能力,使上层的应用所需数据服务得到保障。

2.3元数据管理系统

建设元数据管理系统,实现对数据资源元数据对象进行统一运维管理。元数据管理系统主要提供一个管理平台,帮助用户将信息资源进行采集、维护、查询、分析、权限管控,实现信息资源的统一管控。元数据作为信息资源的主要组成部分,是描述数据间关系的数据。用于信息资源中抽取出来的用于说明其特征、内容的结构化的数据(如数据库模式、数据表、视图、字段、业务指标、统计规则等),用于组织、描述、检索、保存、管理信息和知识资源。

2.4资源目录管理系统

建设资源目录管理系统,主要实现数据资源编目、注册、发布、查阅功能等功能。其中,提供方主要职责是对数据资源目录编纂、整理、维护;管理者审核、发布由提供方提请注册的数据资源目录,为各方提供服务支持;使用方可对资源目录进行查阅、检索等。

2.5交换管理系统

建设交换管理系统,主要实现各类业务信息系统互联互通提供数据交换传输通道,定位在数据搬运工,严格做到不干涉业务,与数据结构、数据类型无关。交换管理模块不限于静态数据的传输通道,实现省内跨区域、跨系统的数据交换及信息资源的统一调度管理。同时与其他部门业务系统能够共享交换,如与其他委办局及其他行业各业务系统的数据交换。

2.6数据共享管理系统

建设数据共享管理系统,主要实现部级应用系统、省级各级交通运输管理部门、本省其他政府部门(如公安、安监、旅游、城建等)、外省交通运输主管部门,即部省际、省际以及省内交通运输管理部门相互之间数据共享服务的管理工作。主要包括共享资源发布、省内共享审核、省外共享审核、审核规则设定、共享规则定制和共享信息管理等功能。

2.7数据开放管理系统

建设数据开放管理系统,主要实现拟对外开放的交通信息资源的提供、审核和发布以及开放数据清单维护等功能。满足社会机构和社会公众等对交通运输信息资源的检索、查询、下载等应用需求。包括:开放资源管理、数据审核、数据发布、申请审批、用户管理、日志管理等功能模块。

2.8数据质量审计系统

建设数据质量审计系统,主要是基于元数据对采集入网的业务系统源数据及数据仓库指标数据等设置数据质量监测点,建立有效的数据质量监控机制。从数据质量分析、质量问题处理、知识库管理等形成数据质量管理闭环。提供全面的数据质量报告,预防和控制错误范围的扩大。

2.9数据共享门户系统

建设数据共享门户系统,主要是面向行业及其他政府部门用户,基于信息资源目录实现查询、浏览以及共享信息资源的浏览、搜索、共享申请等功能。用户可通过数据共享门户进行注册,实现数据资源的申请、浏览、下载。用户可向省级平台申请获取省内信息资源,也可申请获取省外信息资源。具体功能包括:用户注册申请、统一登录、帐户信息管理、信息提醒、资源申请、资源下载等功能。

2.10数据开放门户系统

建设数据开放门户系统,面向社会用户,通过用户界面集成服务,实现对信息资源目录查询、数据开放服务请求、普遍检索服务等功能的用户界面集成、展示和管理。应包括:注册及登录、开放申请、信息检索、信息展示等功能。支持按数据开放需求展示数据。

2.11大数据可视化管理中心系统

建设大数据可视化管理中心系统,主要包括数据源设置、可视化画布设计、可视化画布发布、可视化画布订阅、可视化画布浏览等功能。可视化图表组件可以灵活的接入各种数据进行展现,也可以通过人工编辑的方式,在原有数据的基础上对图表数据进行调整,达到理想化的展现效果。可视化画布需要拥有自定义、快速、易用、方便灵活、所见即所得、动态等特点,可以通过拖拽的形式操作,无需编程,实现“0”代码操作,简单易于上手。

2.12大数据智能分析管理中心系统

建设大数据智能分析管理中心系统,基于数据仓库进行数据分析和数据挖掘,实现数据价值的挖掘,为管理决策提供辅助支持。

2.13大数据统一应用门户中心系统

建设大数据统一应用门户中心系统,将不同的业务系统访问页面进行整合,基于单点登录简化用户的操作流程,提高用户的工作效率。

四、项目成效

1、数据资源汇聚整合

平台已完成广西交通运输行业42套信息系统超过70亿条数据的汇聚,包括公路基础设施、路政监管、路政执法、水路基础设施、水路运输调度、道路运输行政许可、道路运输人车业户、公路交通运行状态、车辆运行状态、政务信息公开等信息资源,初步构建基础库、业务库、感知库、元数据库等4大基础库。

2、数据治理工程

依托平台技术,已已完成多类数据标准梳理,其中业务标准条,通用基础元数据条,交通行业标准条。有效促进广西交通运输基础数据的规范化。完成水运政务数据、道路水路客票数据等数据质量提升工程。

3、数据共享交换

平台已全面开展横纵向数据共享支撑工作,包括部省水运政务数据、联网收费数据、道路水路客票数据动向;交通体系内应急、执法、信用等数据共享;跨行业、跨部门的运政、路政数据共享。在抗击新冠疫情期间,目前已累计向广西疫情防控指挥部共享超过29亿多条高速通行数据、多万条道路水路客票数据。

4、数据展示与应用

依托云数据中心打造的数据可视化万花筒平台,实现交通大数据的可见可感,帮助管理人员全面感知基础设施、路网运行规律与交通态势,并实现可视化部署,为交通资产精细化管理提供多维度数据呈现能力。结合GIS图层信息,已建成涵盖云中心数据资源展示、综合交通、规划建设、路网监测、安全应急、节能环保、公路养护、交通物流、安全态势等多个主题数据展示与多维交互大屏。

五、应用案例点评与推荐理由

广西交通运输大数据资源管控平台充分整合当地交通运输信息化相关资源,推动交通运输运行监测、应急指挥、大数据建设与应用、数据治理与信息归集共享等信息化建设,促进全方位、实时准确、安全高效的现代化交通运输信息服务体系形成,有力支撑广西交通运输云数据中心“数据一中心、业务一平台、交通一张图、监管一张网”的建设目标。

该案例是省级交通运输行业信息化基础设施,是统一基础数据平台,实现交通运输信息资源“横纵向”的汇聚融合,形成统一资源池,支持数资源统一管理和治理、协同调度和实时交换,为交通运输大数据深化应用奠定坚实基础。




转载请注明:http://www.abachildren.com/hbyx/2037.html