MH/T 5058-2021 智慧民航数据治理规范数据服务.pdf
- 文档部分内容预览:
MH/T 5058-2021 智慧民航数据治理规范数据服务
服务水平承诺是指服务提供方和使用方就服务的品质水准、性能等方面所达成的双方共同 认可的协议或契约
数据资源池dataresou
技术标准数据资源池是指通过对内外部数据的物理与虚拟汇聚而形成的数据集合
2.1.3数据主题联接dataconnection
数据主题联接是指对数据按业务流、事件、对象、主体等进行关联和规则计算,形成面向 数据应用的主题数据的过程
2.1.4数据集dataset
数据集是指由数据组成的集合
2.1.5数据API data application programming interface
2.1.6逻辑数据实体logicaldataentity
逻辑数据实体是指具有一定逻辑关系的数据属性集合,描述一个业务对象的某方面特征 租户tenant 租户是指对一组物理和虚拟资源进行共享访问的一个或多个服务用户
2. 1. 7 租户 tenant
2. 1.8租户环境 tenan
租户环境是指租户模式下面向数据使用者提供的数据、分析工具、计算资源组合的工作 环境。
2.1.9宽表wide table
宽表是指业务主题相关的指标、维度、属性关联在一起的数据库表
2.2.1API(ApplicationProgrammingInterface)应用程序接口 2.2.2REST(RepresentationalStateTransfer)表述性状态传递 2.2.3HTTP(HyperTextTransferProtocol)超文本传输协议 2.2.4URI(UniformResourceIdentifier)统一资源标识符 2.2.5XML(ExtensibleMarkupLanguage)可扩展标记语言 2.2.6JSON(JavaScriptObjectNotation)JavaScript对象简谱
3民航数据服务一般要求
3.0.1民航数据服务应减少点对点地数据集成,宜通过集中化的方式,在数据汇集、整合、主 题联接之后,通过数据分发、发布的框架,将数据以服务方式提供,以满足业务需求。 3.0.2基于数据服务方式的数据应用如图3.0.2所示,具体过程宜包括: 1数据经过物理汇聚或虚拟汇聚的方式,汇聚到统一的数据资源池,并经过数据主题联 接,形成面向数据应用的主题数据; 2数据使用者通过数据集服务和数据API服务按需获取各类数据,支撑业务需求: 3通过数据服务和自助分析结合的模式实现数据应用,包括通过调用数据服务实现数据应 用,以及基于数据服务提供的数据结合数据分析组件实现数据自助分析
2基于数据服务方式的民航数据应用(以机场业务为
民航数据服务一般要求
3.0.3数据服务建设应包括下列基本内容: 1制定数据服务建设方法,明确数据服务全生命周期,识别全生命周期各环节的管理关键 点,减少数据重复集成; 2制定数据服务管理的规范和流程,明确数据服务建设的各方责任,确保有效协同: 3构建单位级统一的数据服务管控平台,提供数据服务开发、测试、部署能力。 【条文说明】本规范中“单位”指民航行业各级行政主体、企业、直属单位和行业协会等组织。 3.0.4数据服务建设应符合下列基本原则: 1数据服务应满足可重用性,减少数据在不同信息系统间的多次迁移: 2在规划服务时应明确服务的对象,针对民航业务场景和需求进行服务设计,同时定义服 务水平承诺; 3业务数据责任人应负责所辖业务的数据服务规划和设计; (条文说明】数据责任人是指基于数据的业务属性负责数据治理责任的个体,包括单位最高数据 责任人、领域数据责任人、业务数据责任人。 4服务规划应考虑业务应用价值,并优先建设高价值服务: 5服务使用方应对服务提出改进需求,促进服务能力的持续提升: 6服务架构应根据不同场景选择合适的粒度; 数据服务应在数据服务管控平台进行注册和发布
4民航数据服务建设流程
4.1.1民航数据服务建设流程应包括数据服务识别与定义、数据服务设计与实现、数据服务运 营3个主要阶段,应符合下列要求: 1数据服务识别与定义应识别服务的业务价值、准人条件与服务类型,减少数据服务重复 建设,提升数据服务重用度: 2数据服务设计与实现应注重业务、数据、信息系统的协同,满足设计、开发、测试与部 署的快速送代,缩短数据服务的建设周期; 3数据服务运营应建立统一的数据服务管控及运营机制,保障数据服务水平
4.2数据服务的识别与定义
4.2.1数据服务识别与定义阶段宜开展下列工作:分析数据服务需求、识别可重用性、判断准 人条件、制定送代计划,如图4.2.1所示。
数据服务识别与定义的主要
4.2.2数据服务需求分析应结合应用对象判断数据服务类型、数据内容、数据源与时效性 要求
4.2.2数据服务需求分析应结合应用对象判断数据服务类型、数据内容、数据源与时效性 要求
民航数据服务建设流程
4.2.3可重用性识别应结合业务需求,通过数据服务管控平台匹配已有的数据服务,判断数据 服务建设方式,包括新建服务、直接复用、服务变更等。对于已有数据服务,应使用直接复用 或服务变更的方式,减少重复建设。 4.2.4准入条件判断是分析数据服务是否具备设计条件,准入条件宜包括:数据责任人已明 确、元数据已定义、业务元数据和技术元数据已建立联接、数据已进人数据资源池等。
4.3数据服务的设计与实现
4.3.1在数据服务的设计与实现阶段,应定义服务相关契约和数据相关契约
1服务相关契约应包括服务的基本信息与能力要求,基本信息包括数据服务建设提供方、 数据服务的类型等,能力要求包括数据服务的时效性、处理逻辑、安全策略、服务水平承诺要 求等; 2数据相关契约应包括输人和输出数据清单、数据资产编码及格式、业务元数据与技术元 数据要求、数据安全要求等
4.3.2数据服务设计原则包括下列内容
业务特性方面,宜将业务相近或相关、数据粒度相同的数据设计为一个数据服务 2 应用特性方面,宜将高概率同时访问、时效性要求相同的数据设计为一个数据服 3管理特性方面,应符合本单位数据安全管理策略的要求; 4能力特性方面,宜将单一能力的服务模型设计为一个数据服务
寸,日 1服务需求接收与管理应明确本单位数据管理组织、信息技术部门、业务部门的具体 职责; 2代码审查应校验服务开发代码的性能及规范性,阻断错误代码提交,宜通过自动化手段 实现; 3数据验证应进行数据服务的数据量差异、字段差异、数据准确性差异的验证,宜通过自 动化手段实现: 4功能测试应对数据服务水平承诺、出人参数进行检查,构建容错机制,宜通过自动化手 段实现
4.4.1数据服务运营应包括数据服务的变更管理与下架管理。
4.4.2数据服务变更管理应考虑服务变更内容与服务变更影响。服务变更内容包括但不限于数 据服务的时效性、出人参数、服务处理逻辑、数据安全策略等。服务变更影响包括但不限于业 务连续性影响、变更成本影响等。 4.4.3应针对不同场景制定数据服务下架流程,在数据服务下架前进行影响度评估,在数据服 务实际下架前通知所有相关方。宜通过自动化手段实现数据服务下架。 条文说明)数据服务下架分为主动下架和被动下架:主动下架是由服务使用方主动提出的数据 服务下架申请,被动下架是通过运营度量策略判断需要下架的数据服务
收据集服务与数据API服
5数据集服务与数据API服务
5.1.1民航数据服务应包括数据集服务与数据API服务。 5.1.2数据集服务应提供相对完整的数据集合,由使用者访问数据集合并自行决定数据处理逻 辑。数据集服务的生命周期应为数据访问授权的有效期。 5.1.3数据API服务面向信息系统,应响应信息系统的服务请求并返回执行结果。数据API服 务基于随机的数据事件传送数据,应基于事件定义数据处理逻辑。数据API服务的生命周期应 与数据事件一致,事件关闭则服务终止
5.2.1数据集服务按所提供的数据是否进行主题联接,可分为面向数据资源池的数据集服务和 面向主题联接的数据集服务。 【条文说明】面向数据资源池的数据集服务所提供的数据直接来自数据资源池,面向主题联接的 数据集服务所提供的数据经过主题联接
5.2.2面向数据资源池的数据集服务遵循下列建设原则(如图5.2.2所示):
宜将数据资源池中同一个业务对象的一个或多个逻辑数据实体封装为数据服务; 宜将数据资源池内单个逻辑数据实体及其关联主数据合并封装为数据服务; 不宜将数据资源池中跨业务对象的多个逻辑数据实体合并封装为一个数据服务
图5.2.2面向数据资源池的数据集服务建设规范
5.2.3面向主题联接的数据集服务遵循下列建设原则(如图5.2.3所示): 1宜将单个主题联接的逻辑数据实体封装为一个或多个数据服务; 2宜将由多个主题联接的逻辑数据实体组成的多维模型整体封装为一个数据服务; 3不宜将多个主题联接数据资产直接合并封装为一个数据服务
图5.2.3面向主题联接的数据集服务建设原则
收据集服务与数据API服
合下列要求: 1数据服务宜在应用服务层进行组合编排并对外发布; 2供应或使用数据服务时,应用组件间应传递对数据进行逻辑操作的结果; 3应用服务应具有高内聚、松耦合的属性。 (条文说明】高内聚使业务逻辑变得更加集中,易于数据同源管控;松耦合使业务逻辑的变化对 服务使用方没有直接影响,
图5.3.1数据API服务架构(以航空公司业务为例
5.3.2数据APIWeb接口宜采用基于REST式的服务设计RESTful,支持HTTP、URI、XML、 JSON等标准和协议,设计轻量级、跨平台、跨语言的架构,通过统一的接口提供服务,实现前 后端分离
5.3.3数据APIWeb接口应符合:
每一个URI应代表一种资源; 2同一种资源可有多种表现形式; 3所有操作应无状态; 4接口应规范统一; 5数据格式应一致
1每一个URI应代表一种资源; 2同一种资源可有多种表现形式; 3所有操作应无状态; 4接口应规范统一; 5数据格式应一致,
6.1.1民航数据应用宜通过数据服务和自助分析结合的模式实现。数据自助分析宜具备以下 能力: 1基于租户模式,使不同类型的用户可在一定范围内分析数据、共享数据结果; 2形成数据分析能力组件,针对不同需求提供通用型的数据分析工具
1基于租户模式,使不同类型的用户可在一定范围内分析数据、共享数据结果; 2形成数据分析能力组件,针对不同需求提供通用型的数据分析工具
6.2基于租户模式的数据分析服务
6.2.1租户模式应面向数据使用者提供租户环境,包括数据、分析工具、计算资源等。数据使 用者在租户环境内自助完成授权的数据搜索、数据加工、在线分析、报表共享等工作。租户模 式下的数据分析服务流程如图6.2.1所示。
图6.2.1租户模式下的数据分析服务流程
6.2.2租户宜包括下列4类角色
6.2.2租户宜包括下列4类角色: 1责任人:租户管理的第一责任人及租户内数据应用的总责任人,宜由单位任命; 2管理员:对租户内资产、用户、报告的日常维护、配置、授权承担具体管理职责的人 员,宜由租户责任人指定并授权; 3查看者:只对租户内的报告有查看权限的用户,应在申请并被允许后加入租户; 4分析师:可执行申请数据人租户、申请租户授权、通过分析工具分析数据、制作报告 查看报告、分享报告等操作的用户,应在申请并被允许后加人租户。
6.2.3租户环境宜提供以下基础能力
1数据加工能力:支持模型配置、字段选择、函数过滤、SQL配置、脚本编译、脚本验证 等,支持用户将多个数据进行关联,支持构建宽表及对宽表进行数据过滤、字段选择、字段增 加等操作; 2即席查询能力:支持通过筛选条件展示查询数据,支持以文件服务器的方式下载数据; 3可视化分析能力:支持查看已授权并经过加工的数据,支持利用各种分析工具; 4自助分享能力:支持对分析报告进行密级设定和权限管理,支持向租户个人或者群体分 享报告,支持本租户及跨租户分享
6.3数据分析能力组件
.3.1应面向业务数据分析和应用系 用型数据分析能力组件,减少重复建设,实 现组件重用。两类任务的数据分析能力组件如图6.3.1所示
3.1两类任务的数据分析能
6.3.2面向业务数据分析提供可灵活配置的自助分析组件,宜具备以下能力: 1数据资产订阅、分析报告搜索、服务订阅等; 2数据拖拽式分析建模; 3数据搜索、数据获取、自助分析等一站式自助分析服务; 4租户管理、工具集管理、日志管理等。 6.3.3面向应用系统建设提供云端数据开发、计算、分析、应用组件,宜具备以下能力: 1整合数据接入、数据计算、数据挖掘、数据展现等能力,提供高效、安全的数据集成 数据开发等服务; 2整合第三方资源,提供自助、按需、在线的基础数据服务,包括分布式处理、实时处 理、内存计算等功能; 3提供数据分析环境,支持权限申请和计算资源的分配,缩短建模周期; 4集成数据可视化、数据建模能力,提高平台的易用性
6.3.2面向业务数据分析提供可灵活配置的自助分析组件,宜具备以下能力: 1数据资产订阅、分析报告搜索、服务订阅等; 2数据拖拽式分析建模; 3数据搜索、数据获取、自助分析等一站式自助分析服务; 4租户管理、工具集管理、日志管理等。 6.3.3面向应用系统建设提供云端数据开发、计算、分析、应用组件,宜具备以下能力:
数据开发等服务; 2整合第三方资源涂料标准规范范本,提供自助、按需、在线的基础数据服务,包括分布式处理、实时处 理、内存计算等功能; 3提供数据分析环境,支持权限申请和计算资源的分配,缩短建模周期; 4集成数据可视化、数据建模能力,提高平台的易用性
1为了便于在执行本规范条文时区别对待,对要求严格程度不同的用词,说明如下: 1)表示很严格,非这样做不可的用词: 正面词采用“必须”;反面词采用“严禁”。 2)表示严格,在正常情况下均应这样做的用词: 正面词采用“应”;反面词采用“不应”或“不得”。 3)表示允许稍有选择,在条件许可时首先这样做的用词: 正面词采用“宜”;反面词采用“不宜”。 4)表示有选择,在一定条件下可以这样做的,采用“可”。 2本规范中指定应按其他有关标准、规范执行时,写法为“应符合·.·的规定”或“应 安…·.··的规定执行”。非必须按所指定的标准、规范和其他规定执行时,写法为“可参照…··..”。
1为了便于在执行本规范条文时区别对待,对要求严格程度不同的用词,说明如下: 1)表示很严格,非这样做不可的用词: 正面词采用“必须”;反面词采用“严禁”。 2)表示严格,在正常情况下均应这样做的用词: 正面词采用“应”;反面词采用“不应”或“不得”。 3)表示允许稍有选择,在条件许可时首先这样做的用词: 正面词采用“宜”;反面词采用“不宜”。 4)表示有选择,在一定条件下可以这样做的,采用“可”。 2本规范中指定应按其他有关标准、规范执行时,写法为“应符合..··的规定”或“应 …·.··的规定执行”。非必须按所指定的标准、规范和其他规定执行时,写法为“可参照....”。
下列文件对于本文件的应用是必不可少的。凡是注日期的引用文件,仅所注日期的版本适 用于本文件。凡是不注日期的引用文件,其最新版本(包含所有修改单)适用于本文件, 【1]《信息技术服务治理第5部分:数据治理规范》(GB/T34960.5) [2]《数据管理能力成熟度评估模型》(GB/T36073) [3]《信息技术大数据存储与处理系统功能要求》(GB/T37722) [4]《信息安全技术大数据服务安全能力要求》(GB/T35274) [5]《信息技术SOA技术实现规范第4部分:基于发布/订阅的数据服务接口》 (GB/T 32419.4) 61《电信数据服务平台第7部分:数据服务开放》(YD/T3758.7)
化工标准机场建设工程行业标准出
成本价:19.00元
....- 数据标准
- 相关专题: 民航