目录

一、概念

什么是元数据?

二、特点

三、分类

1.业务元数据

2.技术元数据

3.管理元数据

四、元数据管理工具


一、概念

什么是元数据?

元数据(Metadata):描述数据的数据(data about data),主要是描述数据属性(property)的信息,用来支持如指示存储位置、历史数据、资源查找、文件记录等功能。元数据算是一种电子式目录,为了达到编制目录的目的,必须在描述并收藏数据的内容或特色,进而达成协助数据检索的目的。

二、特点

1.元数据一经建立,便可共享

2.元数据是一种编码体系

3.元数据通常是结构化数据的数据

4.元数据包含用于描述信息对象的内容和位置的数据元素集,方便查询与检索

5.元数据是与对象相关的数据

三、分类

1.业务元数据

从业务角度描述业务领域的相关概念、关系,包括业务术语和业务规则。

维度、维度描述、属性信息、指标、指标定义、业务过程

2.技术元数据

指技术细节相关的概念、关系和规则,包括对数据结构、数据处理方面的描述。以及数据仓库、ETL、前端展现等技术细节的信息。

存储元数据(表、字段、分区、生命周期);运行元数据(作业类型、实例名称、执行时间);数据同步、计算任务、任务调度等信息;数据质量和运维相关元数据,如任务监控、运维报警、数据质量

3.管理元数据

管理领域相关,包括管理流程、人员组织、角色职责等。

四、元数据管理工具

初始化配置、元数据采集、提供元数据价值分析:包括血缘分析、健康度分析等,支撑数据资产可视化。

1.Apache Atlas

2.Netflix Metadata

Logo

为开发者提供学习成长、分享交流、生态实践、资源工具等服务,帮助开发者快速成长。

更多推荐