您的位置  > 互联网

元数据管理到底有什么用?如何正确的实践?

元数据是企业中用来描述数据的数据。 可以理解为比一般数据类别更广泛的数据。 它不再仅仅表示数据的类型、名称、值等信息。 它还可以进一步提供数据的上下文描述信息,例如数据所属的域、取值范围、数据等。 关系、业务规则,甚至数据源。 在数据分析中,元数据可以帮助DW管理员和DW开发人员非常轻松地找到他们关心的数据。

元数据管理是为了有效组织数据资产。 它使用元数据来帮助管理数据。 它还帮助数据专业人员收集、组织、访问和丰富元数据以支持数据治理。

2、元数据管理有什么用?

元数据管理平台为用户提供优质、准确、易于管理的数据,贯穿数据中心建设、运维的全生命周期。 同时,在数据中心建设的整个过程中,数据源分析、ETL流程、数据库结构、数据模型、业务应用主题组织、前端展示等都需要相应元数据的支持。

通过元数据管理,形成整个系统信息数据的准确视图。 通过统一的元数据视图,缩短数据清洗周期,提高数据质量,使数据中心项目中各业务系统的海量数据得到系统化管理,对业务进行梳理。 元数据之间的关系,建立信息数据标准,完善这些数据的解释和定义,在企业内部形成一致、统一的数据定义,并能够对这些数据的来源、操作、变化等进行跟踪和分析。

3.元数据管理实践

1.确定元数据的范围

首先确定元数据来源的范围。 在实际工作中,并不是所有的数据都需要进行元数据管理。 通常我们会选择业务数据进行元数据管理。 非业务数据(如备份数据、系统日志等)会纳入管理范围,主要是因为元数据管理为业务和开发人员提供了对业务数据的快速访问。

2. 元数据访问

从访问元数据的位置,通常是从源系统访问它。 如果公司已经有数据仓库或者实时性要求不高,为了节省开发工作量,就会从数据仓库中访问已有的元数据。 将从源系统进行访问。

3. 制定元数据标准

在排序过程中,某些数据库或某些数据定义可能不规范,导致元数据管理无法进行。 接下来,我们需要建立元数据管理规范,对前端源数据进行逆向整治,主要是保证元数据的完整性和一致性。

针对不同类型的公司需求,元数据会向不同的人群开放,因此元数据需要进行权限管理。 规范中需要定义权限管理流程:元数据权限分层、元数据权限申请流程、元数据权限申请流程、数据发布流程和元数据审核流程。

4.元数据维护

元数据维护主要涉及对已发布的元数据的维护和管理。 如果已经上线发布的元数据需要调整或优化,则必须重复元数据发布过程。 不允许直接修改元数据。 出于安全考虑,所有元数据操作都必须记录在元数据操作日志中。

5. 元数据搜索、分析和报告

有单独的页面,支持元数据的模糊或精确快速搜索,输入关键信息即可找到对应的元数据。 我的公司将元数据视为一种数据资产,因此我们需要制作一份元数据资产报告。 从报告中,我们可以快速了解元数据访问流行度、数据价值、数据成本、数据分布等相关信息。