Eddie昌的博客 Eddie昌的博客
首页
  • 数据理论

    • 《数据仓库工具箱》
    • 《阿里巴巴大数据之路》
    • 《DAMA数据治理》
  • 数据实践

    • TypeScript
  • 数据分析1
  • 数据分析2
  • Hadoop生态
  • Linux
  • Git
  • 爱SQL
  • 学习
  • 面试
  • 心情杂货
  • 实用技巧
  • 分类
  • 标签
  • 归档

Eddie昌

数据领域小学生
首页
  • 数据理论

    • 《数据仓库工具箱》
    • 《阿里巴巴大数据之路》
    • 《DAMA数据治理》
  • 数据实践

    • TypeScript
  • 数据分析1
  • 数据分析2
  • Hadoop生态
  • Linux
  • Git
  • 爱SQL
  • 学习
  • 面试
  • 心情杂货
  • 实用技巧
  • 分类
  • 标签
  • 归档
  • 《数据仓库工具箱》

  • 《阿里巴巴大数据之路》

  • 《DAMA数据治理》

    • 《DAMA数据治理》目录
    • DAMA数据管理知识体系指南概述
    • DAMA数据管理
    • DAMA数据治理
      • 1 引言
        • 1.1 业务驱动因素
        • 1.2 目标和原则
        • 1.3 数据治理组织
        • 1.4 数据治理运营模型
        • 1.5 数据资产的估值
      • 2 活动
        • 2.1 规划组织的数据治理(P)
        • 2.2 制定数据治理战略(C)
        • 2.3 实施数据治理(D)
      • 3 工具和方法
      • 4 实施指南
      • 5 度量指标
    • DAMA数据架构
  • 测试文章

  • 数据开发
  • 《DAMA数据治理》
Eddie昌
2023-11-03
目录

DAMA数据治理原创

# DAMA数据治理

  数据治理职能是指导所有其他数据管理领域的活动。数据治理的目的是确保根据数据管理制度和最佳实践正确地管理数据。而数据管理的整体驱动力是确保组织可以从其数据中获得价值,数据治理聚焦于如何制定有关数据的决策,以及人员和流程在数据方面的行为方式。
  按照DMBOK数据管理领域的通用章节结构:
●引言
  ○ 业务驱动因素
  ○ 目标和原则
  ○ 基本概念
●活动
●工具
●方法
●实施指南
●与数据治理的关系
●度量指标
  本章语境关系图: image-20230716112302487

  数据治理领域的重点内容如下: image-20230716112343914

# 1 引言

  数据治理职能是指导所有其他数据管理领域的活动。数据治理的目的是确保根据数据管理制度和最佳实践正确地管理数据。而数据管理的整体驱动力是确保组织可以从其数据中获得价值,数据治理聚焦于如何制定有关数据的决策,以及人员和流程在数据方面的行为方式。

# 1.1 业务驱动因素

数据治理的驱动因素大多聚焦于减少风险或者改进流程。 减少风险:

  1. 一般性风险管理:洞察风险数据对财务或商誉造成的影响,包括对法律(电子举证E-Discovery)和监管问题的响应。
  2. 数据安全:通过控制活动保护数据资产,包括可获得性、可用性、完整性、连续性、可审计和数据安全。
  3. 隐私:通过制度和合规性监控,控制私人信息、机密信息、个人身份信息(PII)等。 改进流程:
  4. 法规遵从性:有效和持续地响应监管要求的能力。
  5. 数据质量提升:通过真实可信的数据提升业务绩效的能力。
  6. 元数据管理:建立业务术语表,用于定义和定位组织中的数据;确保组织中数量繁多的元数据被管理和应用。
  7. 项目开发效率:在系统生命周期(SDLC)中改进,以解决整个组织的数据管理问题,包括利用数据全周期治理来管理特定数据的技术债。
  8. 供应商管理:控制数据处理的合同,包括云存储、外部数据采购、数据产品销售和外包数据运维。

# 1.2 目标和原则

  数据治理的目标是使组织能够将数据作为资产进行管理。数据治理提供治理原则、制度、流程、整体框架、管理指标,监督数据资产管理,并指导数据管理过程中各层级的活动。为达到整体目标,数据治理程序必须包括以下几个方面。 数据治理目标:

  1. 可持续发展:治理程序必须富有吸引力。它不是以一个项目作为终点,而是一个持续的过程。
  2. 嵌入式:数据治理不是一个附加管理流程。数据治理活动需要融合软件开发方法、数据分析应用、主数据管理和风险管理。
  3. 可度量:数据治理做得好有积极的财务影响,但要证明这一影响,就需要了解起始过程并计划可度量的改进方案。 数据治理基础原则
  4. 领导力和战略:成功的数据治理始于远见卓识和坚定的领导。数据战略指导数据管理活动,同时由企业业务战略所驱动。
  5. 业务驱动:数据治理是一项业务管理计划,因此必须管理与数据相关的IT决策,就像管理与数据有关的业务活动一样。
  6. 共担责任:在所有数据管理的知识领域中,业务数据管理专员和数据管理专业人员共担责任。
  7. 多层面:数据治理活动发生在企业层面和各地基层,但通常发生在中间各层面。
  8. 基于框架:由于治理活动需进行跨组织职能的协调,因此对数据治理项目必须建立一个运营框架来定义各自职责和工作内容。
  9. 原则导向:指导原则是数据治理活动、特别是数据治理策略的基础。把核心原则的阐述和最佳实践作为策略的一部分工作。参考这些原则可以减少潜在的阻力。

# 1.3 数据治理组织

  治理项目的核心词是治理。数据治理可以从政治治理的角度来理解。它包括立法职能(定义策略、标准和企业架构)、司法职能(问题管理和升级)和执行职能(保护和服务、管理责任)。 image-20230716112439767

image-20230716112456044

# 1.4 数据治理运营模型

数据治理运营模型分为集中式、分布式、联邦式三种,各种模式示例如下: image-20230716112526277

# 1.5 数据资产的估值

  数据只有使用时才有价值,当使用数据的经济效益超过数据生命周期管理、风险管理相关成本时,就会显现其价值。可以将公认的会计准则转换为公认的信息原则。 image-20230716112546380

  1. 生命周期管理成本:数据生命周期的大多数阶段涉及成本(包括获取数据、存储、管理和处置)。
  2. 替换成本:在灾难性数据破坏事件或者数据中断时,数据替换或恢复的成本,包括组织内的交易、域、目录、文档和指标信息等。
  3. 市场价值:兼并或收购企业时作为企业资产的价值。
  4. 发现商机:通过交易数据或者通过售卖数据,从数据(商务智能)中发现商机获得的收入价值。
  5. 售卖数据:一些组织为产品或销售将数据打包从数据中获得的洞察。
  6. 风险成本:基于潜在罚款、补救成本和诉讼费用的估价。

# 2 活动

数据治理包含4个活动: image-20230716112557670

# 2.1 规划组织的数据治理(P)

  数据治理工作必须支持业务战略和目标。一个组织的业务战略和目标影响着组织的数据战略,以及数据治理和数据管理在组织的运营方式。   数据治理规划活动包括以下内容:

  1. 执行就绪评估:评估当前组织的信息管理能力、成熟度和有效性,对于制订数据治理的计划至关重要。
  2. 探索与业务保持一致:数据治理项目必须能够被找到并提供特定的价值来为组织作出贡献。
  3. 制定组织触点:数据治理规划中确定了在系统或应用程序开发生命周期中制定组织策略、流程和标准的控制点。一般跟组织的触点包括:采购和合同、预算和资金、法规遵从性、SDLC/开发框架。

# 2.2 制定数据治理战略(C)

  数据治理战略定义了治理工作的范围和方法,交付物包括:

  1. 章程。确定数据管理的业务驱动愿景、使命和原则,包括成熟度评估、内部流程分析及当前问题和成功标准。
  2. 运营框架和职责。定义数据治理活动的结构和责任。
  3. 实施路线图。制定时间计划,其涉及最终发布的制度、指令、业务术语、架构、资产价值评估、标准和程序以及所期望业务和技术流程发生的改变、支持审计活动和法规遵从的交付成果。
  4. 为成功运营制订计划。为数据治理活动描述一个可持续发展的目标状态。

# 2.3 实施数据治理(D)

  治理过程包含了很多复杂性协调工作,需要对治理进行规划,不仅要考虑到组织的变化,而且改变得要简单。最佳方式是创建一个实施路线图,说明不同活动间的关系和整体时间框架。   有一些数据治理工作是基础性的,其他工作依赖于此。这些基础性工作分为初始阶段和持续阶段。高优先级的前期工作包括:

  1. 定义可满足高优先级目标的数据治理流程。
  2. 建立业务术语表,记录术语和标准。
  3. 协调企业架构师和数据架构师,帮助他们更好地理解数据和系统。
  4. 为数据资产分配财务价值,以实现更好的决策,并提高对数据在组织成功中所起作用的理解。

  实施活动包括:

  1. 发起数据标准和规程。
  2. 制定业务术语表:术语表是在组织内部共享词汇的一种方法。开发、记录标准数据定义,可以减少歧义混乱,提升沟通效率。
  3. 协调架构团队协作:企业级数据模型应经数据治理委员会评审、批准并正式采用,与关键业务战略、流程、组织和系统保持一致性。
  4. 发起数据资产估值:数据和信息是具有价值或者可以创造价值的企业资产。赋予数据以货币价值是一项有挑战性的事情。数据治理委员应组织开展相关工作,并为此设置标准。
  5. 嵌入数据治理:数据治理组织的一个目标是将治理活动嵌入到数据作为资产管理相关的一系列流程中。可持续性意味着采取行动,保证流程和资金到位,以确保可持续地执行数据治理组织框架。这一要求的核心是组织接受数据治理。

# 3 工具和方法

  数据治理从根本上讲是关于组织行为的。这不是一个可以通过技术解决的问题。但是,仍需要一些工具支持整个过程。有以下工具可以参考使用: image-20230716112607942

  1. 线上应用/网站:通过中心门户或者协作门户提供核心文档。如数据治理战略、章程等。
  2. 业务术语表:业务术语表是数据治理的核心工具。IT部门要认可业务术语的定义,并将定义与数据进行关联。
  3. 工作流工具:使用强大的工作流工具来管理流程,如实施新的数据治理策略。
  4. 文档管理工具:使用文档管理工具协助管理策略和规程。
  5. 数据治理记分卡:跟踪数据治理活动和制度遵从性的指标集合,通过自动记分卡的形式向数据治理委员会和数据治理指导委员会报告。

# 4 实施指南

  一旦定义了数据治理的规程、制订了运营计划,加上在数据成熟度评估过程中收集数据制定的实施路线图,组织即可启动实施数据治理。数据治理要么起始于一些重大项目(如MDM主数据管理),要么通过区域或者部门试点。大多数推广策略都是渐进式的,很少有直接在整个组织范围内部署的情况。 image-20230716112616878

  1. 组织和文化:数据治理可能存在一些新规则,组织内会有抵触情绪;数据治理是一个持续的过程,也需要组织文化的支持。
  2. 调整与沟通:数据治理团队要有灵活性,并且能够随着条件的变化调整相应的方法。调整与沟通需要的工具有业务/数据战略、数据治理路线图、持续治理案例、数据治理指标。

# 5 度量指标

  数据治理指标关注点有3个:价值体现、有效性、可持续性。 image-20230716112623866

点击跳转:DAMA数据治理目录

#数据治理
上次更新: 2024/07/14, 12:23:26
DAMA数据管理
DAMA数据架构

← DAMA数据管理 DAMA数据架构→

最近更新
01
06.搭建一套源生hadoop、Spark、Flink集群3-Hive安装 原创
04-26
02
搭建一套源生Hadoop、Spark、Flink集群1-环境准备 原创
04-25
03
搭建一套源生hadoop、Spark、Flink集群2-Hadoop安装 原创
04-25
更多文章>
Theme by Vdoing | Copyright © 2019-2024 Evan Xu | MIT License | 粤ICP备2023070487号-1 | 粤公网安备44200102445447
  • 跟随系统
  • 浅色模式
  • 深色模式
  • 阅读模式