数据治理体系完整指南.docx

《数据治理体系完整指南.docx》由会员分享，可在线阅读，更多相关《数据治理体系完整指南.docx（26页珍藏版）》请在第一文库网上搜索。

1、数据治理体系完整指南1数据治理体系22 .元数据31. 1元数据解决的问题32. 2元数据分类33. 3元数据模型成熟度34. 4元数据建设目标和管理手段45. 5元数据管理43 .数据标准53. 3数据标准管理体系涉及思路74. 4数据标准架构体系85. 5管理类数据标准建设原则96. 6数据标准生命周期管理104 .数据建模104 .1概念115 .2数据模型分类114. 3数据模型生命周期125. 4案例125.数据集成126. 1概念127. 2数据集成整体架构136 .数据生命周期136. 1阶段划分137. 2管理要求和手段158. 3管理规范和管理办法157 .数据质量157.

2、1数据质量管理目标157. 2生命周期168. 3数据质量维度169. 4数据质量常用工具178 .数据开发178. 1数据资产179. 2数据服务189 .数据安全1910 .ET11910.1含义2010.2ET1模式2110.3离线和实时231 .数据治理体系数据治理体系内容从两个维度来看：1）数据治理难点痛点：数据脉络不清晰、数据汇聚能力不足、数据管控能力薄弱、数据治理体系不完善、开放形式不完善。2）数据治理5个核心：理、聚、管、治、用。数据治理体系主要包含内容有数据标准、元数据、数据建模、数据集成、数据生命周期、数据质量、数据开放、数据安全及数据应用。关健点业务价值数据技术组织架构和

3、制度数据治理组织架构与制度流程数据治理体系数据标准,元数据数据集成数据生命周期数据开放数据安全数据建模数据质量三松子聊缴据2 .元数据2.1 元数据解决的问题有什么数据-数据是什么-来自何处-如何流转-谁可以访问其本质也是一种数据，开展元数据管理工作是开展数据资产管理的基础。2. 2元数据分类业务元数据：描述数据系统中业务领域相关概念、关系和规则的数据；包括业务术语、信息分类、指标、统计口径等。（从业务角度描述的）技术元数据：描述数据系统中技术领域相关的概念、关系和规则的数据；包括数据平台内对象和数据结构的定义、源数据到目的数据的映射、数据转换加工过程的描述等。管理元数据：描述数据系统中管理领

4、域相关概念、关系、规则的数据；主要包括人员角色、岗位职责、管理流程等信息。2.3元数据模型成熟度1、第一阶段：需要手动管理元数据，即在数据治理流程外需要额外增加的步骤。2、第二阶段:3、第三阶段:业务价值元敷离度自动化,支持渡tur次KmHI层次元1端的口动更新元HaB分散在各业务系换,5RSiHff1元数揖分散于日常的业务和职好理中TtrawajiKiMr2.4元数据建设目标和管理手段wm将元政BNF理与各版本的应用开发设计梯8台.通过硬性控好段,保证ISfiSI.WAttKSIReMR中管EBQK对象H立内在的关联关系,SitM11SSWPSJ!Uft1f1)效富流向的分析为敷密织构U理提

5、供支撑平台,&元JBaRiB源分正上,进行晚fK.保证了元BU8资源的有效与合理刹用制定元敷Im黑相关畿苑Km度时,E1t片户业所有应用系tte用的鲁个方面的元BBB,BW用性，对!MWUKKffi,M8用户体验性等有要的意义ecaV94MXMMM文件“总!(*WO3ffiKMM版本Me公共代皿由M电网初S声时阐VFaejunn*PRBS*.KMMMN*9SK9RMft-ie1ft-w9K3O99*RW!B2artitSWSSafKMffi.用口涉及的弱幽WmKRgnnnnMtw.wwrm的审批戏号,对于一用tw.ewat1ffiiKWItftasmww位，用C的麻分及2物子期曳痰T2.5元数

6、据管理元数据管理方法:在数据探查阶段自动生成元数据。自动构建数据流转元数据。元数据定义职责定位浦峰、分工明相关部门元数据管理部门誉运中心.看业务部相关Im一元数据管理能力:元数据管理和维护版本管理权限管理元数据应用信息统计分析通过采集工具、页面管理等对各类元数据进行管理和维护；提供各类元数据I确调用关系管理提供元数据基线管理、版本制作、版本提交等功畿，并实现与相关版本发布系统或平元数据管理系统采用分类授权、分角色授权等原则，对访问元数据管理系统迸行权限控制根据元数据类81)展示元数据信息包括分布情况、旌蛔mw分析、影响分析提供元数据质.泮估、多维度统it和报表功他、元鹿金花球计:斯名分析等3.

7、数据标准基础数据标准常见的数据标准包含基础数据标准和指标数据标准。指业务流程中直接产生的，未经过DnI和处理的基础业务信息。指标数据标准数据标准指标数据标准是在基础类数据基础上按照一定业务规则加工汇总的数据.主要构成：业务定义+管理信息、+技术属性业务定义：主要是明确标准所属的业务主题以及标准的业务概念，包括标准名称,业务定义、扩展业务定义、业务使用规则、标准来源、相双维领聘管理信息：明确标准的所有者、管理人员、使用部门等内容，从而使数据标准的管理和维护工作有明确的责任主体，保障数据标准的持续更新和改进技术属性：描述数据类型、数据格式、数据长度以及数据来源系统等技术属性，从而能够对信息系统的建

8、设和使用提供指导和约束业务定义管理信息数据标准包含内容包括：主题&分类+标注属性+标准代码现定义和分类主题定义：明确业务主题（如客户）的微念、本质与内涵.主题基础分类：昭确业务主题在客户的分类体系.数据标准核心内容数据项应遵循的标准属性和业务规则的统一定义与解释.包括所属主题、数据项级别、中文名称、英文名称、引用的数据项名称、代码名称、业务定义、定义依据、参考标准、业务主管部门、重要性分类、数据类型、数据长度.标准代码明确数据标准定义中所涉及的代码取值和业务含义.包括代码编号、代码中文名称、代码值、代码项名X、伏蹴述代码值编码规则.3.2.2数据标准类型（举例）不同行业的标准不同，这里仅是举例

9、说明。数据标准类型日期时间蜘秋需襄以日期m当日时间的Ia合格式体现的数揖项.以Jr/挈第瓣期Sa依据人民银行银行数据标准定义规范）中定义的骸行数据标准S9数据类型.日期时间类:如：性别、身份证、金额、手机号码、行业、级别的分级分类的代码等3.3数据标准管理体系涉及思路数据标准来源于业务，服务于业务。依据已有标准进行建设管理数据标准数据标准编制依据m，XT飒系、&，维度将标标签目录基础数据项公共代码T信息化视角,基于已有数据，从业务和流程的角度，盘点基晒据.aw坦松子聊劲据鬓做SX聒标准基础类数据标准：业务化视角指标类数据标准：从管理角度出发数据标准编制依据指标梳理（商业计划理实践）指标数据标准

10、国际标准管理视角，I基于成熟管理体系、经验,11指标数据行业标准同行标准自编标准噌度指标标签IP1曙IB1公捌弋码于福标跳计分析需求，检理后惊相关的维度.基础数据喳、代码值域基于信Je系统现状和规划.an系统共享的重要射爆信息化视角,I基于已有数据，I从业务和流程的角度,盘点基础频基础数据盘点（管理信息柔统/业务信（B系施.）基遮Wg旗哪方据数据标准的制定是一个以业务管理为主导、外部要求为依据、企业现状为基础的兼容过程。循序渐进不企业数州标旭的定义、应用和堆护是全员与.长期、坚持不的过程.数据标准定义只是建立企业级数据标准的开性.标准的质.右S性和可操作性将在数据标准落地应用过程中逐步验证和修

11、正基于行业及企业的业务发康状况，将可展望的前81性要求纳入标准要在满足可预见信息要求所带来的收益和制定及堆炉此数据标椰J成本之间进行平衡内外兼顾 效网标准成bu承促外部标准及监管要求，又施考虑企业业务构色和管理习Ia 数据标准应与国际.国内和行业的折港相适应,与行业标准化过程接轨 数据标准制定时需要全面分析企业现有制度、流程规范和系统现状业务部门全程参与 业宪部门需全程拿与数据项的收桀整理工作 业务部门需全程参与以标准化的数据项的遇选喉工作 业务部门需全程誉与数露标准内容的制定工作全面标准审阅流程鉴于数据如内的要性及跨业务领域的特点,审阅过程要充分征求业务部技才W期方勇楸，对标准进行跨M门交叉

12、评审；丁硼履X的3.4数据标准架构体系通过统一标准和架构规范，统一指标、统一术语、统一模型、统一信息项，解决数据口径解释不清晰、业务和数据理解不一致等问题，实现数据在架构层面的统ft一命8理1.从搞标的业旁属性去划分一-2.分类应该是不值不漏.相对般,并且不止T1g级3.搞标分类-箭蛟强的可犷展性,能等当前和未来的业资发展2.指标的分类开发企业未来的分析类指标是如何划分其分类的312fi329aS3X1SACf1332OMe3DWDC134DWAJi33tDU336分识34f361H!,41MfiIiX412IM考42“43ftSH44BBRe441M442Xfta443K444ewn4.4e

13、卷聚物缴据JW9449S但并非所有基础类数据都要建立标准，纳入标准的数据项需要满足共享性、重要性和可行性的准入原则。3.5管理类数据标准建设原则定义：分析类数据标准的业务含义和所适用的业务场景保持一致。口径：分析类数据标准的业务取值范围、计算方法和编码规则等业务规则保持一直。名称：分析类数据标准中文名称和英文名称均采用统一命名规则，表示相同业务含义的信息项名称应保持一直。参照：各分析类数据标准项标准化时参考的外部标准（包括国际标准、国家标准和行业标准），内部业务制度和业务规范应保持一致。来源：每个分析类数据标准都应有权威的来源系统；其他系统使用该信息时应直接取用权威系统结果，以保持一致。以下为

14、某企业数据标准体系框架示例，分为基础类数据标准和管理类数据标准1.1 客户IMg标准1.2 产品数据标准1.3 to上1.4 交易期8标准J1.6 J6g)tI*17资产数据标准18_I魁91.10公共代码数据标准2.1 分析类指标定义框架2.2 分析类指标分类体系2.3 分析妁8标维度体系础类效据日常业务开展过程中所产生的具有共同业务特征的基础性数据,如客户、产品、协议、交易等.管理类败据为满足内部管理需要,在基础性数馨黠皆送海缄梯常工的数据.3.6数据标准生命周期管理4.数据建模4.1概念企业级数据模型建设方法：从全局入手，涉及标准化数据模型，构建统一的数据模型管控体系，丰富和完善数据实体相关属性信息，梳理数据实体之间的逻辑关系，最终形成不