《基于十步法的统一数据模型设计全流程管理实践.docx》由会员分享,可在线阅读,更多相关《基于十步法的统一数据模型设计全流程管理实践.docx(22页珍藏版)》请在第一文库网上搜索。
1、基于十步法的统一数据模型设计全流程管理实践主报告一、实施背景-1-(一) 加快泛在电力物联网企业数据中台建设的需要-1-(二) 积极打造能源行业国际一流大数据中心的需要-2-(三) 完善统一数据模型设计方法及提高效率的需要-3-二、内涵-3-三、主要做法-5-(一) 提出务实的工作理念,奠定全面流程管理基础-5-(二) 确立先进的指导思想,促进工作模式渐进优化-6-(三) 实施创新的设计方法,提升模型设计管理实效-7-(四) 构建完善的管理工具,支撑多级协同管控机制-14-(五) 深化模型的应用验证,保障建设成果有效沉淀-17-四、实施效果-19-(一) 有效支撑企业战略,取得了社会经济效益-
2、19-(二) 优化业务解决方案,实现了管理模式转变-20-(三) 解决深层根本问题,提高了持续发展能力-21-总公司(以下简称“公司”)提出了“三型两网、世界一流的战略目标,即打造枢纽型、平台型和共享型企业,建设运营坚强智能电网和泛在电力物联网,加快建设具有全球竞争力的世界一流能源互联网企业。为进一步统一思想、提高认识、攻坚克难,加快推进新战略落地实施,公司成立直属单位总公司大数据中心(以下简称“大数据中心”大数据中心以“打通数据壁垒、激活数据价值、发展数字经济、支撑公司三型两网、世界一流能源互联网企业建设”为使命,是公司数据管理的专业机构和数据共享服务的创新平台,负责为公司建设“三型两网、世
3、界一流”能源互联网企业提供数字化支撑。公司将打造数据中台、挖掘数据价值作为泛在电力物联网建设的重点任务之一,以数据分析应用需求为导向,按需推动数据接入和整合贯通,沉淀共性数据服务能力。大数据中心承担打造企业数据中台的重要责任,建设数据中台要求健全数据管理体系,强化统一数据模型(SG-CIM)和企业级主数据应用,面向各专业、各基层单位和外部合作伙伴提供开放共享服务。一、实施背景(-)加快泛在电力物联网企业数据中台建设的需要公司以大力发展新兴业务、迭代打造企业中台、协同推进智慧物联、同步推进组织优化为建设思路,以充分应用先进信息通信技术,实现电力系统各个环节万物互联、人机交互为核心目标,全面建设泛
4、在电力物联网。打造数据共享服务是泛在电力物联网建设的重点任务,要求以企业级共享服务为核心,逐步沉淀共性业务和数据服务能力,打造企业中台,支撑公司级跨专业业务协同以及对外业务应用构建,推进信息系统架构向“微应用、大中台、强后台”演进。统一数据模型是实现企业中台战略的重要基础支撑,数据中台建设要求基于统一数据模型,对数据进行抽取、清洗、转换和整合,实现数据标准化、集成化、标签化,沉淀共性数据服务能力,快速响应业务需求。数据中台建设目前处于设计建设阶段,近期工作重点完成营配调贯通、采集量测数据、非结构化数据、传感器设备、产业金融、外部数据等模型扩充完善,开展统一数据模型SG-QM的常态完善设计和管控
5、工作。(二)积极打造能源行业国际一流大数据中心的需要成立大数据中心是公司贯彻国家战略部署、发挥央企带头作用的实际行动,是服务能源生产和消费革命、满足人民美好生活需要的重要举措,也是推动企业转型升级,增强公司发展动能的迫切需要。大数据中心聚焦大数据前沿技术及应用,积极做好系统谋划和整体设计,打通数据壁垒,实现数据的高效应用和增值服务,为电网业务和新兴业务提供平台化支撑,近期明确数据融合共享、大数据分析与数据服务、数字产品开发与运营、数据安全体系建设、信息化设计技术中心工作承接、支撑平台和工具建设、人员补充与人才队伍建设等多项重点任务,远期目标为建成能源行业国际一流大数据中心,要求建成统一标准、统
6、一模型的数据中台。通过统一数据模型确立统一数据标准,是大数据中心的战略基石、战略要求和战略手段,是打造能源行业国际一流大数据中心的重要基础要素。不断优化统一数据模型的设计实现方法,是大数据中心实现近期重点工作任务的重要落脚点,同时也是支撑大数据中心完善内部管理机制的重点要求。(=)完善统一数据模型设计方法及提高效率的需要统一数据模型的发展是一个不断迭代的过程,截至目前已经发布4个正式版本、50余个小版本,但仍存在一些不足。从覆盖范围来看,选取试点公司和在运系统对现有业务并未全面涉及,对泛在电力物联网新兴业务支撑程度不足,对外部数据、非结构化数据的纳入有待提高;从模型设计来看,各域设计人员对模型
7、的认知和理解不一致,导致模型设计标准难以制定、设计水平参差不齐;从应用角度来看,由于对象去重不够彻底、实体关系不够准确、数据溯源不够完整等问题,源系统数据与统一数据模型的映射程度仍有待提高,对业务协同的支撑仍存在不足;从管控角度来看,亟需通过建设先进的在线管理工具,大力提高管理效率和工作效率。上述问题归根结底是模型设计过程的管理问题。公司战略目标对统一数据模型提出了更高要求,公司启动全域综合示范工作,以数据模型设计为首要任务,同时开展数据整合实施、综合应用示范及数据资源管理,要求进一步完善统一数据模型设计方法,提高设计质量和效率。二、内涵基于“十步法”的统一数据模型设计全流程管理,以国际行业标
8、准和行业最佳实践为理论指导,以重点解决公司业务协同、数据共享为使命的统一数据模型SG-CIM4.0版本设计过程为管理对象,以支撑公司全业务统一数据中心及多场景、微应用的统一系统建设为目标。秉持“从业务中来、到业务中去的设计理念和“企业级、业务协同、数据共享、对标先进、柔性设计”的设计思想,采用“业务需求驱动自顶向下”和“基于现状驱动自底向上”相结合的设计方法,将统一数据模型设计全流程归纳为十个关键步骤。以一体化顶层设计成果和“三型两网”业务需求作为基本输入,通过与国际标准和行业最佳实践模型对标,参考在运信息系统数据字典,设计数据对象和数据项,通过跨域集中设计经过去重、溯源、认责,最终形成逻辑模
9、型和概念模型,通过创建物理表及关联关系,识别主、外键,建立统一编码,并建立明细层物理模型与贴源层映射关系,最终形成物理模型。其本质是一套以着眼于未来模型驱动应用,基于持续迭代实现模型完善提升的业务全流程管理方法。图1“十步法”设计模式及步骤三、主要做法(-)提出务实的工作理念,奠定全面流程管理基础要对统一数据模型设计实施全流程管理,首先要提出务实的模型设计理念,通过该理念牵引和贯穿模型设计工作全过程,为后续实施全流程管理奠定基础。数据模型设计和业务流程管理的思想本身就来自于业务,最后也必将服务于业务,并在业务应用中发展和完善,统一数据模型设计全流程管理对此必须具备清晰认知。数据中台要求基于统一
10、数据模型沉淀共性数据服务能力,快速响应业务需求,支撑数据融通共享、分析挖掘和数据运营,形成数据业务化、业务数据化的动态反馈闭环,进而创造业务价值。在统一数据模型SG-CIM4.0设计伊始,大数据中心提出“从业务中来、到业务中去”的设计理念,促进数据模型和业务应用的融合发展,形成模型设计和业务验证的完整闭环。具体包括基于业务需求分析,梳理核心业务数据对象,构建概念模型;结合业务应用需求,进行逻辑模型、物理模型设计;基于示范应用场景,进行模型验证;通过模型应用,收集需求,进行持续迭代、优化完善,并进行模型版本更新发布。(二)确立先进的指导思想,促进工作模式渐进优化统一数据模型设计作为数据中台建设的
11、重要基础,面向公司“三型两网”世界一流能源互联网企业建设大局,要反映公司未来全业务、全数据,并服务数据共享和业务协同。确立先进的指导思想,是确保统一数据模型设计工作方法和管理模式持续渐进优化完善并满足上述要求的关键。1 .企业级的特色设计思想SG-CIM4.0模型设计,以企业全局视角,针对企业核心业务流程,进行核心业务数据对象抽象;围绕跨专业数据共享和横向业务贯通需求,进行企业数据建模。模型秉持“企业级”设计思想,构建企业统一数据模型,指导企业业务信息系统建设,为企业数据整合和数据分析应用提供支撑。2 .业务协同的特色设计思想SG-C1M4.0模型设计,通过理清部门职责、确定数据源头、去除重复
12、定义、统一模型设计,从而打破专业壁垒,消除信息断点,实现企业业务协同,为“一平台、一系统、多场景、微应用”核心理念提供支撑。3 .数据共享的特色设计思想SG-CIM4.0模型设计,通过统一语义、统一编码、统一源头、统一规则、统一存储,从而消除歧义、统一标准,实现企业数据共享。4 .对标先进的特色设计思想SG-CIM4.0模型设计对标IEC国际标准和主流产品标准,对企业标准编码进行统一编码。参照标准实现电网资产资源分离,参照标准补充调整二级域,优化实体及关系,对属性进行唯一性管理,建立企业主数据清单。5 .柔性设计的特色设计思想SG-CIM4.0模型设计,秉持“柔性设计”思想,依托现状、兼顾差异
13、、对标先进、持续迭代完善、面向未来发展。保障核心架构稳定,并应对企业管理变化,兼顾企业新兴业务,具有适应性和扩展性,实现模型设计“不翻烧饼”。(=)实施创新的设计方法,提升模型设计管理实效SG-C1M4.0模型设计方法共包含十个步骤,因而概括为“十步法”。具体以一体化顶层设计成果、业务部门需求作为输入,通过与SG-IEC、SG-ERP标准模型对标,参考多套在运系统数据字典,设计数据对象和数据项,通过跨域集中设计经过去重、溯源、认责,最终形成逻辑模型和概念模型。通过创建物理表及关联关系,识别主、外键,建立统一编码,并建立明细层物理模型与贴源层映射关系,最终形成物理模型。基于“十步法”的统一数据模
14、型设计全流程管理,在组织管理、流程机制等方面,有助于对公司的多业务、多部门协作能够提供参考借鉴经验。1 .全域核心逻辑模型框架结合一体化设计成果和在建在运系统现状,梳理核心业务,明确核心业务范围及涉及的统推业务系统,形成核心业务系统清单。基于核心业务系统清单,开展数据字典收集梳理工作,同时完成表、字段、关联关系及涉及的编码表等业务描述信息的补充完善工作,形成核心业务系统数据字典。基于一体化设计成果,识别出核心业务数据对象及跨域数据对象,结合核心业务系统数据字典补充核心业务对象属性,确定数据表唯一性,统一数据属性含义、名称及相关编码规则等信息,明确数据来源、所属业务部门以及是否主数据对象等信息。
15、针对存在争议部分,报送信息通信管理组织协商解决,最终形成详尽的数据对象、属性及关联关系,填写形成核心业务数据对象清单(基础版)和主数据对象建议清单成果。将初步形成的核心业务数据对象清单(基础版)下发至试点单位,由试点单位结合本省实际业务情况与核心业务数据对象清单(基础版)差异对比分析,并形成全域核心业务数据对象清单差异清单提交总体设计组,总部设计组结合试点单位的全域核心业务数据对象清单差异清单,对核心业务对象清单进一步修订完善,最终形成核心业务数据对象清单(确认版),为概念数据模型设计完善奠定基础。通过充分借鉴对标业界成熟、先进、权威的理念和实践,与行业最佳实践和IEC国际标准(61970/6
16、1968/61325)对标,提高了模型设计的质量水平和效率,确保模型设计的先进性、适用性、稳定性通过统筹考虑多维精益管理体系变革、智慧供应链、新能源汽车等新兴业务需求,提高模型设计覆盖面,满足公司新时代战略目标;通过跨域集中设计,打破原部门专业间的信息壁垒,形成统一的、企业级的、全域的数据模型,实现全域核心业务对象全覆盖;通过规范命名、形成全域统一字典库,最终形成SG-CIM3.1o2 .分域补充完善实体类及关系基于全域核心业务数据对象清单,分别对照国际标准IEC61970/61968/62325.SG-ERP模型和SG-CIM3.0中实体和属性,与核心业务数据对象和属性建立映射关系,并将映射结果填写到全域核心业务数据对象清单中。如存在不能映射的数据项,则作为本次逻辑模型扩充完善的