首页 企业主数据管理技术白皮书

企业主数据管理技术白皮书

举报
开通vip

企业主数据管理技术白皮书企业主数据管理技术白皮书前言主数据是数据之源,是数据资产管理的核心,是信息系统互联互通的基石,是信息化和数字化的重要基础。党的十九大报告提出“推动互联网、大数据、人工智能和实体经济深度融合”。以大数据为代表的新技术得到迅猛发展,并渗透到各行各业,企业信息化也快速回归到数据的本身。企业家使用数据整合劳动力、土地、资本三种生产要素进行数字化转型。为了加快实体经济数字化转型,促进新一代信息技术与实体经济深度融合,发挥数据对企业转型升级的重要作用,数据资产管理应运而生。主数据是指满足跨部门业务协同需...

企业主数据管理技术白皮书
企业主数据管理技术白皮书前言主数据是数据之源,是数据资产管理的核心,是信息系统互联互通的基石,是信息化和数字化的重要基础。党的十九大报告提出“推动互联网、大数据、人工智能和实体经济深度融合”。以大数据为代表的新技术得到迅猛发展,并渗透到各行各业,企业信息化也快速回归到数据的本身。企业家使用数据整合劳动力、土地、资本三种生产要素进行数字化转型。为了加快实体经济数字化转型,促进新一代信息技术与实体经济深度融合,发挥数据对企业转型升级的重要作用,数据资产管理应运而生。主数据是指满足跨部门业务协同需要的、反映核心业务实体状态属性的企业(组织机构)基础信息。主数据意义一是建立企业基础数据共享“语言”,打破各系统信息交互壁垒,可以支撑客商、物料、设备、指标等重要基础数据能够在多个系统内充分共享、高度复用;二是通过制定主数据 标准 excel标准偏差excel标准偏差函数exl标准差函数国标检验抽样标准表免费下载红头文件格式标准下载 ,在系统建设中规范使用数据标准,进而为业务报表编制、数据统计分析提供基础条件;通过主数据建设,将为企业在数据应用与管理奠定基础。主数据管理是一系列规则、应用和技术,用以协调和管理与企业的核心业务实体相关的系统记录数据。主数据管理重要性是消除数据冗余;提升数据处理效率;提高公司战略协同力。在数据资产管理的领域里,主数据的管理是最为基础的部分,因为主数据是可以跨业务、跨组织、跨系统被重复利用的数据,通过构建准确、唯一、权威的数据来源建立企业主数据标准管理体系,是提高企事业单位数据质量和数据资产价值的关键因素。然而主数据的管理还处于摸索阶段,面临诸多挑战。一是认识不统一,领导不重视。主数据的概念尚未得到广泛普及,企事业单位对主数据管理不够重视,缺乏顶层设计。二是各自为政,标准不统一。企事业单位内部难以在标准和规则层面达成一致,主数据代码难统一。三是历史包袱重,落地实施难。各企事业单位中存在着信息系统庞杂、建设年代跨度久远等问 快递公司问题件快递公司问题件货款处理关于圆的周长面积重点题型关于解方程组的题及答案关于南海问题 ,一些早期的系统数据标准化程度不高,数据清洗难、改造成本高,给主数据应用集成带来较大的困难。四是通用基础主数据开放性差,获取困难。行政区划、城市代码、功能地点代码等通用基础主数据缺乏高质量的数据来源和便捷可靠的获取渠道。目录编委会.............................................................................II前言.............................................................................III图表目录...........................................................................VI一、主数据管理概述................................................................1(一)什么是主数据.................................................................21.主数据定义..................................................................22.主数据和其他数据的关系......................................................53.主数据的类型................................................................6(二)什么是主数据管理.............................................................6(三)主数据管理的重要性...........................................................7二、主数据管理的主要内容..........................................................8(一)主数据管理标准体系...........................................................8(二)主数据管理保障体系..........................................................101.主数据管理组织.............................................................102.主数据 管理制度 档案管理制度下载食品安全管理制度下载三类维修管理制度下载财务管理制度免费下载安全设施管理制度下载 .............................................................113.主数据管理流程.............................................................114.主数据应用管理.............................................................125.主数据管理 评价 LEC评价法下载LEC评价法下载评价量规免费下载学院评价表文档下载学院评价表文档下载 .............................................................13(三)主数据管理工具..............................................................14三、主数据管理的实施要点.........................................................16(一)主数据规划..................................................................18(二)制定主数据标准..............................................................19(三)建立主数据代码库............................................................20(四)搭建主数据管理工具..........................................................21(五)构建运维体系................................................................22(六)推广贯标....................................................................22四、总结和展望...................................................................22附录一:术语、定义和缩略语.........................................................25附录二:主数据管理的实践案例.......................................................26(一)国家开发投资公司主数据管理案例...............................................26(二)中国外运股份有限公司主数据管理案例...........................................31(三)中国兵器工业集团某研究所主数据管理案例.......................................35(四)新兴际华集团有限公司主数据管理案例...........................................39(五)陕西延长石油(集团)有限责任公司主数据管理案例...............................43(六)中国一重集团有限公司主数据管理案例...........................................47(七)中国交建上海振华重工(集团)股份有限公司主数据管理案例.........................51(八)恒力集团公司主数据管理案例...................................................56(九)北京燃气集团主数据管理案例...................................................59(十)陕西飞机工业(集团)有限公司主数据管理案例...................................64(十一)安徽省投资集团控股有限公司主数据管理案例................................68(十二)中国航天科工集团有限公司主数据管理案例..................................72(十三)某政务主数据管理案例...................................................76图表目录图1主数据与元数据、交易数据的关系..............................................5图2主数据管理工具功能架构....................................................15图3主数据实施要点............................................................17图4国投集团主数据建设总体架构................................................28图5国投集团主数据建设蓝图....................................................30图6中国外运主数据标准体系....................................................33图7中国外运主数据管理工具功能架构............................................33图8主数据管理路线图.........................................................36图9新兴际华集团主数据建设阶段................................................41图10新兴际华集团主数据管理系统应用集成方案...................................43图11延长石油主数据项目实施方案...............................................46图12一重集团主数据管理系统集成对接情况.......................................51图13振华重工MDG一期项目实施时间表..........................................53图14振华重工主数据标准管理流程...............................................54图15北京燃气集团数据资源管理体系.............................................64图16某省数据实现方案.........................................................78图17数据管理治理平台.........................................................81表1主数据管理评价考核指标....................................................14VI一、主数据管理概述党的十九大报告提出要“推动互联网、大数据、人工智能和实体经济深度融合”。中共中央总书记习近平主持中共中央政治局就实施国家大数据战略学习时强调“大数据发展日新月异,我们应该审时度势、精心谋划、超前布局、力争主动”。进一步突出了大数据作为国家基础性战略性资源的重要地位,掌握丰富的高价值数据资源日益成为抢占未来发展主动权的前提和保障。伴随着大数据的深入推进,数据的资产化成为日益明显的趋势。越来越多的企业正在将数据考虑为资产,甚至有人建议将其计入资产负债表。但是对比实物资产,对于数据资产的管理还处于非常原始的阶段。企业数据资产管理仍然存在数据质量难以保障、数据垃圾难以处理、数据转化效率低下等管理痛点。如何充分挖掘发挥数据价值的方法论和参考框架是关键问题也是难点问题。科学的数据资产管理模式对于企业具有非常重要的意义。现有的方法多种多样,其中“主数据管理”是数据资产管理实践方式的重要切入方法之一,其建设策略是从解决核心业务实体数据的质量和业务协同入手,推动生产环节在客户、物料、组织机构、产品、统一编码等方面保持一致。从主数据入手开展数据资产管理实践目标明确、建设周期较短,还能够保障关键数据的唯一性、一致性及合规性。从IT建设的角度,主数据管理可以增强IT结构的灵活性,构建覆盖整个企业范围内的数据资产管理基础和相应规范,并且更灵活地适应企业业务需求的变化。此外,主数据质量的提高也能够为后期数据集成和数据整合打下良好的基础。主数据及主数据管理建设模式存在一定的难点和挑战,如主数据管理进程需要修改现有的相关生产业务过程和系统,需要从管理学的角度充分调动业务部门密切配合。主数据管理模式要求业务间有表单数据交换,因此短期内会使得信息架构发生变化,甚至变得更加复杂。主数据及主数据管理建设模式对组织的业务运营效率和信息决策周期要求较高。政府政务、能源化工、装备制造、交通物流、医疗、综合性投资企业等不同行业往往需要处理来自组织内不同业务单元、专业领域、信息系统的主数据问题,关注数据密集关键部位的业务运作状态,对关键事件和责任进行追溯,此外该类企业还关注企业的关键生产环节(如:制造、生产、技术等)的效率提升、扩展性和灵活性。因此,企事业单位大量采用以主数据管理为核心的管理实践模式来实现数据资产管理。为了使读者更加理解白皮书的内容,本章首先阐述主数据及主数据管理的内涵、分类与重要性。(一)什么是主数据1.主数据定义主数据(MDM:MasterData):指满足跨部门业务协同需要的、反映核心业务实体状态属性的组织机构的基础信息。主数据相对交易数据而言,属性相对稳定,准确度要求更高,唯一识别。主数据具有以下几个方面的特征:①超越部门。主数据不是那种局限于某个具体职能部门的数据库。主数据是满足跨部门业务协同需要的,是各个职能部门在开展业务过程中都需要的数据,是所有职能部门及其业务过程的“最大公约数据”。②超越流程。主数据不依赖于某个具体的业务流程,但却是主要业务流程都需要的。主数据的核心是反映对象的状态属性,它不随某个具体流程而发生改变,而是作为其完整流程的不变要素。③超越主题。与信息工程方法论①中通过聚类方法选择主题数据不同,主数据是不依赖于特定业务主题却又服务于所有业务主题的有关业务实体的核心信息。④超越系统②。主数据管理系统是信息系统建设的基础,应该保持相对独立,它服务于但是高于其它业务信息系统,因此对主数据的管理要集中化、系统化、规范化。⑤超越技术。由于主数据要满足跨部门的业务协同,因而必须适应采用不同技术规范的不同业务系统,所以主数据必须应用一种能够为各类异构系统所兼容的技术条件。从这个意义上讲,面向微服务架构为主数据的实施提供了有效的工具。此外,业内对主数据还有其他定义和解释。国家标准GB/T36073-2018《数据管理能力成熟度评估模型》中对主数据的定义是“主数据是组织中需要跨系统、跨部门进行共享的核心业务实体数据”③。IBM公司在其有关主数据管理的红皮书《MasterDataManangement:RapidDeploymentPackagefor①高复先,《信息资源规划——信息化建设基础工程》②王波等,通过标准化主数据实现高校数据交换,《管理技术》,2008年第12期。③国家标准GB/T36073-2018《数据管理能力成熟度评估模型》MDM》认为,所谓主数据是有关客户、供应商、产品和账户的企业关键信息;有观点将主数据定义为“表示‘跟踪事物状态’的数据”④。国际数据管理协会(DAMA,DataManagementAssociationInternational)在2009年发布的数据管理知识体系DMBOK1.0对主数据作了如下定义:主数据是关于业务实体的数据,这些实体为业务交易提供关联环境。业务规则通常规定了主数据格式和允许的取值范围。主数据是关于关键业务实体的权威的、最准确的数据,可用于建立交易数据的关联环境。主数据值被认为是“黄金”数据⑤。主数据与组织机构的业务性质密切相关,因而不同的业务组织所需要的主数据存在着显著差异。例如,对于ERP系统的客户,供应商、物料、BOM(BillOfMaterial)、产品、合同、订单等都应该是最基础的数据;对于项目管理系统,项目信息则是最基本的基础数据;而对于CRM系统,销售项目是最基本的基础数据。下面是物料主数据的例子。④IBM公司红皮书《MasterDataManangement:RapidDeploymentPackageforMDM》⑤TheDAMAGuidetotheDataManagementBodyofKnowledge什么是物料主数据?设备物资包含企业工程项目建设、投资、日常业务运行管理等各方面涉及到的设备物资,按照企业行业的物料特点制定分类原则。(1)编码原则:简单性、唯一性、分类合理性、可扩展性(2)代码结构:物料分类结构通常可以分为三层,即大类、中类、小类。分类代码采取等长数字型层次结构代码方式,表示物资的大类、中类和小类(3)分类原则:一是以最稳定的本质属性或特征作为分类的基础和依据。二是通常以自然属性为第一分类原则,适当考虑用途和管理的方便。三是应满足科学性、稳定性、分类清晰、不交叉不混淆的要求。(4)物料描述规则物料描述是区分不同物料的依据,是判断新增条目重复性的唯一判断条件。所以科学、合理的描述规则,是保证“一物一码”的前提条件,其对于整个信息代码编码体系的长期稳定运行至关重要。物料描述模版是具体物料描述规则的定义,主要解决物料描述的规范化问题。包括物料主要自然属性的确定、取值范围和相互关系。大部分小类一个小类对应一个模板,有些小类可能共用一个模板或一个小类对应几个模板。2.主数据和其他数据的关系主数据及主数据管理往往和其他已有的概念混在一起,从而影响人们对主数据与主数据管理的本质的认识。本文已经在前面就主数据的概念进行了分析,为了加深理解,将分析主数据与元数据、主数据与交易数据这两个概念的区别和联系。图1主数据与元数据、交易数据的关系(1)主数据和元数据主数据和元数据是两个完全不同的概念。元数据是指公司数据资产管理的基础,是关于“数据的数据”,例如数据类型、数据定义、数据关系等,相当于数据表格中的表头信息,是一个相对客观的概念。而主数据是从元数据中挑选出来的,表征公司业务运行的关键、通用型数据,是一个相对主观的概念。它不仅仅只是表头信息,而是包括实例数据。例如公司的产品列表、客户列表、分公司地址信息等。(2)主数据和交易数据交易数据也是基于元数据衍生而来的,反应公司实时业务记录的数据,同样是实例数据。主数据是相对稳定的,静止不变或者是一段时间内静止不变的数据,而交易数据则是实时变化的数据,往往描述的是某一个时间点所发生的交易行为。例如客户订单、存货跟踪、销售记录、售后事件等。一个主数据可能会跟多个交易数据有关联,而一个交易数据可能又会对主数据产生影响。举例来说,航空公司中,“客户本年度飞行里程”是一个主数据,而“客户每次飞行记录”,则是交易数据,当交易数据“客户每次飞行记录”累积到一年时,主数据“客户本年度飞行里程”便会产生更新。3.主数据的类型主数据主要包括配置型主数据和核心主数据。具体说明如下:(1)配置型主数据配置型主数据是描述业务或核心主数据属性分类的参考信息,会在整个组织内共享使用。一般依据国际标准、国家标准、行业标准或企业标准和相关规范等,在系统中一次性配置使用的基础数据,例如国家、民族、性别等规范性表述。配置型主数据相对稳定,不易变化。(2)核心主数据核心主数据指用来描述企业核心业务实体的主数据,是企业核心业务对象、交易业务的执行主体,如产品、物资、设备、组织机构、员工、供应商、客户、会计科目等。核心主数据是企业信息系统的神经中枢,是业务运行和决策分析的基础。核心主数据是相对“固定”的,变化缓慢。(二)什么是主数据管理主数据管理(MDM,MasterDataManagement)是一系列规则、应用和技术,用以协调和管理与企业的核心业务实体相关的系统记录数据⑥。⑥《数据资产管理实践白皮书(3.0)》主数据管理的关键活动包括:理解主数据的整合需求,识别主数据的来源,定义和维护数据整合架构,实施主数据解决方案,定义和维护数据匹配规则,根据业务规则和数据质量标准对收集到的主数据进行加工清理,建立主数据创建、变更的流程审批机制,实现各个关联系统与主数据存储库数据同步,方便修改、监控、更新关联系统主数据变化。主数据管理通过对主数据值进行控制,使得企业可以跨系统的使用一致的和共享的主数据,提供来自权威数据源的协调一致的高质量主数据,降低成本和复杂度,从而支撑跨部门、跨系统数据融合应用。(三)主数据管理的重要性主数据建设在企业信息化战略中处于核心地位,处于基础支撑地位,是基础数据的汇集地,确保目标系统数据的一致和唯一。主数据管理主要有以下三点价值:消除数据冗余:不同部门按照自身需求获取数据,容易造成数据重复存储,形成数据冗余。而主数据打通各业务链条,统一数据语言,统一数据标准,实现数据共享,最大化消除了数据冗余。提升数据处理效率:各部门对于数据定义不一样,不同版本的数据不一致,一个核心也为主体有多个版本的信息,需要大量人力成本、时间成本去整理和统一。通过主数据管理可以实现数据动态自动整理、复制,减少人工整理数据的时间和工作量。提高公司战略协同力:通过主数据的一次录入、多次引用,避免一个主数据在多个部门和线条重复录入。数据作为公司内部经营分析、决策支撑的“通行语音”,实现多个部门统一后,有助于打通部门、系统壁垒,实现信息集成与共享,提高公司整体的战略协同力。二、主数据管理的主要内容主数据管理的主要内容包括“两体系、一工具”,即主数据管理标准体系、主数据管理保障体系和主数据管理工具。其中,主数据管理标准体系是主数据管理工作的重中之重,主数据管理保障体系为主数据管理保驾护航,主数据管理工具确保主数据管理有效落地。(一)主数据管理标准体系主数据管理标准体系是主数据管理工作的重中之重,通过主数据标准化,才能为实现部门和系统间的数据集成和共享,打通企业横向产业链和纵向管控奠定数据基础。主数据标准管理体系包含业务标准(编码规则、分类规则、描述规则等)、主数据模型标准。主数据标准管理体系在建设梳理的过程中,一般会衍生出一套代码体系表或称主数据资产目录。主数据业务标准是对主数据业务含义的统一解释及要求,包括主数据来源、主数据的管理级次、统一管理的基础数据项、数据项在相关业务环境中产生过程的描述及含义解释、数据之间的制约关系、数据产生过程中所要遵循的业务规则。主数据业务规则包含主数据各数据项的编码规范、分类规则、描述规则等。•编码规则:主数据代码的编码规则。例如:物料代码采取采用“1”开头的8位无含义数字流水码。•分类规则:依据相关业务环境和管理需求形成分类规则。例如:物料分类根据物料的自然属性及所包括范围的大小,将物料分为大、中、小三类。•描述规则:又称命名规范。例如:物料描述规则具体物料描述规则的定义,主要解决物料描述的规范化问题。主数据模型标准包含:主数据逻辑模型和主数据物理模型。•主数据逻辑模型:将高级的业务概念以主数据实体/属性及其关系的形态在逻辑层面上更详细的表达出来,主要的表现形式是ERD(实体关系图)。•主数据物理模型又称主数据的存储结构表。业务在应用环境中对数据的统一技术要求,包括对数据长度、数据类型、数据格式、数据的缺省值、可否为空的定义、索引、约束关系等设计要素,保证数据模型中设计的结果能够真正落地到某个具体的数据库当中,并提供了系统初始设计所需要的基础元素,以及相关元素之间的关系。主数据代码体系表:在某些领域内,又称主数据资产目录。是描述企事业单位信息化建设过程中所使用的主数据代码种类、各类主数据代码名称、代码属性(分类、明细、规则等)、采(参)标号及代码建设情况的汇总表,是企业主数据代码查询和应用的依据,同时也是主数据代码的全局性和指导性文件。主数据代码体系表主要结合了企业的经营管理特点,服务于企业信息化建设,主要包括两部分内容,第一是企业信息代码体系表的框架结构以及分类,第二是所有分类下的信息代码标准明细以及建设情况。(二)主数据管理保障体系主数据管理需要有配套的管理保障体系保驾护航。通过主数据管理组织进行统一领导。确定主数据指导思想、目标和任务,协调解决主数据管理相关的重大问题。需要数据标准化的归口管理部门,负责标准化的统一规划、综合管理。需要业务组由相关事业部和职能部门组成。并通过配套主数据相关制度、流程、应用管理和评价为主数据管理保驾护航。主数据管理保障体系包括主数据管理组织、制度、流程、应用及管理评价五部分。1.主数据管理组织主数据管理组织主要包括企业内各类主数据的管理组织架构、运营模式、角色与职责规划,通过组织体系规划建立明确的主数据管理机构和组织体系,落实各级部门的职责和可持续的主数据管理组织与人员。典型的主数据管理组织主要包含以下三层组织架构:(1)决策层:设立主数据领导小组,一般由企事业单位信息化领导小组成员组成,对主数据标准化工作进行统一领导确定指导思想、目标和任务,协调解决标准化相关的重大问题。(2)管理层:在领导小组的统一领导下,按照“归口管理,分工负责”的原则,设立主数据联合工作组,该工作组为常设组织,主要由主数据标准化办公室、业务组和技术组共同组成。•主数据标准化办公室设在信息部门,信息部门是主数据标准化的归口管理部门,负责主数据标准化的统一规划、综合管理,负责监督、检查、统一发布的主数据标准,负责标准的培训、宣贯等工作。•业务组由职能部门相关业务专业人组成,负责主数据标准的需求收集、标准制定、标准审核、应用情况监督、检查等工作。•技术组由信息部门技术人员组成,负责日常运维和技术支持,与业务组一起负责提出主数据标准制修订的技术方案,负责标准在各业务系统中的应用和贯标。(3)执行层:包括企业总部和下属企业专职及兼职主数据管理员组成。负责主数据在本单位的贯彻落实、应用检查工作;负责本单位主数据需求的收集、审核、提报工作;负责本单位主数据的培训、宣贯和日常维护等工作。2.主数据管理制度主数据管理制度规定了主数据管理工作的内容、程序、章程及方法,是主数据管理人员的行为规范和准则,主要包含各种管理办法、规范、细则、手册等。可参考的主数据管理制度主要包含:•《主数据管理办法》•《主数据标准规范》•《主数据提案指南》•《主数据维护细则》•《主数据管理工具操作手册》3.主数据管理流程主数据管理流程是提升主数据质量的重要保障,通过梳理数据维护及管理流程,建立符合企业实际应用的管理流程,保证主数据标准规范得到有效执行,实现主数据的持续性长效治理。主数据管理流程可以以管理制度的方式存在,也可以直接嵌入到主数据管理工具中。主数据管理流程主要包含以下三个方面的内容:(1)主数据业务管理流程:对主数据的申请、校验、审核、发布、变更、冻结、归档等进行全生命周期管理,满足主数据在企业深入应用的不同管理需求。(2)主数据标准管理流程:通过对主数据标准的分析、制定、审核、发布、应用与反馈等流程进行设计,保证主数据标准的科学、有效、适用。(3)主数据质量管理流程:对主数据的创建、变更、冻结、归档等业务过程进行质量管理,设计数据质量评价体系,实现数据质量的量化考核,保障主数据的安全、可靠。4.主数据应用管理主数据应用管理是保障主数据落地和数据质量非常重要的一环。主数据应用主要包含三部分内容:明确管理要求、实施有效的管理、强化保障服务。(1)明确管理要求:制定主数据应用管理制度规范,对主数据的应用范围、应用规则、管理要求和考核标准做出明确规定,并以此为依据,对主数据应用进行有效管理。•应用范围:每一类主数据都要有适用范围的规定,具体应用时必须按照适用范围来执行,对应用中出现的不适用的情况要有应对机制。•应用规则:包括数据同步规则、代码映射、归并和转换规则、异常处理规则等,对代码映射、归并和转换规则,要有相应的原数据定义和记录。•管理要求:包括管理岗位和职责、管理流程、管理指标和考核要求。•考核标准:规定主数据应用考核标准,包括覆盖度、准确度、及时性、有效性、安全性等。(2)实施有效管理:主数据应用点多、面广、线长,管理难度很大,要实施有效管理,就必须要有健全的制度和可行的手段,在关键控制节点实施重点管理。•加强宣讲和引导,通过业务主管部门落实好管理职责,要分工明确,责任到人,强化岗位责任制和考核管理,不能有管理死角。•将信息系统建设项目实施主数据专项评审,确保信息系统在主数据应用方面符合管理要求。•实施主数据核验,对业务环节涉及的主数据进行全面核查,确保主数据在业务环节被有效使用,如有违规,进行必要的处罚。(3)强化服务保障:依靠便捷、可靠的主数据服务为主数据应用提供保障,包括主数据查询、主数据同步、主数据申请和主数据调用。有条件的单位可将主数据服务深入到业务流程,从业务端发起请求,驱动主数据管理和服务,形成管理和应用的有机协同。5.主数据管理评价主数据管理评价是用来评估及考核主数据相关责任人职责的履行情况及数据管理标准和数据政策的执行情况,通过建立定性或定量的主数据管理评价考核指标,加强企业对主数据管理相关责任、标准与政策执行的掌控能力。主数据管理评价指标从管理标准、数据认责和数据政策三个角度考虑,由数据所有人与数据认责人共同确定,定义一系列的衡量指标和规则,分一方面落实和检查主数据的应用情况,另一方面考察和评估主数据管理、主数据标准、主数据质量的执行情况。为了进一步保障主数据管理工具成功实施和有效运行,必须做到组织、职能、责任、人员的四落实。制定涉及到主数据管理的各个环节、组织、人员的一套绩效考核办法,明确各组织部门的职责与分工。表1主数据管理评价考核指标序号考核方向技术指标衡量标准1及时性及时率满足时间要求的数据总数/总数据数2真实性和准确性数据真实率1-数据中失真记录总数/数据总记录数有效值比率1-超出值域的异常值记录总数/总记录数流转过程失真率数据传输失真记录总数/总记录数重复数据比率重复记录数/总记录数3一致性外键无对应主键的记录比率外键无对应主键的记录总数/总记录数主数据一致率一致的主数据总数/主数据总数4完整性字段的空值率空值记录总数/总记录数信息完备率能够获取的指标数/总需求指标数(三)主数据管理工具主数据管理工具是主数据标准文本发布、主数据全生命周期管理的重要平台。主数据标准的维护流程和管理措施通过管理平台进行系统实现和控制,以保证标准的唯一性和宣贯的及时性。主数据管理工具主要包括数据建模、数据整合、数据管理、数据服务、基础管理、标准管理等功能模块。图2主数据管理工具功能架构主数据建模:主要以主数据标准体系为基准,通过可视化建模工具,定义主数据对象、编码规则、属性值和控制流程等基础要素,构建主数据标准模型。主数据整合:主要利用数据清洗工具及扩展功能,将各系统生成的主数据进行汇集、依据主数据标准和主数据模型定义的规则进行校验、清洗、发布,实现对主数据的全生命周期管理,并整合出统一的、可信任的主数据。主数据管理:按照标准主数据管理规程的要求,通过严格的管理流程,实现主数据创建、审批、发布、修改、冻结和失效等全生命周期管理以及数据字典的管理维护,确保数据的一致性、准确性、实时性和权威性。主数据存储和服务:主数据平台发布的基准数据,集中存储于主数据基准库,提供在线查询和订阅功能,并通过流程驱动和消息驱动的标准接口提供数据共享服务。标准文件资料管理:利用外部公共文档管理系统或内置管理功能,实现标准文件和相关资料的存储管理、版本管理和标准目录管理,配置智能化搜索引擎,实现智能、快捷、精确高效的查询检索功能。基础管理:主要实现对系统中的基础数据进行设置,配置灵活、安全可靠的权限管理及日志管理,包括用户、用户组、角色、资源、流程配置等,以及对各类主数据的进行统计分析,为主数据应用评价提供有力支撑。三、主数据管理的实施要点主数据管理是一个复杂的系统工程,涉及到企业和单位多个领域,既要做好顶层设计,又要解决好统一标准、统一流程、统一管理体系等问题,同时也要解决好数据采集、数据清洗、数据对接和应用集成等相关问题。主数据管理常见问题和挑战主要有:不重视主数据的总体规划,缺乏顶层设计,无法在单位决策层、管理层和业务层等各层级统一思路;各职能部门各自为政,难以在标准和规则层面达成一致,致使主数据代码标准难统一;通用标准主数据(国际标准、国家标准和行业标准产生的主数据)管理分散,缺乏便捷可靠的数据获取渠道,数据获取困难;单位内部已经存在且分散管理的主数据,由于缺乏统一标准和数据关联,大量的数据清洗依靠人为判断,数据清洗难度和风险都很大;一些单位,特别是大型集团化企业,系统众多、年代跨度久远,一些早期的系统数据标准化程度不高,改造难度大、成本高,给主数据应用集成带来较大的困难。主数据实施要点主要包含主数据规划、制定主数据标准、建立主数据代码库、搭建主数据管理工具、构建运维体系及推广贯标六大部分,其中主数据规划是纲领、制定主数据标准是基础、建立主数据主数据代码库是过程、搭建主数据管理工具是技术手段、构建运维体系是前提,推广贯标是持续保障。图3主数据实施要点主数据规划:运用方法论并结合企业实际情况,制定主数据整体实施路线图。制定主数据标准:确定数据范围,与业务部门共同制定主数据标准,标准内容包括确定分类规范、编码结构、数据模型、属性描述等。建立主数据代码库:按照主数据标准进行数据检查、数据排重、数据编码、数据加载等,建立符合数据标准和规范的主数据代码库,搭建主数据管理工具:建设主数据管理工具,为主数据的管理提供技术支持,实现主数据查询、申请、修改、审核、发布、冻结、归档等全生命周期管理。构建运维体系:建立主数据管理和标准管理的运维组织、管理流程、考核机制等,保证主数据标准规范得到有效执行。推广贯标:统一执行主数据标准规范,扩大主数据标准的应用范围,实现信息系统间的互联互通及共享利用。(一)主数据规划主数据规划是项目建设的第一步,也是非常关键的一步,规划将提供一系列方法和流程来保证企业核心主数据的准确性、完整性和一致性。主数据规划强调将需求分析与系统建模紧密结合,需求分析是系统建模的基础,而业务调研又是需求分析的前提。在进行规划的时候,首先根据业务工作内容(而不是根据现行的机构部门)划分出一些“职能小组”,由双方业务人员、分析人员组成的小组,分别对各个职能域进行业务个数的调研分析。主数据识别是对调研、分析成果的进一步梳理,通过之前“职能小组”识别各系统间、业务部门间、数据库间、业务流程间、职能小组间的主数据识别,并识别出该阶段应当完成的主数据流程、主数据模型及相应其他细则。在主数据规划咨询的过程中需要参照标准,主要参照的标准有国际标准、国家标准、行业标准、企业标准,确保企业的主数据规划咨询后能够既符合国家相关规定,又具备企业行业特色。在参照标准的同时要结合当前企业的实际需求及未来业务拓展的需求,根据企业主数据的使用范围、使用时间,根据实际情况选择主数据的种类与类型。通过现状调研和需求分析等前期工作输出主数据规划成果,该成果主要包括主数据标准化体系架构、主数据集成架构、主数据安全架构(数据脱敏、数据权限)以及运营管理架构(组织、制度、流程、管理规范、质量管理措施等)等内容,此外主数据规划阶段的关键活动是对成果、体系的宣贯,通过宣贯让企业的各级管理人员及员工及时掌握相应的标准、规范,确保整个体系的梳理运行。(二)制定主数据标准制定主数据标准是建立主数据代码库的基础工作,保障主数据管理工具开发运维以实现系统之间数据共享的前提,也是主数据管理组织及流程顺利开展的关键阶段。制定主数据标准一般遵循简单性、唯一性、可扩展性等相关原则,既要方便当前应用系统的需求,又要考虑未来信息系统发展的需求,此外,制定主数据标准还要根据业务需求的紧急程度分期建设。制定主数据标准的过程可参考如下步骤。首先,要在理解企业信息化整体规划的基础上,开展主数据标准管理现状调研,梳理相关业务流程。其次,可以选取组织架构、业务范围等类似的优秀企业作为标杆进行对比分析,归纳核心管理领域和业务领域的主数据管理需求,确定数据范围和组织范围。最后,要根据各类主数据的特点并结合企业实际情况,与相关业务部门共同讨论制定满足企业应用需求的主数据标准,标准内容主要包括分类规范、编码结构、主数据模型、描述模板、属性取值等。制定主数据标准要紧密围绕主数据管理标准体系的主要内容去开展,即结合业务需求统筹梳理业务标准(编码规则、分类规则、描述规则等)、构建统一的主数据模型标准。制定主数据标准的过程中,一般会衍生出一套代码体系表或称主数据资产目录。主数据业务标准建设过程:首先,根据主数据规划以及调研的实际情况来确定业务标准的建设个数。一般来讲,会计科目主数据、客户供应商主数据、组织机构主数据是企业通用的主数据业务标准类型,此外,项目主数据、产品主数据、物料主数据、设备主数据等需要根据企业自身需求来决定是否建设和落实。业务标准的建设过程一定根据行业企业自身特点去提炼划分,不仅仅包括以上举例的几个部分。值得强调的是,主数据业务标准的分类很重要。业务标准的分类是基础,科学合理的分类是制定标准成功的保障,描述标准是数据信息在标准化系统校对的主要依据,其信息的描述是由各信息的属性字段连接而成,可针对数据分类建立标准化的描述模板,有效避免一物多名现象。主数据模型标准建设过程:主数据模型标准建设随着业务标准的建设梳理过程而建立。相对于主数据业务标准建设过程,主数据模型标准建设比较简单。先建立物理模型,再建立逻辑模型。制定主数据标准的过程中,调研企业信息系统时,通过主数据识别形成一套代码体系表,进而指导主数据管理项目的建设。(三)建立主数据代码库主数据代码库是根据主数据标准对历史主数据进行清洗、排重、合并、编码,保证主数据的完整性、准确性和唯一性,形成一套规范的、可信任的主数据代码库。一般来说,建立主数据代码库的策略是收集企业有库存和有在途业务的数据并进行预处理,检测收集的数据中存在的错误和不一致,剔除和进行修正,将剩余部分转换成符合主数据标准规范要求的格式,以提高数据的质量。建立主数据代码库的制定方法可参考以下步骤,第一,确定代码结构;第二,调研、收集各类代码标准;第三,分析、优选各类代码标准并提出规划制定建议;第四,编制规则征求意见;第五;征求部门意见以完善和确认规则;最后,提交规则送审稿。建立主数据代码库的过程是按照一定的清洗规则对零散、重复、缺失、错误、废弃等原始数据进行清洗,通过数据清洗保证主数据的唯一、精确、完整、一致和有效。然后分别从数据的完整性、规范性、一致性、准确性、唯一性及关联性等多个维度,通过系统校验、查重及人工比对、筛查、核实等多种手段对主数据代码的质量进行多轮检查,通过高质量的数据清洗形成主数据标准代码库。(四)搭建主数据管理工具搭建主数据管理工具,为主数据的管理提供技术支持,实现主数据标准文本发布、主数据全生命周期管理等功能。首先根据企业网络环境安装配置主数据管理工具标准功能模块,然后梳理关键业务流程,分析核心管理领域和业务领域的主数据管理需求,从业务层面和系统层面进行主数据管理需求调研。对比主数据管理工具标准功能进行系统差异分析,编制系统需求规格 说明书 房屋状态说明书下载罗氏说明书下载焊机说明书下载罗氏说明书下载GGD说明书下载 。依据需求规格说明书,在主数据管理工具标准功能的基础上进行客户化定制开发,并按照与其他信息系统的集成方案开发系统接口。在系统功能和性能方面,进行系统的相关测试,确保满足使用需求。组织企业相关关键用户进行业务和系统培训,为后续上线使用奠定基础。(五)构建运维体系主数据管理工具上线运行后,在业务和技术层面继续提供后续支持保障,成立主数据标准化运维组织,明确各岗位职责,结合企业实际情况制定主数据管理制度、主数据管理流程及主数据管理维护细则等,建立企业运维体系,为主数据的长效规范运行奠定坚实基础。(六)推广贯标主数据应用推广直接关系到各信息系统互联互通的实现,通过应用推广扩大数据标准应用范围,实现主数据统一编码、统一描述、统一维护、统一应用,建立起规范可靠的主数据代码库,为信息系统之间数据共享打下良好的基础。四、总结和展望大数据时代,数据成为资产已经是行业共识,越来越多的企业将“数据价值挖掘”作为重要的战略方向。然而,随着企业规模的不断扩大和企业信息化建设的不断深入,内部信息系统应用越来越多,数据量高速膨胀却以“数据孤岛”的形式储存着。海量的、分散在不同系统的数据导致了数据分析利用的复杂性和统筹管理的困难。明确数据的获取来源、加快数据的获取效率催生了跨业务协同和跨系统共享的管理实施模式,并逐步衍生出主数据及主数据管理的概念,这些概念使得各自为政的信息系统在共享整合过程中有据可循、有标可依。随着新兴技术的发展与变革,主数据及主数据管理也迎来了新的机遇。主数据管理为大数据分析和应用提供了良好的标准化环境,大数据存储和计算技术提高了主数据梳理和检索的效率,为主数据管理提供了便捷的环境。云计算为主数据管理工具提供了能够满足“共享服务”功能的新的架构模式,采用微服务技术满足主数据管理工具的高可用性、稳定性和易用性。人工智能为主数据清洗提供了自动化思路,利用自然语言处理及主数据标准库提升主数据质量。与海量的数据相比,主数据描述了企业的核心业务实体,它可以跨业务、跨系统、跨部门地被重复利用,其重要性不言而喻。然而在不同的行业和企业中,主数据管理的实践的进展不尽相同。我们期待处在不同主数据管理阶段的企业,都可以从本白皮书中获益。对于刚刚接触主数据管理的企业来说,本白皮书提供的概念和通用流程将有助于企业加强对主数据宏观的了解。对于正在进行主数据管理的企业,本白皮书提供的案例直击企业面临的痛点,具有很强的参考性。由于时间仓促,水平所限,我们的工作还有很多不足。下一步,我们还将广泛采纳各方面意见建议,进一步深化相关研究,持续完善白皮书内容。在已有版本的基础上,适时修订发布新版。与此同时,工作组还将打造主数据开源社区,争取将国家各部委基础库以及企业通用主数据库(“人口基础信息库”、“法人单位基础信息库”、“自然资源和空间地理基础信息库”、“宏观经济信息数据库”)融合连通,为企事业单位提供服务。诚邀各界专家学者参与我们的研究工作,积极献言献策,共同完善国内数据资产管理理论和方法论体系,为促进大数据与实体经济深度融合做出积极贡献。附录一:术语、定义和缩略语[1]主数据:是指满足跨部门业务协同需要的、反映核心业务实体状态属性的企业(组织机构)基础信息。[2]主数据管理:是一系列规则、应用和技术,用以协调和管理与企业的核心业务实体相关的系统记录数据。[3]编规则码:是指主数据代码的编码规则。[4]分类规则:是指主数据依据相关业务环境和管理需求形成分类规则。[5]描述规则:又称命名规范。[6]主数据模型标准:包含主数据逻辑模型和主数据物理模型。[7]主数据逻辑模型:将高级的业务概念以主数据实体/属性及其关系的形态在逻辑层面上更详细的表达出来。[8]主数据物理模型:主数据的存储结构表。[9]主数据管理评价:是用来评估及考核主数据相关责任人职责的履行情况及数据管理标准和数据政策的执行情况。[10]主数据管理工具:是主数据标准文本发布、主数据全生命周期管理的重要平台。[11]数据建模:主要以主数据标准体系为基准,通过可视化建模工具,定义主数据对象、编码规则、属性值和控制流程等基础要素,构建主数据标准模型。[12]代码体系表:是主数据信息代码查询和应用依据,同时作为企业主数据信息代码的全局性和指导性纲领文件。[13]数据清洗:是按照企业发布的主数据标准和规范,将现有的信息系统的物料、客商等核心主数据代码分类、名称进行规范整理的过程。[14]代码库:指最后形成主数据标准代码库。[15]MDM(MasterDataManagement):主数据管理[16]ERD(Entity-RelationshipDiagram):实体关系图[17]ESB(EnterpriseServiceBus):企业服务总线[18]BOM(BillOfMaterial):物料清单附录二:主数据管理的实践案例(一)国家开发投资公司主数据管理案例1、背景介绍党的十八届三中全会后,国家开发投资公司(以下简称“国投集团”)按照“重心下沉、激发活力、重组整合、重塑职能”的改革思路,构建“小总部、大产业”管理架构,集团信息化建设稳步推进,信息化水平明显提高,陆续建设并运行了财务、预算、经营、人力、资金管理等系统,较好地满足了“二次创业”以来各业务快速发展需要和集团管理能力的要求。随着各类业务系统的上线运行,系统之间信息交换和实时集成的难度越来越大,与集团成员企业间的信息交互越来越频繁。由于各系统间数据分散,数据标准不统一,数据规范性较差,数据质量不高,数据不一致、不完整的现象普遍存在。不同系统间数据集成困难,各系统间无法实现快速高效的数据交互,难以满足集团对各层级、各类型数据抽取、转换、分析等管理要求。为了及时、有效与集团层面建立沟通联系,构建长效的数据管理机制,实现数据标准化,就需要建立一整套主数据管理体系。主数据项目建设的必要性主要体现在以下4个方面:(1)国资委对信息化工作的明确要求:主数据管理标准化是国资委信息化水平考核的重要考核项。(2)集团公司信息化规划的明确要求:《国投集团(2010-2015)信息化总体规划》中明确提出集团总部应建立主数据标准规范、管理体系和主数据管理工具。(3)集团公司深化改革背景下,国投集团具有总部、子公司、投资企业三级管理模式及横跨电力、矿业、交通、生物、金融等多业务的经营特点,为保证管理的高效性,需建立统一的数据标准体系。(4)建设主数据管理系统是信息化建设的一般规律和内在客观要求,通过主数据管理系统,可以实现集团主数据管理工作规范化、标准化,逐步实现数据的“车同轨,书同文”。主数据项目建设的难点主要体现在
本文档为【企业主数据管理技术白皮书】,请使用软件OFFICE或WPS软件打开。作品中的文字与图均可以修改和编辑, 图片更改请在作品中右键图片并更换,文字修改请直接点击文字进行修改,也可以新增和删除文档中的内容。
该文档来自用户分享,如有侵权行为请发邮件ishare@vip.sina.com联系网站客服,我们会及时删除。
[版权声明] 本站所有资料为用户分享产生,若发现您的权利被侵害,请联系客服邮件isharekefu@iask.cn,我们尽快处理。
本作品所展示的图片、画像、字体、音乐的版权可能需版权方额外授权,请谨慎使用。
网站提供的党政主题相关内容(国旗、国徽、党徽..)目的在于配合国家政策宣传,仅限个人学习分享使用,禁止用于任何广告和商用目的。
下载需要: ¥17.6 已有0 人下载
最新资料
资料动态
专题动态
个人认证用户
IT人
暂无简介~
格式:pdf
大小:2MB
软件:PDF阅读器
页数:86
分类:互联网
上传时间:2019-11-15
浏览量:93