关于数据:主数据管理理论与实践

本文介绍了主数据的概述，包含主数据的定义、特色、类型、和其余数据的关系，主数据管理的意义，主数据管理的施行痛点，主数据管理的内容，主数据的治理施行办法以及我的项目施行示例等内容，为对主数据和数据管理有钻研趣味的敌人提供了肯定的参考。

一、主数据管理概述

1.1. 主数据的定义

在数据管理畛域，对于主数据的概念和定义有不同的解释和阐明。参照规范和标准定义，本文采纳国内数据管理协会 DAMA 在《DAMA 数据管理常识体系指南》一书中对主数据的定义进行阐明。

主数据是对于业务实体的数据，这些实体为业务交易提供关联环境。业务规定通常规定了主数据格式和容许的取值范畴，个别组织的主数据包含当事人、产品、财务结构和地位等。主数据是对于要害业务实体权威的、最精确的数据，可用于建设交易数据的关联环境。主数据值被认为是“黄金”数据，主数据绝对交易数据而言，属性绝对稳固，准确度要求更高，惟一辨认。

1.2. 主数据的特色

相比于其余数据，主数据具备如下特色：

1）超过部门，主数据是所有部门和所有业务过程的最大公约数据；

2）超过流程，主数据不随具体流程而扭转，而是作为残缺流程的不变因素。

3）超过主题，不依赖特定业务主题却又服务于所有业务主题的无关业务实体信息；

4）超过零碎，主数据管理作为独自的零碎存在，服务于但高于其余业务零碎；

5）超过技术，主数据必须利用一种可能为各类异构零碎所兼容的技术条件，面向微服务架构为主数据的施行提供了无效的工具。

1.3. 主数据的类型

主数据次要包含配置型主数据和外围主数据。

1）配置型主数据：配置型主数据，也称为参考数据，是形容业务或外围主数据属性分类的参考信息，会在整个组织内共享应用。个别根据国际标准、国家标准、行业标准或企业规范和相干标准等，在零碎中一次性配置应用的根底数据，例如国家、民族、性别等规范性表述。配置型主数据绝对稳固，不易变动。

2）外围主数据：外围主数据指用来形容企业外围业务实体的主数据，是企业外围业务对象、交易业务的执行主体，如产品、物资、设施、组织机构、员工、供应商、客户、会计科目等。

1.4. 主数据与其余数据的关系

在《DAMA 数据管理常识体系指南》一书中，将数据管理畛域常识体系概括为十个大的方面，别离是数据架构治理、数据开发、数据操作治理、数据安全治理、参考数据和主数据管理、数据仓库和商务智能治理、文档和内容治理、元数据管理、数据品质治理和数据治理等。主数据管理与参考数据管理作为最外围的业务内容，在数据管理体系，以及进步数据品质，构建企业数据资产的过程中施展着微小的作用。

主数据及主数据管理往往和其余已有的概念混在一起，从而影响人们对主数据与主数据管理的实质的意识。本文将主数据与元数据、主数据与交易数据、主数据与参考数据这三个概念进行区别和分割。

1）主数据与元数据

主数据和元数据是两个齐全不同的概念。元数据是指公司数据资产治理的根底，是对于“数据的数据”，例如数据类型、数据定义、数据关系等，相当于数据表格中的表头信息，是一个绝对主观的概念。而主数据是从元数据中筛选进去的，表征公司业务运行的要害、通用型数据，是一个绝对主观的概念。它不仅仅只是表头信息，而是包含实例数据。例如公司的产品列表、客户列表、分公司地址信息等。

2）主数据与交易数据

交易数据也是基于元数据衍生而来的，反馈公司实时业务记录的数据，同样是实例数据。主数据是绝对稳固的，静止不变或者是一段时间内静止不变的数据，而交易数据则是实时变动的数据，往往形容的是某一个工夫点所产生的交易行为。例如客户订单、存货跟踪、销售记录、售后事件等。

一个主数据可能会跟多个交易数据有关联，而一个交易数据可能又会对主数据产生影响。举例来说，航空公司中，“客户本年度航行里程”是一个主数据，而“客户每次航行记录”，则是交易数据，当交易数据“客户每次航行记录”累积到一年时，主数据“客户本年度航行里程”便会产生更新。

3）主数据与参考数据

参考数据是用于将其余数据进行分类或者目录整编的数据。业务规定通常规定参考数据值是几个允许值之一。允许值的数据集是一个值域。有些组织依据外部业务定义参考数据的值域，其余参考数据的值域可由像政府或行业标准等内部资源来定义。多组参考数据的值域能够指向同一个概念域。每个值在其所在的值域集是惟一的。用艰深的术语表述，参考数据也能够叫做数据字典、代码集等。

企业为了进行更有效率的数据整合、数据共享和数据分析利用，开始尝试对参考数据进行企业或者部门层面的整合和治理，利用参考数据集记录零碎尝试为范畴内的 IT 零碎中的数据库提供对立的参考数据。参考数据是对数据的解释针对一些数据范畴和取值的数据解释，让人们容易读取相干的数据。

在政务数据应用领域，狭义的参考数据体现在参考数据集记录零碎、政务信息资源目录零碎、代码集零碎、数据图书馆等零碎方面，狭义的主数据体现在数据交融建仓的过程中，个别政务数据我的项目会建设包含人口、法人、屋宇、电子证照、社会信用、空间天文等主数据，也称根底库。

在实操中，参考数据管理和规范施行个别是和主数据管理我的项目一起施行。

二、主数据管理的意义

主数据是数据之源，是数据资产治理的外围，是信息系统互联互通的基石，是信息化和数字化的重要根底。通过构建精确、惟一、权威的数据起源建设企业主数据规范管理体系，是进步企事业单位数据品质和数据资产价值的关键因素。良好的主数据管理对于企业数据资产体系建设，通过数据驱动倒退，构建将来倒退与竞争的外围竞争力，具备重要意义。

1) 打消数据冗余，晋升数据品质：主数据买通各业务链条，对立数据语言，对立数据规范，实现数据共享，最大化打消了数据冗余，晋升数据品质。

2) 晋升数据处理效率：通过主数据管理能够实现数据动静主动整顿、复制，缩小人工整理数据的工夫和工作量。

3) 数据驱动，进步公司策略协同能力：数据作为公司外部经营剖析、决策撑持的“通行语言”，实现多个部门对立后，有助于买通部门、零碎壁垒，实现信息集成与共享，进步公司整体的策略协同力。

4) 欠缺 IT 零碎架构和企业数据架构，助力数据利用和治理：通过主数据建设，将为企业在数据利用与治理奠定根底。从 IT 建设的角度，主数据管理能够加强 IT 构造的灵活性，构建笼罩整个企业范畴内的数据资产治理根底和相应标准，并且更灵便地适应企业业务需要的变动。此外，主数据品质的进步也可能为前期数据集成和数据整合打下良好的根底。

三、主数据管理的施行痛点

主数据管理意义不凡，然而在实际和施行方面还是存在很多的难点，突出表现在以下几个方面：

1）认知不对立，不器重主数据的总体规划，不足顶层设计，无奈在单位决策层、管理层和业务层等各层级对立思路；

2）各职能部门各自为政，难以在规范和规定层面达成统一，以致主数据代码规范难对立；

3）通用规范主数据（国际标准、国家标准和行业标准产生的主数据）治理扩散，不足便捷牢靠的数据获取渠道，数据获取艰难；

4）单位外部曾经存在且扩散治理的主数据，因为不足统一标准和数据关联，大量的数据荡涤依附人为判断，数据荡涤难度和危险都很大；

5）企业历史零碎和历史数据的数据标准化水平不高，数据荡涤难，革新老本高，给主数据系统集成造成较大艰难；主数据管理过程须要批改现有的相干生产业务过程和零碎，须要从管理学的角度充分调动业务部门密切配合，对组织的业务经营效率和信息决策周期要求较高。

6）主数据管理模式要求业务间有表单数据交换，因而短期内会使得信息架构发生变化，甚至变得更加简单。

四、主数据管理的内容

主数据管理的次要内容包含“两体系、一工具”，即主数据管理规范体系、主数据管理保障体系和主数据管理工具。其中，主数据管理规范体系是主数据管理工作的重中之重，主数据管理保障体系为主数据管理保驾护航，主数据管理工具确保主数据管理无效落地。

4.1. 主数据管理规范体系

主数据规范管理体系蕴含业务规范（编码规定、分类规定、形容规定等 )、主数据模型规范。主数据规范管理体系在建设梳理的过程中，个别会衍生出一套代码体系表或称主数据资产目录。

1）主数据业务规范是对主数据业务含意的对立解释及要求，包含主数据起源、主数据的治理级次、对立治理的根底数据项、数据项在相干业务环境中产生过程的形容及含意解释、数据之间的制约关系、数据产生过程中所要遵循的业务规定。主数据业务规定蕴含主数据各数据项的编码标准、分类规定、形容规定等。

2）主数据模型规范蕴含：主数据逻辑模型和主数据物理模型。主数据逻辑模型次要是通过实体关系图例示意，ER 图，主数据物理模型，也成为主数据的物理存储构造表。

3）主数据代码体系表：在某些畛域内，又称主数据资产目录。是形容企事业单位信息化建设过程中所应用的主数据代码品种、各类主数据代码名称、代码属性（分类、明细、规定等）、采（参）标号及代码建设状况的汇总表，是企业主数据代码查问和利用的根据，同时也是主数据代码的全局性和指导性文件。主数据代码体系表次要联合了企业的经营治理特点，服务于企业信息化建设，次要包含两局部内容，第一是企业信息代码体系表的框架结构以及分类，第二是所有分类下的信息代码规范明细以及建设状况。

如政府数据应用领域的政务信息资源目录体系。

4.2. 主数据管理保障体系

主数据管理保障体系包含主数据管理组织、制度、流程、利用及治理评估五局部。

1）主数据管理组织

主数据管理组织次要包含企业内各类主数据的治理组织架构、经营模式、角色与职责布局，通过组织体系布局建设明确的主数据管理机构和组织体系，落实各级部门的职责和可继续的主数据管理组织与人员。主数据管理组织构造包含决策层、管理层和执行层。

2）主数据管理制度

主数据管理制度规定了主数据管理工作的内容、程序、章程及办法，是主数据管理人员的行为规范和准则，次要蕴含各种治理方法、标准、细则、手册等。次要包含《主数据管理方法》、《主数据标准规范》、《主数据提案指南》、《主数据保护细则》、《主数据管理工具操作手册》等。

3）主数据管理流程

提供梳理数据保护和治理流程，建设合乎企业理论利用的治理流程，保障主数据规范直到无效执行，实现主数据的继续长效治理。主数据管理流程能够以管理制度的形式存在，也能够间接嵌入到主数据管理工具中。

主数据管理流程包含主数据业务管理流程（主数据的申请、校验、审核、公布、变更、解冻、归档等进行全生命周期治理）、主数据规范治理流程（对主数据规范的剖析、制订、审核、公布、利用与反馈等流程）、主数据品质治理流程（主数据的创立、变更、解冻、归档）等。

4）主数据利用

主数据利用次要蕴含三局部内容：明确治理要求、施行无效的治理、强化保障服务。

5）主数据管理评估

主数据管理评估是用来评估及考核主数据相干责任人职责的履行状况及数据管理规范和数据政策的执行状况，通过建设定性或定量的主数据管理评估考核指标，增强企业对主数据管理相干责任、规范与政策执行的掌控能力。

主数据管理评估指标从治理规范、数据认责和数据政策三个角度思考，由数据所有人与数据认责人独特确定，定义一系列的掂量指标和规定，一方面落实和查看主数据的利用状况，另一方面考查和评估主数据管理、主数据规范、主数据品质的执行状况。

4.3. 主数据管理工具

主数据管理工具是主数据规范文本公布、主数据全生命周期治理的重要平台。主数据规范的保护流程和治理措施通过治理平台进行零碎实现和管制，以保障规范的唯一性和宣贯的及时性。

主数据管理工具次要包含数据建模、数据整合、数据管理、数据服务根底治理、规范治理等功能模块。

1）主数据建模：次要以主数据规范体系为基准，通过可视化建模工具，定义主数据对象、编码规定、属性值和管制流程等根底因素，构建主数据规范模型。

2）主数据整合：次要利用数据荡涤工具及扩大性能，将各系统生成的主数据进行会集、根据主数据规范和主数据模型定义的规定进行校验、荡涤、公布，实现对主数据的全生命周期治理，并整合出对立的、可信赖的主数据。

3）主数据管理：依照规范主数据管理规程的要求，通过严格的治理流程，实现主数据创立、审批、公布、批改、解冻和生效等全生命周期治理以及数据字典的治理保护，确保数据的一致性、准确性、实时性和权威性。

4）主数据存储和服务：主数据平台公布的基准数据，集中存储于主数据基准库，提供在线查问和订阅性能，并通过流程驱动和音讯驱动的标准接口提供数据共享服务。

5）标准文件材料治理：利用内部公共文档管理系统或内置治理性能，实现标准文件和相干材料的存储管理、版本治理和规范目录治理，配置智能化搜索引擎，实现智能、快捷、准确高效的查问检索性能。

6）根底治理：次要实现对系统中的根底数据进行设置，配置灵便、安全可靠的权限治理及日志治理，包含用户、用户组、角色、资源、流程配置等，以及对各类主数据的进行统计分析，为主数据利用评估提供无力撑持。

五、主数据的治理施行办法

主数据施行要点次要蕴含主数据布局、制订主数据规范、建设主数据代码库、搭建主数据管理工具、构建运维体系及推广贯标六大部分，其中主数据布局是纲领、制订主数据规范是根底、建设主数据主数据代码库是过程、搭建主数据管理工具是技术手段、构建运维体系是前提，推广贯标是继续保障。

1）主数据布局：使用方法论并联合企业理论状况，制订主数据施行路线图

主数据布局强调将需要剖析与零碎建模紧密结合，需要剖析是零碎建模的根底，而业务调研又是需要剖析的前提。

在主数据布局征询的过程中须要参照规范，次要参照的规范有国际标准、国家标准、行业标准、企业规范，确保企业的主数据布局征询后可能既符合国家相干规定，又具备企业行业特色。

通过现状调研和需要剖析等前期工作输入主数据布局成绩，该成绩次要包含主数据标准化体系架构、主数据集成架构、主数据安全架构（数据脱敏、数据权限）以及经营治理架构（组织、制度、流程、治理标准、品质治理措施等）等内容，此外主数据布局阶段的要害流动是对成绩、体系的宣贯，通过宣贯让企业的各级管理人员及员工及时把握相应的规范、标准，确保整个体系的梳理运行。

2）制订主数据规范：确定数据范畴，与业务部门独特制订主数据规范，规范内容包含确定分类标准、编码构造、数据模型、属性形容等。

制订主数据规范是建设主数据代码库的根底工作，保障主数据管理工具开发运维以实现零碎之间数据共享的前提，也是主数据管理组织及流程顺利开展的要害阶段。制订主数据规范个别遵循简略性、唯一性、可扩展性等相干准则，既要不便以后利用零碎的需要，又要思考将来信息系统倒退的需要，此外，制订主数据规范还要依据业务需要的紧急水平分期建设。

主数据制订的过程参考：

• 在了解企业信息化整体规划的根底上，发展主数据规范现状调研，梳理相干业务流程；
• 选取组织架构、业务范围等相似的优良企业作为标杆进行比照剖析，演绎外围治理畛域和业务畛域的主数据管理需要，确定数据范畴和组织范畴。
• 要依据各类主数据的特点并联合企业理论状况，与相干业务部门独特探讨制订满足企业应用需要的主数据规范，规范内容次要包含分类标准、编码构造、主数据模型、形容模板、属性取值等。

业务规范的分类是根底，科学合理的分类是制订规范胜利的保障，形容规范是数据信息在标准化零碎校对的次要根据，其信息的形容是由各信息的属性字段连贯而成，可针对数据分类建设标准化的形容模板，无效防止一物多名景象。

3）建设主数据代码库：依照主数据规范进行数据查看、数据排重、数据编码、数据加载等，建设合乎数据规范和标准的主数据代码库。建设主数据代码库的制订办法可参考以下步骤，第一，确定代码构造；第二，调研、收集各类代码规范；第三，剖析、优选各类代码规范并提出布局制订倡议；第四，编制规定征求意见；第五；征求部门意见以欠缺和确认规定；最初，提交规定送审稿。

4）搭建主数据管理工具：建设主数据管理工具，为主数据的治理提供技术支持，实现主数据查问、申请、批改、审核、公布、解冻、归档等全生命周期治理。

5）构建运维体系：建设主数据管理和规范治理的运维组织、治理流程、考核机制等，保障主数据标准规范失去无效执行。

6）推广贯标：对立执行主数据标准规范，扩充主数据规范的利用范畴，实现信息系统间的互联互通及共享利用。

六、主数据管理的我的项目实例

主数据管理波及到企业最外围的业务流程、交易数据和数据资产，关系到企业生产经营的方方面面。所以注定主数据管理的施行建设是一个继续长期的过程，联合业内的施行教训，主数据管理我的项目的施行策略个别为：整体制订规范、分步建设零碎、先根底、后深入。上文提到主数据施行要点次要蕴含主数据布局、制订主数据规范、建设主数据代码库、搭建主数据管理工具、构建运维体系及推广贯标六大部分，联合到理论具体我的项目过程中，则须要将主数据管理和我的项目过程治理的常识与教训联合起来。上面是对某个主数据施行我的项目的我的项目过程阶段划分和施行打算安顿。该我的项目次要分为三个阶段。

第一阶段：次要工作内容包含标准化制订、主数据平台根本模块建设、数据初始化清理与导入等；

第二阶段：次要工作内容包含欠缺主数据平台建设、局部零碎对接、数据监控与统计分析等；

第三阶段：次要工作内容包含扩充主数据范畴、接入更多零碎、信息展现层建设等；以下是主数据我的项目施行打算实例：

1）乙方项目组：

2）甲方项目组：

下图是中外运主数据管理性能架构图。

下图是中外运主数据规范体系。