Menu
产品
Tempo大数据分析平台
Tempo商业智能平台
Tempo人工智能平台
Tempo数据工厂平台
Tempo数据治理平台
Tempo主数据管理平台
Tempo指标平台
解决方案
自助式可视化分析
算法模型管理
指标管理解决方案
数字指挥中心
湖仓一体解决方案
智能场景应用构建
主数据应用监管
数据中台
行业应用
发电
电网
制造
油气
煤炭
高校
政企
金融
科研院所
数据资产入表
大模型应用
产教融合
认证中心
DCMM认证
DAMA认证
关于我们
美林数据
合作生态
内容中心
帮助中心
美林新闻
行业资讯
申请试用
方案咨询
产品
Tempo大数据分析平台
面向企业级用户的一体化大数据分析平台
Tempo商业智能平台
面向业务人员的自助式可视化分析平台
Tempo人工智能平台
自动化、智能化的分析模型构建平台
Tempo数据工厂平台
批流一体的大数据开发平台
Tempo数据治理平台
打破数据治理困境,为业务价值保驾护航
Tempo主数据管理平台
解决主数据集成难、应用难的问题
Tempo指标平台
让管理更敏捷、业务更智能
解决方案
自助式可视化分析
数据指导行动,让每一次都有进步
算法模型管理
构建企业级模型管理与应用平台
指标管理解决方案
轻量化打造指标体系,让企业高质量发展
数字指挥中心
从数据中获得见解,让决策有据可依
湖仓一体解决方案
一体化的数据存储、集成、开发解决方案
智能场景应用构建
从数据开发到智能分析的一站式解决方案
主数据应用监管
解决企业主数据应用无法监管难题
数据中台
打造企业数字化转型数据底座
行业应用
发电
数字化赋能新能源电厂提质增效
电网
助力数字电网建设
制造
数字化智造从顶层设计到落地实施
油气
以AI视角优化油气行业生产流程
煤炭
AI赋能智慧煤矿安全、高效生产
高校
教学、实践、科研一体化实验室解决方案
政企
助力智慧政务决策
金融
客群价值深度挖掘,打造精准营销新模式
科研院所
提升科研转化能力,助力产业应用创新
数据资产入表
大模型应用
产教融合
认证中心
DCMM认证
掌握DCMM国家标准,全面提升数据管理技能
DAMA认证
学习国际数据管理业界权威知识体系,培养数据人才
关于我们
美林数据
连续7年大数据企业50强
合作生态
基于多年成功经验,提供技术与方法论支持
内容中心
大数据专业知识沉淀与成果共享
帮助中心
Tempo产品操作手册及常见问题解析
美林新闻
美林数据动态尽在掌握
行业资讯
第一时间洞察最新行业资讯
美林数据
ABOUT US
美林数据技术股份有限公司(简称:美林数据,NEEQ:831546)是国内知名的数据治理和数据分析服务提供商。
产品简介
Tempo商业智能平台
提供了从数据接入、数据准备、数据可视化分析于一体的完整的解决方案
Tempo人工智能平台
为“全民数据科学家”提供自动化、智能化的数据分析模型构建能力。
Tempo数据工厂平台
支持大规模数据的快速集成和高效计算,构建流批一体大数据开发平台。
Tempo指标平台
指标的体系化建设和全生命周期管理。
Tempo数据治理平台
面向企业数据治理、数据中台落地的应用平台。
Tempo主数据管理平台
为用户提供全生命周期管控的主数据治理工具。
相关推荐
数据变现狂潮!细数数据资产入表如何助力企业“一夜暴富”?
RAG vs 微调:大模型知识的进化之路
大模型在企业数智化转型中可以做哪些事情?
美林新闻
/
NEWS
首页
美林数据
行业资讯
数据分析行业知识分享|绝对干货!一文详解数据标准
2022-11-14 17:07:43
次
制造企业在市场销售、设计、采购、生产、交付、货运等业务环节,存在大量的信息不规范、不对等、不及时的情况,导致主价值链业务流程不顺畅、滞后等。究其根本原因,除了业务系统确实需要搞集成外,还有一个重要的方面是,企业各业务环节、各业务部门、各业务系统对于同一套企业数据的
数据标准
从业务术语、业务字段、业务表单的定义以及字段命名的统一规范等方面存在差异。
上一篇文章,我们对数据架构设计的详细过程及方法、注意事项进行了介绍【
数据治理科普:十年经验,终于把数据架构设计说清楚了
】,接下来我们看看怎么统一企业数据语言,贯通业务流程。这篇文章我们来介绍什么是数据标准、为什么制定数据标准、数据标准包括什么内容、数据标准怎么用。
什么是数据标准
根据中国信通院的定义:数据标准,是指保障数据的内外部使用与交换的一致性和准确性的规范性约束。做好企业的数据标准,解决上述数据标准背的锅,首先要搞清楚企业数据是如何分类的。参照某工业集团发布的统一数据架构文件,遵循业务架构到数据架构设计思想,企业数据可分为主题分析数据、业务数据、主数据、参考数据。具体如下图所示,我们举一个例子来说明:
企业数据分类
总体思路,还是上篇讲到的,从企业业务入手,自上而下梳理企业有哪些业务,并划分业务主题域;基于各域的业务模型(业务流程)开始梳理业务环节的输入输出数据,基于输入输出数据识别【数据实体】,数据实体就是企业需要重点管理的数据资产内容之一,管理就需要先定义,所以有了描述数据的数据,也就是元数据的产生。
而在数据管理的过程中,我们发现,不同特点的数据我们侧重管理的数据内容不同,由此我们以业务为核心,将未来需要管理的数据实体,划分为业务数据、主题
分析数据
、主数据、以及参考数据。
►
业务数据:又称交易数据,是业务活动产生的数据,比如销售订单;
►
主题分析数据:用于主题分析的数据,比如,对销售订单,以产品为维度进行分析、以客户为维度进行分析等;
►
主数据:通常是企业业务中的核心数据,是跨业务领域、跨流程和跨系统使用的数据,具有高的共享性、变化频率低的特点;比如,销售订单中销售的产品、销售的客户等;
►
参考数据:需要对定义的域值进行控制,也叫静态数据;也具有共享性、相对稳定的特点;比如:销售订单中的行政区域、国家地区、产品型号等。
那么,与企业各类数据对应的,即各类数据的标准,分别是:数据元标准、指标数据标准、主数据标准、参考数据标准。在DCMM的数据标准中还包括业务术语标准。
►
数据元主要是通过对企业中核心数据元进行标准定义,使数据的拥有者和使用者对数据有一致的理解。数据元可以理解为属性字段。比如:描述销售订单的销售部门、销售员、销售产品、产品单价、单品总价等均可以定义为数据元。
►
指标数据是组织在经营分析过程中衡量某一个目标或事物的数据,一般由指标名称、时间和数值等组成。比如:产品年度销售额、客户季度订单量等。
►
主数据是组织中需要跨系统、跨部门共享的核心实体数据。主数据管理是对主数据标准和内容进行管理,实现主数据跨系统的一致、共享使用。比如:A产品、B客户,是具体的主数据的内容,也需要标准的一致管理。
►
参考数据是用于将其他数据进行分类的数据。参考数据管理是对定义的数据值域进行管理,包括标准化术语、代码值和其他唯一标识符,每个取值的业务定义,数据值域列表内部和跨不同列表之间的业务关系的控制,并对相关参考数据的一致、共享使用。比如:产品型号包括EP、FP、GP三种。
►
业务术语是企业中业务概念的描述,业务数据是企业内部理解数据、应用数据的基础,需要推动业务术语的共享和组织内部的应用。业务数据可以是业务流转环节的术语、表单的术语、某一字段的术语、某一参考数据条目的术语等等,对理解数据应用数据过程中需要澄清的、界定的概念都可以定义为术语。
为什么定数据标准
数据标准管理通过对各个环节数据的定义、格式、值域范围、业务规则等进行维护及应用,帮助企业规范各环节对业务的统一理解,增强企业各部门对数据的定义与使用的一致性,实时贯通企业业务流程,精准监控业务运行情况。
以下图示以
物料主数据
标准梳理为例。物料在设计、采购、生产、质检、财务各环节的属性信息,存在命名不一致但内涵一致的较多情况,引发集成映射问题、信息不通畅问题等,最终需要对各环节使用的属性进行统一定义、统一规范来解决。图片
业务各环节中关于物料的属性信息
数据标准定什么
每类数据应该定义其标准,那么数据标准定什么,本质上是通过各类数据的元数据来落地数据标准。各类数据的元数据,根据所描述的业务和内容有所差异及侧重,如下图所示,我们把各类数据的元数据分为业务元数据、技术元数据、管理元数据,并分别进行了定义。
企业数据标准
►
指标数据标准
指标数据是组织在经营分析过程中衡量某一个目标或事物的数据,一般由指标名称、时间和数值等组成。指标数据标准包括指标名称、指标含义、计算规则、数据维护责任部门等。比如,某销售订单占比指标的标准如下图所示:
指标数据标准
►
数据元标准
业务数据,主要是通过对企业中核心数据元进行标准定义,使数据的拥有者和使用者对数据有一致的理解。比如,采购合同编号的数据元标准。
数据元标准
►
主数据标准
主数据是组织中需要跨系统、跨部门共享的核心实体数据。主数据管理是对主数据标准和内容进行管理,实现主数据跨系统的一致、共享使用。主数据标准包括中英文名称、数据维护责任部门、制定依据等。比如,合同需要标准的定义,包括了合同的属性、编码规则、合同的分类、合同相关的参考数据、一些属性的质量规则,合同的权威数据源等内容。而且具体的合同有2102条存量数据,也需要按照定义的标准规范进行数据清洗整改,去除重复的数据、填补缺失的数据等,形成规范的数据,这个也是主数据管理范围内的工作;未来新增的合同数据,也需要按照规范的编码、质量规则等管理,确保数据的规范性。
主数据标准
企业主数据通常还包括人员、组织机构、客户、供应商、物料、产品、会计科目、工装工具、设备、夹量具等,我们都需从业务视角、技术视角、管理视角制定每类主数据的属性标准,也需要对各类主数据具体的内容(值)进行管理。原材料主数据属性确定的技术视角属性示例如下图所示:
►
参考数据标准
参考数据是用于将其他数据进行分类的数据。参考数据管理是对定义的数据值域进行管理,包括中英文名称、参考数据维护责任部门、制定依据等。
参考数据标准
除了从业务视角及管理视角明确企业的参考数据标准外,仍需对每种参考数据从技术视角制定属性标准。具体的参考数据标准,除了定义参考数据外,还需要给出清晰的值列表内容。比如,设备属性中“账类别”枚举项的内容包括:
►
业务术语标准
业务术语是企业中业务概念的描述,业务数据是企业内部理解数据、应用数据的基础。通过对业务术语的管理能保障组织内部对集体技术名词理解的一致性。通常从中文名称、英文名称、术语描述等业务视角,以及责任部门、数据维护部门描述。
业务术语标准
数据标准怎么用
数据标准落标涉及多部门、多系统的一系列复杂工作,需要企业领导的大力推动以及业务部门牵头,华为开展数据治理第一阶段工作,花了8年做数据标准及落地,并将落标作为了2015年企业7大重点战略任务之一。
各类数据标准的落地方案也有差异,其中:
数据元标准落地:主要与数据建模相关,涉及到已建系统、待建系统中模型的映射及引用等等;
主数据和参考数据落地:主要是数据内容的规范化及共享,包括确定SOR系统做共享、单独的主数据平台管理并做共享两种策略;
指标数据
标准落地:主要是各业务部门、业务环节及管理层等需要对指标业务定义有共识,并能按照自己关注的维度查阅指标值及趋势等。
那么,详细的数据元标准如何落地到业务系统呢?
主数据和参考数据的落地与数据元有什么不同呢?
指标数据标准是单独的平台落地吗?
……
上一篇:大数据分析之数据缺失值处理教程来啦!
下一篇:可视化分析图形怎么选?这篇指南手把手教你!数据可视化分析图形选择指南
在线咨询
服务热线
400-608-2558
咨询热线
15502965860
电话联系
微信扫描二维码,立即在线咨询
微信沟通
申请试用