首页 > 其他分享 >元数据是什么?怎么管?

元数据是什么?怎么管?

时间:2022-10-21 11:01:53浏览次数:77  
标签:怎么 小羊 概念 什么 彭友 标准 数据管理 数据

元数据是什么?怎么管?_主数据

编 辑:彭文华


彭友萌好,今天老彭友小羊羊找到我,想要元数据管理相关的内容,说找遍了所有文章,都没找到详解元数据管理的内容


元数据是什么?怎么管?_主数据_02

啊这...小羊羊彭友肯定是没找全,因为我以前就专门写过一篇“​​什么是数据、元数据、主数据和参考数据?​​”,里面对于元数据解释得很详细。


当时还留了一个自动回复,可以下载很多相关资料,不过现在已经失效了。

元数据是什么?怎么管?_数据_03

元数据怎么管?


我敢打包票,小羊羊也没加入到我的知识星球里,否则的话也不会来问我,因为星球里的内容足够解释她所有的问题


不过小羊羊来问了,我还是得一本正经地回答好,不能辜负了她的期望,也正好给大家分享分享。


元数据怎么管?对于一个没接触过的人来说,简直是一个噩梦。因为理解元数据已经很艰难了,更别说管理元数据。而且身在大厂的小羊羊,很有可能在做元数据管理系统。


在这个时候,最先要做的,其实要做三件事情:

1、彻底弄清楚什么是元数据,什么是元数据管理;
2、查清楚是否有相关标准,用专家的智慧当做指导,防止自己跑偏了;
3、找到业内样例,作为对(chao)标(zuo)参(ye)考(de)元数据是什么?怎么管?_元数据_04


我们今天就按照这个逻辑一一说清楚。

元数据是什么?怎么管?_主数据_05

什么是元数据?什么是元数据管理?


鉴于我在之前用人话解释过什么是元数据,元数据的种类有哪些,这里就不再赘述了,​人话版点我​。所以这次就引用一下权威


元数据,就是“关于数据的数据”。

它描述了数据本身(例如,数据库,数据元素,数据模型),数据表示的概念(例如,业务流程,应用程序系统,软件代码,技术基础结构)以及数据和概念之间的连接(关系)。

元数据可帮助我们了解数据、系统和业务流程,有助于处理、维护、集成、保护、审核和管理其他数据。

                                                                         --来自于:DMBOK-元数据管理


那元数据怎么管理呢?管理肯定要先分类。元数据可以分为业务元数据、技术元数据和操作元数据。当然,还有一个有争议的管理元数据。权威说明在这里哈:

元数据是什么?怎么管?_元数据_06


分类之后呢?那就简单了,梳理目录、ID、命名、属性等内容,设计注册、启停用、版本等基础功能,剩下的就是做增删改查了。


元数据是什么?怎么管?_元数据_07

元数据是什么?怎么管?_主数据_08

元数据管理标准


 不过,为了防止我们刚才想的不够全面,还是得找一个标准参考一下。这边都准备好了:

《GB_T 18391.1-2009 信息技术 元数据注册系统(MDR)》


这里面还给出了元数据注册系统的总体模型,分为概念层和表示层,具体如下:


元数据是什么?怎么管?_数据_09

简单理解,就是我们需要在概念层(这个元数据是什么?)阐述清楚,然后再写清楚这个概念的具体值(这个元数据有什么?),这才构成了一个完整的元数据。


举个例子:

概念:长度计量单位


值域:千米、米、分米、厘米、毫米、微米、纳米。



另外,一个元数据实体肯定还有其他的各种属性,比如名称、类型、精度、含义、版本、归口单位、分类、状态等等。


元数据是什么?怎么管?_主数据_10


在标准里,元数据属性都罗列了几十个,我们在实际工作中用不到这么多。


单是元数据生命周期的状态,标准中就定义了首选、标准、合格、已记录、候选、未完成、失效、被替代、历史、应用这么多。


在做系统的时候,我们只需根据实际情况进行选择即可。

元数据是什么?怎么管?_数据_11

业内案例-快手元数据管理


概念弄清楚了,标准也有了,接下来的任务就是参(chao)考(ta)一(zuo)下(ye)了


我手上正好有一个行业案例《快手元数据平台化建设及应用场景》,你看看这写的:多么诱人啊?


元数据是什么?怎么管?_数据_12


不要太爽了!我给你截图自己看:


元数据是什么?怎么管?_数据_13


从上图可以看出,他们主要抽象出了实体、属性和关系以及唯一ID四部分内容。


元数据是什么?怎么管?_数据_14


快手把主数据分为四类:基础、安全、资产和衍生元数据。


元数据是什么?怎么管?_主数据_15


他们直接从大数据组件、各个管理系统和数据平台中自动接入元数据,然后进行解析、同步,并转换成标准定义,把基础信息存入关系型数据库,把关系存到图数据库,并提供查询和分析服务。


最后,还基于这些元数据做了一系列的数据应用,什么数据地图、指标模型管理、资产管理等。


元数据是什么?怎么管?_元数据_16


这里还给出了几个元数据应用的例子:

元数据是什么?怎么管?_数据_17


比如上面这个找数的应用。当我们的表和字段多到一定程度,找到合适的数就变得非常非常困难了。因为会有大量的类似的表和字段充斥在数据库里,你根本无法确定应该用哪个。



标签:怎么,小羊,概念,什么,彭友,标准,数据管理,数据
From: https://blog.51cto.com/u_13626906/5781599

相关文章

  • 企业文化是数字化转型最大障碍-解读《2022年首席数据官调查报告》
    编 辑:孙宁​彭友们好,我是老彭。今天请孙老师给彭友们解读《2022年首席数据官调查报告》。2022年6月1日即将施行的《广州市数字经济促进条例》为探索首席数据官、数据经纪人......
  • 红外温度计(测温仪)原理是什么?
    红外温度计(测温仪)原理是什么?测温枪学名是“红外温度计”或“红外辐射温度计”。测温枪原理是被动吸收物体的红外辐射能量,获得物体的温度数值你的身体总是向外释放能量,测......
  • 非结构化数据怎么治理?
    编 辑:彭文华​彭友们好,我是老彭。最近遇到几个项目,都跟非结构化数据脱不开关系。老彭刚毕业的时候,做的是数据库的活儿,那都是结构化数据。后来有了hadoop技术,可以用来处理物......
  • 如何精准识别主数据?
    编 辑:彭文华​彭友们好,我是老彭啊。最近有彭友跟我欲言又止,吞吞吐吐不知道要干啥。我明白,他是有问题了。绕了半天,他才问:怎么才能精准识别主数据呢?我一看这个问法,肯定是遇到......
  • 父组件为子组件传递数据(静态数据)
    <!DOCTYPEhtml><htmllang="en"><head><metacharset="UTF-8"><metaname="viewport"content="width=device-width,initial-scale=1.0"><metahttp-e......
  • qgis连接postgis,将空间数据导出为shp格式
    之前遇到了一个需求,需要将postgis中GIS数据导出成shapefile文件参考:https://jackie-sun.blog.csdn.net/article/details/124140827?spm=1001.2014.3001.5502......
  • 为什么回家抢个票这么难:原来你忽略了这十个技巧!
    这是 herongwei 的第 96 篇原创阅读本文大概需要3 分钟。2019年就要结束了,看一下日历,还有2天就是2020年的元旦了。时间过得真的快。2019年,你看着自己支付宝里所......
  • 我为什么会从Google辞职?
    今天分享一名前谷歌工程师,下定决定从谷歌离职,离开目前这个安稳的环境,去做一些新探索的心里路程。每当我身边的朋友听到我从Google辞职的消息,都会不约而同地问我:“那么,接下......
  • 枚举与接口常量、类常量有什么区别?
    目录一个简单的需求接口常量类常量枚举什么是枚举?枚举常量限制输入的类型枚举可以使用==来比较吗?枚举实现单例作者:小牛呼噜噜|https://xiaoniuhululu.com计算机内功、......
  • SEO是什么意思?
    SEO(SearchEngineOptimization):汉译为搜索引擎优化。是一种方式:利用搜索引擎的规则提高网站在有关搜索引擎内的自然排名。目的是让其在行业内占据领先地位,获得品牌收益。很......