首页 > 其他分享 >数仓实践-元数据

数仓实践-元数据

时间:2024-06-17 10:53:56浏览次数:12  
标签:数仓 查询 实践 dataworks cost 权限 数据

1.元数据:关于数据的数据

2.元数据分类:

主题域

英文名称

主题域前缀

描述

成本域

cost

cost

表和目录的存储消耗,任务的计算资源消耗。

权限域

authority

auth

dataworks数据访问权限申请记录,冗余权限统计。

任务域

task

task

dataworks任务,MC上的application。

查询域

query

query

各个查询引擎、MC上报的查询日志、热度信息。

资产域

asset

asset

表、字段、库、目录、文件等数据资产

 

基本上都叫“数据地图”,阿里等自带元数据表

几张常用的表:

 

标签:数仓,查询,实践,dataworks,cost,权限,数据
From: https://www.cnblogs.com/jiangbei/p/18251932

相关文章

  • 科技赋能云顶森林:大数据平台引领绿色管理新时代
    在遥远的云顶之上,有一片生机盎然的森林,它不仅是动植物的家园,更是自然与人类和谐共生的典范。然而,如何在这片广袤的森林中实施高效、科学的管理,一直是一个摆在管理者面前的难题。幸运的是,随着科技的飞速发展,云顶森林迎来了它的“智慧之心”——云顶森林管理大数据平台。 山海鲸......
  • 8、docker-容器数据卷- -v 方式一挂载
    docker理念:将应用和环境打包成一个镜像如果数据都在容器中,那只要删除容器数据就会丢失,所有需要数据卷来实现数据的持久化 什么叫容器数据卷:·容器之间可以有一个数据共享技术、把docker容器中产生的数据,同步到本地,类似目录的挂载,将容器里的目录挂载到主机上·实现容......
  • 9、docker-mysql容器数据同步到本机-挂载
    1、查看镜像、下载镜像·dockersearchmysql·dockerpullmysql:5.7//指定下载5.7版本2、启动镜像-d后台运行-p端口映射主机端口:容器端口-v卷挂载-e环境配置这里配置的是数据库的密码--name容......
  • Oracle数据库ORA-12514错误消息
    引用:https://www.php.cn/faq/131370.htmlhttps://blog.csdn.net/arrowzz/article/details/17144653https://www.51969.com/post/18969077.htmlhttps://blog.csdn.net/yuan1164345228/article/details/115310827https://www.cnblogs.com/danghuijian/archive/2010/01/07/440......
  • NI SCXI-1000 数据采集和控制框架
    SCXI-1000特点:模块化设计:该框架采用模块化设计,可以根据实际需求选择不同的模块进行组合,以满足各种数字量控制系统的需求。高可靠性:在设计和制造过程中采用了高品质的材料和工艺,保证了其能够在恶劣的环境条件下稳定运行。多通道支持:支持多个数字量输入/输出通道,可以同时处理......
  • 基于数据挖掘的虚假评论识别方法研究(论文模版参考)
    第一章绪论1.1研究背景和意义随着互联网和社交媒体的快速发展,人们越来越倾向于在网络上表达自己的观点和评价。虚假评论作为网络评论的一种,对消费者、商家以及整个市场都带来了很大的影响。虚假评论不仅误导了消费者的购买决策,损害了商家的信誉,还可能导致市场竞争的扭曲......
  • 前端使用websocket获取数据时,是每个数据都调用一个websocket接口还是只调用一个websoc
    使用WebSocket时,通常的做法是只建立一个WebSocket连接,通过这个连接来获取和发送所有相关数据。WebSocket协议本身就是为了实现双向通信而设计的,它提供了一种长期持久的连接,允许服务器主动向客户端推送数据。如果为每条数据都创建一个新的WebSocket连接,不仅会浪费资源(比如额外的......
  • 针对数据出入境场景 怎么选择合适的跨国文件传输方案?
    数据出入境已经是一种非常普遍的业务场景,数据在跨国流转过程中,会面临种种问题和风险,所以寻找一套合适的跨国文件传输方案,是企业的当务之急!数据跨国传输可能会面临得挑战有如下几个:1、法律法规限制:不同国家和地区可能有不同的数据保护法律法规,要求在数据跨国传输过程中必须满足......
  • Dynamics CRM 365 使用FetchXml 查询数据(Query data using FetchXml )
    前言FetchXml是一种基于XML的专有查询语言,用于从Dataverse检索数据。添加引用Microsoft.CrmSdk.CoreAssembliesSystem.Configuration检索数据(Retrievedata)RetrieveMultipleusingMicrosoft.Xrm.Sdk.Query;usingMicrosoft.Xrm.Sdk;usingMicrosoft.Xrm.Tooling.C......
  • Dynamics CRM 365 使用 FetchXml 聚合数据(Aggregate data using FetchXml)
    前言FetchXML包括分组和聚合功能,可用于计算多行数据的总和、平均值、最小值、最大值和计数。若要返回聚合值,必须:将aggregate设置为true。为每个属性元素设置别名alias属性。将每个属性元素的aggregate属性设置为以下聚合函数之一:函数返回值avg包含数据的......