首页 > 其他分享 >presto/trino QueryStatistics 数据来源分析

presto/trino QueryStatistics 数据来源分析

时间:2023-09-18 15:57:00浏览次数:39  
标签:inputOperator presto 累加 QueryStatistics WorkProcessorPipelineSourceOperator trin

QueryStatistics
QueryStats
来自 stageStats 累加
来自 taskStats 累加

PipelineStats
driverStats

OperatorStats inputOperator PageSourceOperator TableScanOperator WorkProcessorPipelineSourceOperator WorkProcessorSourceOperatorAdapter

标签:inputOperator,presto,累加,QueryStatistics,WorkProcessorPipelineSourceOperator,trin
From: https://www.cnblogs.com/leegoo/p/17712168.html

相关文章

  • Trino HTTPS 与密码认证介绍与实战操作
    目录一、概述二、安装Trino三、配置HTTPS1)生成证书2)配置Trino3)修改Trinodocker-composeyaml文件4)开始部署Trino5)测试验证四、密码认证1)开启密码认证2)创建密码认证配置文件3)修改Trinodocker-composeyaml文件4)开始部署Trino5)测试验证五、权限控制(优雅下线)1)配置etc/ac......
  • 关于Kubernetes-v1.23-pod-生命周期-postStart-preStop-terminationGracePeriodSecond
    我们在一个pod的yaml配置文件中,有时会看到,terminationGracePeriodSeconds选项,与containers:同级,一般可以放于spec:下面即可是当pod,变为删除的状态后,会给pod一个宽限期,让pod去执行一些清理或者销毁操作另外还有两个选项,postStart,preStop,这两个是位于lifecycle,属于pod生命周期......
  • 什么是 JMX?(Trino JMX 实战讲解)
    目录一、概述二、JMX原理三、实战操作(开启TrinoJMX)1)环境部署2)开启TrinoJMX1、配置config.properties2、配置jvm.config3、重新启动服务4、获取监控数据3)通过jconsole连接JMX4)常用的Trino指标接口和指标一、概述JMX是JavaManagementExtensions(Java管理扩展)的缩......
  • trino on yarn
    一、前言   最近在研究trinoonyarn功能,网上大部分都是关于prestoonyarn文章,关于trinoonyarn资料很少,但是本质上差不多,需要修改一些内容比,主要在调试方面这个slider不是很方便,分享下实践过程。 如果Trino集群没有弹性扩缩容需求或者已经有很成熟的K8S容器部署方案......
  • Trino418版本动态加载catalog不需要重启集群修改思路及实现
        熟悉Trino的同学应该都知道Trino新增、删除catalog都需要重启集群,这个生产环境里如果需要频繁增加数据源的场景是非常不友好的操作。  网上关于动态加载Catalog的方案有一些,但是在Trino比较新的版本里面已经无法适用。 目前官方关于这个功能一直都没有完成,详细......
  • 数据仓库(十二)---分布式SQL查询引擎---teradata版本的presto安装和使用
    我们在使用presto过程中,发现facebook原版和京东原版都是解压可用,teradata版本的安装要麻烦一些。下面对teradata版本的安装过程进行记录。首要条件1、需要python2.6或者python2.7环境之所以需要python环境是因为teradata版本的presto把安装封装成了集群式安装。根据配置在安装过......
  • Clickhouse、Mysql、Presto数据库解析Json数据
    一、Clickhouse解析Json1、visitParamExtractBool(json,name)→提取json中的name字段,返回UInt8,0或1  例:visitParamExtractBool('{"name":true}','name')ASbool2、visitParamExtractInt(json,name)→提取json中的name字段,返回Int型的值  例:visitParamExtractInt......
  • Trino集成各组件
    HiveMysqlHuditrino集成hudi是基于hivecatalog,同样是访问hive外表进行查询。如果要集成,需要把huditrinojar包copy到trinopluginhive插件下面。cphudi/hudi-0.12.0/packaging/hudi-trino-bundle/target/hudi-trino-bundle-0.12.0.jar$TRINO_HOME/plugin/hive/查询......
  • 新书上市 | 流行SQL引擎Presto,官方实战指南来了
    2012年,Facebook的用户数量突破10亿,成为当时全球最大的社交网络。也是在这一年,Facebook的Hive数据仓库达到了250PB,每天需要处理成千上万条查询。在Facebook内部,Hive逐渐到达极限,并且它无法查询其他数据源。同年,DainSundstrom、DavidPhillips、MartinTraverso和EricHwang加入Face......
  • 使用presto 进行跨库数据对比
     明细+汇总 1SELECT2concat(3'selecta.*from('4,concat('',array_join(TRANSFORM(table_catalog_schema,_->concat('selectid,map(array[',column_name_str,'],split(',array_join(TRANSFORM(column_nam......