首页 > 其他分享 >Hive查看所有表/分区更新时间

Hive查看所有表/分区更新时间

时间:2023-07-28 10:47:14浏览次数:29  
标签:hdfs 查看 分区 dfs Hive table

业务需求: 开始环境可能不太稳定, 需要每天手动检查 Hive 里面的数据是否同步

## 步骤
1. 查看分区
show partitions table_name;

2.查看分区更新时间
- 获取hdfs路径
desc formatted table_name;

3. 通过dfs -ls < hdfs path>命令查看数据文件最新更新时间
dfs -ls hdfs://hdfs-master:9000/user/hive/warehouse/ods.db/test;

标签:hdfs,查看,分区,dfs,Hive,table
From: https://www.cnblogs.com/Dr-wei/p/17586951.html

相关文章

  • 65.oracle中查看缓存命中率
    DBBlockGets:请求的数据块在buffer能满足的个数当前模式块意思就是在操作中正好提取的块数目,而不是在一致性读的情况下而产生的块数。正常的情况下,一个查询提取的块是在查询开始的那个时间点上存在的数据块,当前块是在这个时刻存在的数据块,而不是在这个时间点之前或者之后的数据......
  • linux安装配置mysql | 查看mysql初始密码 | mysql找回密码
    摘要一、步骤首先要卸载centos7自带的mariadb数据库rpm-qa|grepmari查询rpm-e--nodepsxxx(关于maria都要删除)然后安装mysql创建文件/opt/mysql上传mysql文件,这里上传的是tar文件,没有gz(也可以使用wget指令,不过可能下载的会很慢)解压即可然后按照顺序逐个暗转......
  • linux软件管理:rpm文件及指令 | 软件的安装、卸载、查询、查看
    摘要介绍linux的rpm文件以及rpm指令一、rpm介绍rpm用于互联网下载包的打包及安装工具,它包含在某些Linux分发版中。它生成具有.RPM扩展名的文件。RPM是RedHatPackageManager(RedHat软件包管理工具)的缩写,类似windows的setup.exe(可以理解为rpm文件是一个安装的可执行程序)......
  • linux软件管理:yum指令 | 软件的下载 | 查看安装的软件
    摘要一、yum介绍Yum是一个Shell前端软件包管理器。基于RPM包管理,能够从指定的服务器自动下载RPM包并且安装可以自动处理依赖性关系,并且一次安装所有依赖的软件包。二、yum指令1.查询软件指令功能说明选项`yumlistmore`查询安装的所有软件`yumlistgr......
  • linux进程:进程介绍 | 进程查看指令 | 查看父进程 | linux进程树
    摘要目的:介绍linux的进程关于进程查看的相关指令:ps、pstree等一、linux进程介绍在LINUX中,每个执行的程序都称为一个进程。每一个进程都分配一个ID号(pid,进程号)。程序就是一段代码,但是程序运行时就会加载到内存中,就成为了进程每个进程都可能以两种方式存在的。前......
  • 主机名解析过程:Hosts文件 | DNS | windows查看DNS缓存 | 隐患
    摘要目的:本文以linux虚拟机和Windows为例,来介绍一下主机名解析过程主机名解析不完全是靠DNS一、基本概念主机名:比如www.baidu.com、hadoop100等等1.Hosts文件hosts文件是一个文本文件,用来记录IP和Hostname(主机名)的映射关系在Windows和linux里面都有Windows:C:\Wi......
  • 查看虚拟机网络ip信息:vmnet8的ip
    摘要目的:查看虚拟机虚拟网络的ip,网关等(也可以设置)查看/设置主机虚拟网络1.VMWare查看首先点击虚拟网络编辑器然后点击更改设置然后就可以设置了虚拟网络的子网了点击DHCP设置有起始和结束的IP设置设置网关如下当然也可以用另一种方式查看2.主机查看查......
  • linux分区与目录介绍
    摘要目的:介绍linux分区与目录的关系linux分区介绍1.linux分区与目录Linux来说无论有几个分区,分给哪一目录使用,它归根结底就只有一个根目录,一个独立且唯一的文件结构,Linux中每个分区都是用来组成整个文件系统的一部分。Linux采用了一种叫“载入”的处理方法,它的整个文件系统......
  • free -h查看内存情况,发现free部分远小于available
    原因是buff/cache占用了大量内存,需要手动释放下:echo3>/proc/sys/vm/drop_caches#参数说明:#0:不释放(系统默认值)#1:释放页缓存#2:释放dentries和inodes#3:释放所有缓存CacheMemory(缓存内存)当读写文件的时候,Linux内核为了提高读写性能与速度,会将文件在内存中进行缓存,这部分......
  • 磁盘分区制作LVM
    磁盘分区制作LVM查看磁盘空间可以看到sdb盘有5.5.个Tlsblk创建分区想要创建1T的分区,可以这么做先输入命令fdisk/dev/sdb然后顺序输入n和p和+1024G和w来创建出1T的分区截图参考创建PV,VG,LV接下里创建PV,VG,LV并挂载命令pvcreate/dev/sdb1vgcreatevg1/dev/sdb1l......