首页 > 其他分享 >parquet is not a Parquet file (length is too low: 0)

parquet is not a Parquet file (length is too low: 0)

时间:2023-05-11 11:44:23浏览次数:37  
标签:Parquet length too file parquet test low

当执行 SparkSQL 遇到这个错误时,可能是因为对应分区的数据全被删除了,变成了空分区,解决办法是删除该分区。

hdfs://warehouse/test.db/t_test/20230511/eaf5f003-5658-4b19-b706-ac487cebad7e-0_3-10-79_20230421093519585.parquet is not a Parquet file (length is too low: 0)

删除指定分区语句:

ALTER TABLE test_db.t_test_rt DROP PARTITION (ds=20230511');

标签:Parquet,length,too,file,parquet,test,low
From: https://www.cnblogs.com/aquester/p/17390595.html

相关文章

  • vue3 Type 'never[]' is missing the following properties from type 'Ref ': value,
      加个value就可以了基本在vue3里面类似的错都可以用这种方法......
  • 通过 flow 来批量cancel running flows
    上期介绍了通过powershell来批量cancelrunningflows。powershell固然方便,但是很多公司IT管控不容许AAD本地CMD/powershell登陆,所以flow是更方便的方式。我们可以通过UI去cancel,但是如果量大的情况下肯定不方便(CancelorresubmitflowrunsinbulkinPowerAutomate-Po......
  • struts2 jpg文件上传失败 Content-Type not allowed 解决方案
    org.apache.struts2.interceptor.FileUploadInterceptor-Content-Typenotallowed:upload"upload__75549ca5_1239ddc5ce6__8000_00000161.tmp"image/pjpeg原有配置:用ext+struts2上传时一直显示进度条不消失:Java代码<actionname="xxxAction"cla......
  • HEV串并联(IMMD) 混动车辆仿真 simulink/stateflow模型包含工况路普输入,
    HEV串并联(IMMD)混动车辆仿真simulink/stateflow模型包含工况路普输入,驾驶员模型,车辆控制模型(电池CDCS状态切换以及EVHEVEngine模式转换),电池、电机系统模型,车辆本体模型等。可进行整车仿真测试验证及参数优化,体现IMMD基本原理。ID:42135682671242878......
  • HEV并联(IPS) 车辆仿真 simulink/stateflow搭建 模型包含工况路
    HEV并联(IPS)车辆仿真simulink/stateflow搭建模型包含工况路普输入,驾驶员模型,车辆控制模型(CDCS状态切换以及EVHEVEngine模式转换),电池及电机系统模型,车辆动力学模型等。通过进行仿真测试验证及参数优化,体现IPS基本原理。ID:56100685578019863......
  • 电动车关键部件选型及参数验证实例 simulink/stateflow搭建
    电动车关键部件选型及参数验证实例simulink/stateflow搭建根据设定的车辆目标参数最高车速最大爬坡度及稳定车速加速时间续航等,计算选择车辆关键部件参数(电机电池);同时建立整车模型(驾驶员VCU控制车辆模型),通过仿真模型验证部件选型是否满足车辆的动力性和经济性指......
  • Five_Bus_Load_Flow:基于MATLAB/Simulink的IEEE 5节点潮流计算仿真模型。
    Five_Bus_Load_Flow:基于MATLAB/Simulink的IEEE5节点潮流计算仿真模型。五个潮流母线模块用于指定母线基准电压和光伏母线电压以及摆动母线的电压和相位。潮流参数在同步和异步电机模块的潮流选项卡中定义。仿真条件:MATLAB/SimulinkR2015bID:2850660375687736......
  • 如何使用Java操作TensorFlow
    https://blog.csdn.net/weixin_28906733/article/details/100528526简介机器学习在全球范围内越来越受欢迎和使用。它已经彻底改变了某些应用程序的构建方式,并且可能会继续成为我们日常生活中一个巨大的(并且正在增加的)部分。没有什么包装且机器学习并不简单。它对许多人来......
  • Tensorflow环境搭建教程
    前言笔者在搭建tensorflow环境时遇到了很多问题,浪费了很多时间,为方便想学习机器学习的同学搭建tensorflow环境,笔者整理了一份教程供读者参考。不能直接修改anaconda里的python版本了,另一种更简单的方法:Win10系统用anaconda新建一个tensorflow环境小白教程.一、下载anaconda......
  • tensorflow 输出权重的值
    1.确定权重名称:tvars1=tf.get_collection(tf.GraphKeys.TRAINABLE_VARIABLES)fortmpintvars1:print('all-->',tmp.name)2.根据网络结构从1中找到想要打印的权重名称weight_name,通过下面的方式进行打印fc_logits=tf.get_default_graph().get_tensor_by_name(weigh......