LZO
  • 2024-03-13Hbase常见面试题
    major和minorcompaction区别:1.minor操作:达到TTL(记录保留时间)会被移除,删除和更新的数据仅仅只是做了标记,并没有物理移除,这种合并的触发频率很高。小合并不做数据删除,因为发生频率比较高,消耗性能小。2.major操作:是对region下的hstore下的所有storefile执行合并操作,最终的
  • 2023-09-20Hadoop集群上使用Lzo压缩
    自从Hadoop集群搭建以来,我们一直使用的是Gzip进行压缩当时,我对gzip压缩过的文件和原始的log文件分别跑MapReduce测试,最终执行速度基本差不多而且Hadoop原生支持Gzip解压,所以,当时就直接采用了Gzip压缩的方式关于Lzo压缩,twitter有一篇文章,介绍的比较详细,见这里:Lzo压缩相比Gzip压缩,有
  • 2023-02-07LZO 是 Lempel-Ziv-Oberhumer
    LZO 是致力于解压速度的一种数据压缩算法,LZO 是Lempel-Ziv-Oberhumer的缩写。这个算法是无损算法,参考实现程序是线程安全的。实现它的一个自由软件工具是lzop  
  • 2022-11-11关于hadoop使用lzo压缩的流程
    1.为何要使用lzo看这里,http://blog.cloudera.com/blog/2009/11/hadoop-at-twitter-part-1-splittable-lzo-compression/中文的也很多,搜索一下吧2.安装流程(仅限linux cento
  • 2022-08-22[原创]OpenEmbedded 中文手册 作者:dangbinghoo
    [原创]OpenEmbedded中文手册 分类: LINUX2015-03-0314:48:32原文地址:[原创]OpenEmbedded中文手册 作者:dangbinghoo 声  明:本文章为openembedded英文