• 2024-08-16Hadoop 中的大数据技术:调优篇(2)
    HDFS—存储优化纠删码纠删码原理概述HDFS默认情况下,一个文件有3个副本,这虽然提高了数据的可靠性,但也带来了2倍的冗余开销。Hadoop3.x引入了纠删码机制,通过计算方法,可以节省大约50%的存储空间。纠删码操作命令[[email protected]]$hdfsecUsage:bin/hdfs