HDFS体系结构HDFS支持主从结构，主节点称为NameNode，是因为主节点上运行的有NameNode进程，NameNode支持多个，目前我们的集群中只配置了一个从节点称为DataNode，是因为从节点上面运行的有DataNode进程，DataNode支持多个，目前我们的集群中有两个HDFS中还包含一个SecondaryNameNode进程，

HDFS的常见Shell操作直接在命令行中输入hdfsdfs，可以查看dfs后面可以跟的所有参数。详细使用方法请参考官方文档。注意：这里面的[]表示是可选项，<>表示是必填项[hadoop@hadoop81hadoop]$hdfsdfsUsage:hadoopfs[genericoptions] [-appendToFile<localsrc>...<dst>] [-cat

解决root用户对HDFS文件系统没有权限的问题说明：HDFS文件系统的目录基本都属于supergroup超级用户组，所以就把用户添加到该用户组，即可解决很多权限问题。第一步：在Linux执行如下命令增加supergroup用户组groupaddsupergroup第二步：然后将用户root增加到supergroup用户组

目录Hadoop系列文章目录一、语法格式二、具体命令示例1、mkdir命令2、ls命令3、put命令4、rm命令5、moveFromLocal命令6、-get7、cat命令8、head命令9、tail命令10、cp拷贝命令11、appendToFile命令12、df命令13、du命令14、mv命令15、setrep命令16、checksum17、co

输入 pig-xlocal 此时pig和本地的文件系统交互省略 “-xlocal”，pig和hdfs交互1、在pig中执行HDFS的命令grunt>fs-ls/Found5itemsdrwxr-xr-x -rootsupergroup     02013-01-3014:32/datadrwxr-xr-x -rootsupergroup     02