hadoop学习

1. 安装和配置Hadoop: （1）下载配置虚拟机（ip主机防火墙）。下架jdk（环境变量）和hadoop（根据网上教程进行查询测试）

2. 创建Web应用程序: 创建一个Web应用程序，用于与Hadoop交互。Python语言来编写应用程序。

3. 集成Hadoop客户端库: 在的Web应用程序中，需要引入Hadoop的客户端库，以便能够与Hadoop集群进行通信。对于Python，可以使用hadoopy或hdfs库。

4. 连接到Hadoop集群: 在Web应用程序中，通过使用Hadoop客户端库提供的方法连接到Hadoop集群。这通常涉及指定Hadoop NameNode的地址和端口号。

5. 实现增删改查操作: 在Web应用程序中实现对Hadoop数据的增删改查操作。
   
   

增：

from hadoopy import writetb
data = [('Alice', 25), ('Bob', 30)]
writetb('/path/to/hdfs/directory', data)

删：

from hadoopy import deletetb
deletetb('/path/to/hdfs/directory')

改：

from hadoopy import deletetb, writetb
deletetb('/path/to/hdfs/directory')
new_data = [('Alice', 26), ('Bob', 31)]
writetb('/path/to/hdfs/directory', new_data)

查：

from hadoopy import readtb
data = readtb('/path/to/hdfs/directory')
for row in data:
print(row)