实验一：通过界面监控大数据平台运行状态

实验一：通过界面监控大数据平台运行状态

1.实验任务一：通过界面查看大数据平台状态

通过大数据平台 Hadoop 的用户界面可以查看平台的计算资源和存储资源。

打开 http://master:8088/cluster/nodes 页面，可以查看大数据平台的状态汇总信息.

2.实验任务二：通过界面查看 Hadoop 状态

大数据平台 Hadoop 提供了一个简单的 web 访问接口，网址是 http://master:50070， 可以查看 Hadoop 的运行状态，主菜单包含状态总览、数据节点、挂载失败节点、快照、日 记等状态，

（1）Overview（总览），查看 Hadoop 启动时间、版本号、命名节点日志状态、命名节 点存储状态等信息；

（2）Datanodes（数据节点），查看正在运行、停止运行的数据节点信息；

（3）DataNode Volume Failures（数据节点挂载失败），查看挂载失败的数据节点；

（4）Snapshot（快照），查看快照建立、删除的信息；

（5）Startup Progress（启动进程），查看启动进程信息；

（6）Browse The File System（文件系统浏览），查看 HDFS 中的文件和文件夹；

（7）Logs（日记），查看 Hadoop 的命名节点、资源管理等日志

Summary（概要）

在 Summary 中的结果显示，Security（安全状态）和 SafeMode（安全模式）处于关闭状 态；HDFS 的 Configured Capacity（存储空间配置）容量为 73.95GB，空闲空间（DFS Remaining） 为 68.96 GB；还显示了名称节点日志状态（Journal Manager State）和名称节点存储 （NameNode Storage）的具体路径等

实验二 通过界面监控大数据平台资源状态

1.实验任务一：通过界面监控 YARN 的状态

在配置好 Hadoop 集群之后，可以通过浏览器登录“http://master:8088”，查询 YARN 的状态

从上图可以获知 YARN 的内存总额 16GB、虚拟核心 16 个、活动节点 2 个等相关信息。

在大数据平台 Hadoop 中查看 MapReduce 运行日志，登录 http://master:8088/logs/，

注意:查看 mapreduce 日志需要先启动 jobhistory 进程

[hadoop@master ~]$ cd /usr/local/src/hadoop/sbin
[hadoop@master sbin]$  ./mr-jobhistory-daemon.sh start historyserver
starting historyserver, logging to /usr/local/src/hadoop/logs/mapred-hadoop-historyserver-master.out

查看 MapReduce 运行状态，登录 http://master:8088/cluster，

选择其中一个任务，查看任务状态，

2.实验任务二：通过界面监控 HDFS 状态

在配置好 Hadoop 集群之后，可以通过浏览器登录“http://master:50070”访问 HDFS 文件系统，点击 Utilities-->Browse The File Systerm，

从上图中可以看到 HDFS 目录中的文件夹和文件，并显示文件属性、大小、和修改日期 等信息。

HDFS 文件夹打开和文件下载操作如下：

1.打开文件夹

2.下载 HDFS 中的文件 点击需要下载的文件，如 hbase.id 文件，

3.实验任务三：通过界面监控 HBase 的状态

安装部署好 HBase 后，可以通过用户界面来访问 HBase 的状态、日记等相关信息。访问 Web 用户界面地址分别为：master：60010 ；slave1：60010 ；slave2:60010 。

[hadoop@master ~]$ cd 
ZooKeeper JMX enabled by default
Using config: /usr/local/src/zookeeper/bin/../conf/zoo.cfg
Starting zookeeper ... STARTED
[hadoop@master ~]$ start-hbase.sh
master: starting zookeeper, logging to /usr/local/src/hbase/logs/hbase-hadoop-zookeeper-master.out
slave1: starting zookeeper, logging to /usr/local/src/hbase/bin/../logs/hbase-hadoop-zookeeper-slave1.out
slave2: starting zookeeper, logging to /usr/local/src/hbase/bin/../logs/hbase-hadoop-zookeeper-slave2.out
starting master, logging to /usr/local/src/hbase/logs/hbase-hadoop-master-master.out
slave2: starting regionserver, logging to /usr/local/src/hbase/bin/../logs/hbase-hadoop-regionserver-slave2.out
slave1: starting regionserver, logging to /usr/local/src/hbase/bin/../logs/hbase-hadoop-regionserver-slave1.out
[hadoop@master ~]$ jps
2546 Jps
2340 HMaster
1991 QuorumPeerMain
1545 SecondaryNameNode
1706 ResourceManager
2236 HQuorumPeer
1343 NameNode

1.HBase 用户界面主页

HBase 的主页访问地址为 http://master:60010，

HBase 的用户主界面菜单有 Table Details（表信息）、Local Logs（本地日志）、Log Level（日记等级）、Debug Dump（调试转储）、Metrics Dump（指标转储）、HBase Configuration （HBase 配置）。

Region Servers（区域服务器群）中可以查看主机状态、内存、请求、存 储文件和压缩情况等；列表中共有三台主机，主机名分别为 master、slave1 和 slave2，如 点击 master 主机，可以查看该主机详细指标信息