发布于 2016-05-15 08:38:13 | 408 次阅读 | 评论: 0 | 来源: 网友投递

这里有新鲜出炉的Hadoop教程，程序狗速度看过来！

Hadoop分布式系统

一个分布式系统基础架构，由Apache基金会所开发。 用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力高速运算和存储。

---

Linux环境：CentOs6.4
Hadoop版本：Hadoop-1.1.2
master: 192.168.1.241      NameNode    JobTracker   DataNode   TaskTracker
slave:192.168.1.242    DataNode   TaskTracker
内容：设置DataNode的心跳，当某一个节点失去连接之后，在超过设置的时间，看hadoop能否正常工作。
设置时间：

第一步：  配置hdfs-site.xml
  

第二步：重启Hadoop

第三步：通过网页浏览两个节点的状态。

hadoop两个节点都已正常运行。

第三步：杀死主节点的进程，等待15秒。

通过kill命令杀死master上的DataNode节点。

第四步：查看节点状态

活着的DataNode还有1个，死亡的DataNode一个

master上的DataNode节点已经标识为Dead

只剩下slave节点，其最后连接时间是2秒（Last Contact 2）

杀死一个节点，两一个节点仍能够正常查看文件信息。

只有slave节点在运行。