发布于 2016-05-15 07:34:08 | 76 次阅读 | 评论: 0 | 来源: 网友投递
这里有新鲜出炉的Hadoop教程，程序狗速度看过来！
Hadoop分布式系统
一个分布式系统基础架构，由Apache基金会所开发。
用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力高速运算和存储。
<property>
<name>fs.checkpoint.dir</name>
<value>/disk1/hdfs/namesecondary,/disk2/hdfs/namesecondary</value>
</property>
<property>
<name>fs.checkpoint.dir</name>
<value>/disk1/hdfs/namesecondary,/disk2/hdfs/namesecondary</value>
<final>true</final>
</property>
</configuration>
core-site.xml
1. 整个Hadoop的入口
2.在主节点中，namenode必须配置
<configuration>
<property>
<name>fs.default.name</name>
<value>hdfs://namenode/</value>
</property>
</configuration>
hdfs-site.xml
1. 此配置想用于保存fimage和editlog，尽量将此目录放在安全的地方。
<configuration>
<property>
<name>dfs.name.dir</name>
<value>/disk1/hdfs/name,/remote/hdfs/name</value>
</property>
<configuration>
下面配置文件是用于存储数据的。数据分块放的目录
<property>
<name>dfs.data.dir</name>
<value>/disk1/hdfs/data,/disk2/hdfs/data</value>
</property>
相关阅读 :
hadoop入门之hdfs的重要配置项的说明
hadoop入门之hdfs基本操作命令使用方法
hadoop入门之验证hdfs是否能够正常运行的方法
hadoop入门之通过java代码实现将本地文件上传到hadoop的文件系统
hadoop入门之设置datanode的心跳时间的方法
hadoop入门之hadoop集群验证任务存放在不同的节点上
hadoop入门之统计单词在文件中出现的个数示例
hadoop入门之通过页面验证hadoop是否安装成功的方法
hadoop入门之namenode工作特点介绍
hadoop中一些常用的命令介绍
hadoop的hdfs文件操作实现上传文件到hdfs
用PHP和Shell写Hadoop的MapReduce程序示例