发布于 2016-05-15 07:34:08 | 76 次阅读 | 评论: 0 | 来源: 网友投递

这里有新鲜出炉的Hadoop教程,程序狗速度看过来!

Hadoop分布式系统

一个分布式系统基础架构,由Apache基金会所开发。 用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力高速运算和存储。



复制代码
代码如下:

<property>
<name>fs.checkpoint.dir</name>
<value>/disk1/hdfs/namesecondary,/disk2/hdfs/namesecondary</value>
</property>
<property>
<name>fs.checkpoint.dir</name>
<value>/disk1/hdfs/namesecondary,/disk2/hdfs/namesecondary</value>
<final>true</final>
</property>
</configuration>

core-site.xml

1. 整个Hadoop的入口
2.在主节点中,namenode必须配置


复制代码
代码如下:

<configuration>
<property>
<name>fs.default.name</name>
<value>hdfs://namenode/</value>
</property>
</configuration>

hdfs-site.xml
1. 此配置想用于保存fimage和editlog,尽量将此目录放在安全的地方。

复制代码
代码如下:

<configuration>
<property>
<name>dfs.name.dir</name>
<value>/disk1/hdfs/name,/remote/hdfs/name</value>
</property>
<configuration>

下面配置文件是用于存储数据的。数据分块放的目录


复制代码
代码如下:

<property>
<name>dfs.data.dir</name>
<value>/disk1/hdfs/data,/disk2/hdfs/data</value>
</property>



相关阅读 :
hadoop入门之hdfs的重要配置项的说明
hadoop入门之hdfs基本操作命令使用方法
hadoop入门之验证hdfs是否能够正常运行的方法
hadoop入门之通过java代码实现将本地文件上传到hadoop的文件系统
hadoop入门之设置datanode的心跳时间的方法
hadoop入门之hadoop集群验证任务存放在不同的节点上
hadoop入门之统计单词在文件中出现的个数示例
hadoop入门之通过页面验证hadoop是否安装成功的方法
hadoop入门之namenode工作特点介绍
hadoop中一些常用的命令介绍
hadoop的hdfs文件操作实现上传文件到hdfs
用PHP和Shell写Hadoop的MapReduce程序示例
最新网友评论  共有(0)条评论 发布评论 返回顶部

Copyright © 2007-2017 PHPERZ.COM All Rights Reserved   冀ICP备14009818号  版权声明  广告服务