发布于 2014-11-03 23:25:33 | 233 次阅读 | 评论: 0 | 来源: 网友投递
Hadoop分布式系统
一个分布式系统基础架构,由Apache基金会所开发。
用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力高速运算和存储。
Spring for Apache Hadoop 2.0.3 发布,此版本现已提供在 Maven Central 和 Spring 库。此版本包括 bug 修复和依赖版本更新。此版本的依赖项匹配了下一个 Spring IO 平台 1.0.3 版本。更多内容请看 changelog 或者 JIRA release notes。
此版本支持 Apache Hadoop 2.5.1(Hadoop25)和 Pivotal HD 2.1(phd21)。
下载:
2.0.3.RELEASE - Apache Hadoop 2.2.x [2.2.0]
2.0.3.RELEASE-hadoop12 - Apache Hadoop 1.2.x [1.2.1]
2.0.3.RELEASE-hadoop24 - Apache Hadoop 2.4.x [2.4.1]
2.0.3.RELEASE-hadoop25 - Apache Hadoop 2.5.x [2.5.1]
2.0.3.RELEASE-phd1 - Pivotal HD 1.0 [2.0.5-alpha-gphd-2.1.0.0]
2.0.3.RELEASE-phd20 - Pivotal HD 2.0 [2.2.0-gphd-3.0.1.0]
2.0.3.RELEASE-phd21 - Pivotal HD 2.1 [2.2.0-gphd-3.1.0.0]
2.0.3.RELEASE-cdh4 - Cloudera CDH4 MR1 [2.0.0-mr1-cdh4.6.0]
2.0.3.RELEASE-cdh5 - Cloudera CDH5 YARN [2.3.0-cdh5.1.3]
2.0.3.RELEASE-hdp13 - Hortonworks Data Platform 1.3 [1.2.0]
2.0.3.RELEASE-hdp20 - Hortonworks Data Platform 2.0 [2.2.0]
2.0.3.RELEASE-hdp21 - Hortonworks Data Platform 2.1 [2.4.0]
Spring Hadoop 团队正计划支持 Apache Hadoop 2.6,Hortonworks HDP 2.2 和 Cloudera CDH 5.2。
项目页面: http://projects.spring.io/spring-hadoop/
Spring for Apache Hadoop 提供了 Spring 框架用于创建和运行 Hadoop MapReduce、Hive 和 Pig 作业的功能,包括 HDFS 和 HBase。如果你需要简单的基于 Hadoop 进行作业调度,你可添加 Spring for Apache Hadoop 命名空间到你的 Spring 项目即可快速使用 Hadoop 了,使用该项目无需了解过多 Hadoop 技巧。
Spring for Apache Hadoop 是 Spring Data 的子模块之一。