Hadoop快速部署工具 EasyHadoop

fmms 13年前

EasyHadoop 是一个Hadoop一键安装脚本,方便大家更容易安装部署Hadoop软件。

EasyHadoop 源自暴风影音Hadoop数据平台项目而来,由暴风影音数据团队修湘同学调研,并由向磊同学编写。

本着从来源中来,到开源中去,并回馈开源社区的回馈思想。

开放此脚本方便大家安装使用,以此和行业共同学习进步。

支持特性如下:

1.Haoop 稳定版本 hadoop-0.20.203

2.集成 JDK 6

3.集成LZO,hadoop-gpl-packaging-0.2.8-1

4.支持 配置输入 map槽 reduce槽 单个槽memory

5.支持64位 linux 操作系统. 特别是 redhat centos

6.集成 hive-0.7.1,支持Lzo读取

7.集成 pig,支持Lzo读取

使用方法:

wget http://www.easyhadoop.com/EasyHadoop_v1.0.sh
chmod +x EasyHadoop_v1.0.sh
./EasyHadoop_v1.0.sh 6 2 512
使用说明:
./EasyHadoop_v1.0.sh map.tasks.maximum[map槽] reduce.tasks.maximum[reduce槽] memory[单个槽memory]

项目主页:http://www.open-open.com/lib/view/home/1329661928811