Mac OS X下安装Hadoop

2013-10-15 18:37:20

1、安装brew

2、安装xcode命令行工具，以及JAVA，看看需不需要设置JAVA_HOME

3、安装依赖
brew install protocolbuf maven

4、下载
$ wget http://mirror.esocc.com/apache/hadoop/common/hadoop-2.1.0-beta/hadoop-2.1.0-beta-src.tar.gz

5、解压
$ mvn clean install -DskipTests
$ mvn package -Pdist -Dtar -DskipTests -Dmaven.javadoc.skip

hadoop-dist/target/ 里面会有对应的tar包

6、运行
$ bin/hadoop jar ./share/hadoop/mapreduce/hadoop-mapreduce-client-jobclient-2.1.0-beta-tests.jar minicluster -rmport RM_PORT -jhsport JHS_PORT

RM_PROT和JHS_PORT是需要指定的