Hadoop本地模式安装步骤

创建时间:2020-03-29 16:22

阅读:

1、安装JDK

2、apache官网下载hadoop压缩包，下载linux版的tar.gz格式的，并解压到要安装的目录下

1	tar -zxvf hadoop-2.7.3.tar.gz -C /opt/apps

3、设置软链接

1	ln -s hadoop-2.7.3 hadoop

4、配置环境变量

1	vi /etc/profile

在文件后面添加

1
2
3

#hadoop //#代表注释 
export HADOOP_HOME=/opt/apps/hadoop
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

5、实时生效环境变量

1	source /etc/profile

6、验证hadoop是否安装成功

1	hadoop version

到此hadoop本地模式安装成功，我们可以在本地模式下做个小练习

1	cd /opt/apps/hadoop-2.7.3/share/hadoop/mapreduce

进入到这个目录，可以看到里面有很多jar包，我们使用hadoop-mapreduce-examples-2.7.3.jar完成此练习
1、首先我们在hadoop根目录下创建一个输入目录input,并新建一个文件，里面随便写入一些内容

cd /opt/apps/hadoop-2.7.3
mkdir input
cd input
vi wc.input
cd ..
hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.3.jar wordcount input output
cd output
less part-r-00000

转载请注明来源，欢迎对文章中的引用来源进行考证，欢迎指出任何有错误或不够清晰的表达。可以在下面评论区评论，也可以邮件至 jaytp@qq.com