欢迎来到尧图网

客户服务 关于我们

您的位置:首页 > 文旅 > 艺术 > 安装并运行hadoop程序

安装并运行hadoop程序

2025/4/19 8:18:03 来源:https://blog.csdn.net/2403_87107889/article/details/146095802  浏览:    关键词:安装并运行hadoop程序

1.在虚拟机上安装javaJDK

(1)把javaJDK文件上传到服务器

        在opt文件夹下新建一个software文件夹,将jdk拖入software

(2)解压文件

        在opt文件夹下新建一个module文件夹,确认上传成功之后,在software(进入命令:cd /opt/software)目录下,运行如下命令:

        tar -zxvf jdk-8u212-linux-x64.tar.gz -C /opt/module/

(3)配置环境变量

在如下路径新建文件写入代码并保存:

#JAVA_HOME
export JAVA_HOME=/opt/module/jdk1.8.0_212
export PATH=$PATH:$JAVA_HOME/bin

 

source一下/etc/profile文件,让新的环境变量PATH生效:

        source /etc/profile

在任意目录下输入java -version,看是否能出现jdk版本

2.在虚拟机上安装hadoop

(1)把hadoop文件上传到服务器

将hadoop拖入software

输入如下命令进入software:

        cd /opt/software

(2)解压文件

在输入如下命令进行解压:

        tar -zxvf hadoop-3.1.3.tar.gz -C /opt/module/

(3)配置环境变量

在my_env.sh输入如下代码并保存:

#HADOOP_HOME
export HADOOP_HOME=/opt/module/hadoop-3.1.3
export PATH=$PATH:$HADOOP_HOME/bin
export PATH=$PATH:$HADOOP_HOME/sbin

 输入如下代码查看hadoop是否安装成功

 

3.运行官方WordCount程序

在如下目录新建文件夹wcinput

 

 在wcinput新建两个文件

写入如下内容:

 

 

输入命令进入:

        cd /opt/module/hadoop-3.1.3/wcinput 

输入命令运行:

        hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.3.jar wordcount wcinput wcoutput

 查看计数:

版权声明:

本网仅为发布的内容提供存储空间,不对发表、转载的内容提供任何形式的保证。凡本网注明“来源:XXX网络”的作品,均转载自其它媒体,著作权归作者所有,商业转载请联系作者获得授权,非商业转载请注明出处。

我们尊重并感谢每一位作者,均已注明文章来源和作者。如因作品内容、版权或其它问题,请及时与我们联系,联系邮箱:809451989@qq.com,投稿邮箱:809451989@qq.com

热搜词