【开发环境】安装 Hadoop 运行环境 ( 下载 Hadoop 您所在的位置:网站首页 hadoop安装目录怎么找 【开发环境】安装 Hadoop 运行环境 ( 下载 Hadoop

【开发环境】安装 Hadoop 运行环境 ( 下载 Hadoop

2024-07-02 22:42| 来源: 网络整理| 查看: 265

一、下载 Hadoop

Hadoop 发布版本在 https://hadoop.apache.org/releases.html 页面可下载 ;

在这里插入图片描述在这里插入图片描述

当前最新版本是 3.3.6 , 点击 Binary download 下的 binary (checksum signature) 链接 ,

在这里插入图片描述在这里插入图片描述

进入到 Hadoop 3.3.6 下载页面 :

在这里插入图片描述在这里插入图片描述

下载地址为 :

https://dlcdn.apache.org/hadoop/common/hadoop-3.3.6/hadoop-3.3.6.tar.gz

官方下载速度很慢 ;

在这里插入图片描述在这里插入图片描述

这里提供一个 Hadoop 版本 , Hadoop 3.3.4 + winutils , CSDN 0 积分下载地址 :

https://download.csdn.net/download/han1202012/88157568

二、解压 Hadoop

解压时 , 不要直接使用 解压工具 解压 , 会报错 ;

在这里插入图片描述在这里插入图片描述

在 " 搜索 " 中 , 搜索 cmd , 然后右键点击 命令提示符 应用 ,

在这里插入图片描述在这里插入图片描述

此时弹出的 命令提示符 有 管理员 权限 ;

在这里插入图片描述在这里插入图片描述

进入 Hadoop 的安装目录 D:\001_Develop\052_Hadoop ,

在这里插入图片描述在这里插入图片描述

执行

代码语言:javascript复制tar zxvf hadoop-3.3.4.tar.gz

命令 , 解压该压缩包 , 这样可以将 hadoop 完美解压出来 , 不会报错 ;

在这里插入图片描述在这里插入图片描述

解压 Hadoop 完成后 , Hadoop 路径为

代码语言:javascript复制D:\001_Develop\052_Hadoop\hadoop-3.3.4在这里插入图片描述在这里插入图片描述三、设置 Hadoop 环境变量

在 环境变量 中 , 设置

HADOOP_HOME = D:\001_Develop\052_Hadoop\hadoop-3.3.4

系统 环境变量 ;

在这里插入图片描述在这里插入图片描述

在 Path 环境变量中 , 增加

%HADOOP_HOME%\bin %HADOOP_HOME%\sbin

环境变量 ;

在这里插入图片描述在这里插入图片描述四、配置 Hadoop 环境脚本

设置 D:\001_Develop\052_Hadoop\hadoop-3.3.4\etc\hadoop\hadoop-env.cmd 脚本中的 JAVA_HOME 为真实的 JDK 路径 ;

代码语言:javascript复制set JAVA_HOME=%JAVA_HOME%

修改为

代码语言:javascript复制set JAVA_HOME=D:\001_Develop\031_Java8u144_Frida\jdk1.8.0_144在这里插入图片描述在这里插入图片描述

注意 : 路径中不要出现空格 , 尤其是 Program Files 目录 , 不要把 JDK 安装在这个目录中 , 有大坑 ;

五、安装 winutils

将 winutils-master\hadoop-3.3.0\bin 中的 hadoop.dll 和 winutils.exe 文件拷贝到 C:\Windows\System32 目录中 ;

在这里插入图片描述在这里插入图片描述六、重启电脑

重启电脑 , 一定要重启 , 否则不生效 ;

七、验证 Hadoop 安装效果

然后在命令行中 , 执行

代码语言:javascript复制hadoop -version

验证 Hadoop 是否安装完成 ;

代码语言:javascript复制C:\Windows\system32>hadoop -version java version "1.8.0_144" Java(TM) SE Runtime Environment (build 1.8.0_144-b01) Java HotSpot(TM) Client VM (build 25.144-b01, mixed mode) C:\Windows\system32>hadoop Usage: hadoop [--config confdir] [--loglevel loglevel] COMMAND where COMMAND is one of: fs run a generic filesystem user client version print the version jar run a jar file note: please use "yarn jar" to launch YARN applications, not this command. checknative [-a|-h] check native hadoop and compression libraries availability conftest validate configuration XML files distch path:owner:group:permisson distributed metadata changer distcp copy file or directories recursively archive -archiveName NAME -p * create a hadoop archive classpath prints the class path needed to get the Hadoop jar and the required libraries credential interact with credential providers jnipath prints the java.library.path kerbname show auth_to_local principal conversion kdiag diagnose kerberos problems key manage keys via the KeyProvider trace view and modify Hadoop tracing settings daemonlog get/set the log level for each daemon or CLASSNAME run the class named CLASSNAME Most commands print help when invoked w/o parameters. C:\Windows\system32>在这里插入图片描述在这里插入图片描述


【本文地址】

公司简介

联系我们

今日新闻

    推荐新闻

    专题文章
      CopyRight 2018-2019 实验室设备网 版权所有