【项目实战】在win10上安装配置Hadoop的环境变量

这篇具有很好参考价值的文章主要介绍了【项目实战】在win10上安装配置Hadoop的环境变量。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

一、说明

注意:该教程适用于:远程连接Linux上的Hadoop集群,因此本步骤是不需要在本地再下载hadoop的

在win10操作系统上,运行Hadoop以及其相关依赖包(比如Hbase依赖包)时,我遇到的情况是,我需要使用SpringBoot+Phoenix的组合去连接Hbase这往往是需要在本机(Windows 10)上安装配置 Hadoop 环境变量,最好下载一个和服务器hbase版本一样的hadoop放在本地,这样才能够得到返回值的。

以下是具体的安装配置 Hadoop 环境变量的步骤。

二、在 Windows 10 上安装配置 Hadoop 环境变量的步骤

在Windows 10 上安装配置 Hadoop 环境变量需要以下步骤:

2.1 安装 Java 运行环境

Hadoop 需要 Java 8 或以上版本。下载并安装 Java 运行环境。
步骤比较简单,略过。
windows 安装hadoop,009 -大数据、 AI人工智能、AR&VR,hadoop,hbase,大数据

2.2 下载 Hadoop

从 Apache Hadoop 官网下载最新版本的 Hadoop。
https://hadoop.apache.org/releases.html(有点慢的官网)
https://archive.apache.org/dist/hadoop/common/hadoop-3.1.1/(用这个地址快点)
windows 安装hadoop,009 -大数据、 AI人工智能、AR&VR,hadoop,hbase,大数据
注意这个版本,要跟你服务端的Hadoop版本一样哦
查看版本的方式:Ambari->Services->HBase->HBase Master Ul拉到最底部查看
windows 安装hadoop,009 -大数据、 AI人工智能、AR&VR,hadoop,hbase,大数据

2.3 解压 Hadoop

将下载的 Hadoop 压缩包解压到任意目录,例如 E:\Hadoop\hadoop
windows 安装hadoop,009 -大数据、 AI人工智能、AR&VR,hadoop,hbase,大数据

2.4 配置 Hadoop 环境变量

2.4.1 添加到 PATH 环境变量

将 Hadoop 的 bin 目录添加到 PATH 环境变量中。
windows 安装hadoop,009 -大数据、 AI人工智能、AR&VR,hadoop,hbase,大数据

2.4.2 创建新的系统环境变量 HADOOP_HOME

创建新的系统环境变量 HADOOP_HOME,并将其值设置为 Hadoop 的安装路径,例如 E:\Hadoop\hadoop。
windows 安装hadoop,009 -大数据、 AI人工智能、AR&VR,hadoop,hbase,大数据

2.5 配置 Hadoop 的Java环境路径

访问E:\Hadoop\hadoop\etc\hadoop找到hadoop-env.cmd
windows 安装hadoop,009 -大数据、 AI人工智能、AR&VR,hadoop,hbase,大数据
将JAVA_HOME目录改为:
set JAVA_HOME=C:\PROGRA~1\Java\jdk1.8.0_121
windows 安装hadoop,009 -大数据、 AI人工智能、AR&VR,hadoop,hbase,大数据

2.6 下载winutils文件

winutils下载链接如下:

Gitee地址:https://gitee.com/nkuhyx/winutils.git
Github地址:https://github.com/cdarlint/winutils.git

可以在该压缩包中选择需要的版本,对应版本如下:
如果安装的hadoop版本是:3.1.2或者3.2.0
就用winutils-master里面的hadoop-3.0.0配置环境变量吧!
windows 安装hadoop,009 -大数据、 AI人工智能、AR&VR,hadoop,hbase,大数据

2.7 引入 hadoop.dll 和 winutils.exe 文件

将 winutils 中的 hadoop.dll 文件 和 winutils.exe 文件
windows 安装hadoop,009 -大数据、 AI人工智能、AR&VR,hadoop,hbase,大数据
拷贝到 C:\Windows\System32 目录下
windows 安装hadoop,009 -大数据、 AI人工智能、AR&VR,hadoop,hbase,大数据

2.8 重启IDE或重启电脑

如果还是报错,请重启电脑试试!
重启电脑即可解决问题,注意注意:一定要重启电脑才能生效

2.9 验证Hadoop环境变量的安装情况

在命令行中输入hadoop -version 命令查看 Hadoop,Ok。完美
windows 安装hadoop,009 -大数据、 AI人工智能、AR&VR,hadoop,hbase,大数据文章来源地址https://www.toymoban.com/news/detail-655439.html

到了这里,关于【项目实战】在win10上安装配置Hadoop的环境变量的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • win10环境使用nvm安装多版本nodejs并配置环境变量

    最近使用node工程,需要多版本,并且进行切换,来回安装卸载不同版本的node比较麻烦,后面自己就简单捯饬了一下nvm来管理node,顺便记录一下自己的使用过程,以便于后续查找。 1.nvm安装,首先在官网下载 https://github.com/coreybutler/nvm-windows/releases 然后安装nvm-setup.exe: 注意:

    2024年01月20日
    浏览(62)
  • Android NDK Win10安装及环境变量配置(图文详细教程)

            首先需要安装 Android Studio !         (Android Studio 的安装比较简单,这里不赘述,如果没有安装请先自行安装)          在顶部菜单中,选择 Tools - SDK Manager :          如下图所示,选择Android SDK 子菜单,选择SDK Tools 分页,然后把NDK(Side by side)选上,这里一

    2024年02月07日
    浏览(84)
  • Java-JDK8下载|安装|环境变量配置|详细图文教程【Windows10】

      对于Java开发者而言,选择一个稳定且生态好的开发环境,是最好不过的了。在Java-JDK中,JDK8就是相对完美的一个开发环境,比起以往的老版本,比如JDK5、JDK7等,都没有比JDK8的生态好。不但如此,JDK8也几乎支持了所有的开发功能需求和设计,虽然现在已经有了JDK16、JD

    2024年02月09日
    浏览(72)
  • Windows 10 配置Git 环境变量(还有:安装git后,鼠标右键没有“git bush here”)

    1. 打开 环境变量窗口 右键  (此电脑) -(属性) - (高级系统设置) -(环境变量)... 2. 修改Path 变量: 新建三条路径: 1. 打开注册表  Win+r - 输入regedit 后回车进入注册表 右键  (此电脑) -(属性) - (高级系统设置) -(环境变量)... 2,定位注册表目录:( 在注册表搜索

    2024年02月05日
    浏览(49)
  • win10 maven 安装环境变量设置不成功

    maven 按照正常步骤设置环境变量 输入命令总是不能正常现实mvn的版本 解决方案: 1.删除掉设置的用户环境变量 2.将maven的完整目录写入系统变量path中 3.将该路径放到所有变量的最前面 4.点击确定,重新打开cmd 输入 mvn -v 正常了  

    2024年02月11日
    浏览(49)
  • 【Hadoop实战】Windows环境下编译Hadoop2(2.10.2-R0)

    前提 根据Hadoop源码包解压之后编译帮助文件 BUILDING.txt 中关于windows的要求来准备环境 本机环境 JDK1.8 Windows 10 64位专业版 maven 3.9.2 git 2.41.0 ProtocolBuffer 2.5.0 这个要求要满足不然有报错(Github地址) cmake 2.36.4 Visual Studio 2022 Professional cygwin 安装包 IDEA 2022.2.5 编译方式 使用VS2022的

    2024年02月11日
    浏览(55)
  • Hadoop简介、安装与环境变量配置

    Hadoop是由Apache基金会开源的具有可靠、可扩展、分布式计算的大数据框架。Hadoop可以简单的从单个服务器扩展到数千台机器,提供分布式的计算和存储服务。Hadoop通过检测和处理应用程序层的故障来为服务器集群提供高可用性服务。 Hadoop作为大数据框架,更多的是作为集群面

    2024年02月09日
    浏览(42)
  • 【开发环境】安装 Hadoop 运行环境 ( 下载 Hadoop | 解压 Hadoop | 设置 Hadoop 环境变量 | 配置 Hadoop 环境脚本 | 安装 winutils )

    Hadoop 发布版本在 https://hadoop.apache.org/releases.html 页面可下载 ; 当前最新版本是 3.3.6 , 点击 Binary download 下的 binary (checksum signature) 链接 , 进入到 Hadoop 3.3.6 下载页面 : 下载地址为 : https://dlcdn.apache.org/hadoop/common/hadoop-3.3.6/hadoop-3.3.6.tar.gz 官方下载速度很慢 ; 这里提供一个 Hadoop 版

    2024年02月13日
    浏览(65)
  • hadoop win11安装hadoop环境 winutils.exe获取,windows安装大数据运行环境 winutils文件获取,winutils文件 hadoop(十四)

    注:有些win环境的大数据dll文件,winutils.exe需要积分下载,我没有积分,提供一份github链接 每个版本基本都有,挺全。 1. github地址: GitHub - cdarlint/winutils: winutils.exe hadoop.dll and hdfs.dll binaries for hadoop windows 2. 从上述链接,下载工程,复制出来自己的版本,我hadoop安装的3.3.4,

    2024年02月04日
    浏览(55)
  • 【项目实战】Windows系统中环境变量(PATH、CLASSPATH)入门介绍

    英文(environment variables) 一般是指在操作系统中用来指定操作系统运行环境的一些参数 如:临时文件夹位置和系统文件夹位置等。 在操作系统中一个具有特定名字的对象 包含了一个或者多个应用程序所将使用到的信息。 用户通过设置环境变量,来更好的运行进程。 Window

    2024年02月06日
    浏览(43)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包