在 macOS 上安装和搭建 Hadoop 集群可以分为以下步骤：
1、安装 Java
Hadoop 需要依赖 Java 运行环境，因此需要先安装 Java。macOS 自带了 Java，可以通过终端命令 java -version 来查看 Java 版本。
2、安装 Hadoop
可以从 Hadoop 官网下载 Hadoop 安装包，或者通过 Homebrew 进行安装。使用 Homebrew 安装 Hadoop，可以通过以下命令：
brew install hadoop
3、配置 Hadoop
在 Hadoop 的安装目录下，有一个 etc/hadoop 目录，里面包含了 Hadoop 的配置文件。其中，需要修改的配置文件包括 hadoop-env.sh、core-site.xml、hdfs-site.xml 和 mapred-site.xml。
具体来说，需要设置以下参数：
-
hadoop-env.sh：设置 Java 环境变量，将JAVA_HOME设置为 Java 的安装路径。 -
core-site.xml：设置 Hadoop 的通用参数，包括文件系统默认的 URI 和文件系统类型。在<configuration>标签中添加以下配置：
<property>
<name>fs.defaultFS</name>
<value>hdfs://localhost:9000</value>
</property>
hdfs-site.xml：设置 HDFS 的参数，包括数据块的大小和副本数量。在 <configuration> 标签中添加以下配置：
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
<property>
<name>dfs.blocksize</name>
<value>128M</value>
</property>
mapred-site.xml：设置 MapReduce 的参数，包括 MapReduce 框架的工作机制。在 <configuration> 标签中添加以下配置：
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>
4、启动 Hadoop
在终端中执行以下命令启动 Hadoop：
start-all.sh
执行命令后，可以通过以下命令来查看 Hadoop 是否启动成功：
jps
如果启动成功，会看到类似以下的输出：
18812 Jps
18243 SecondaryNameNode
18109 NameNode
18341 ResourceManager
18500 NodeManager
5、验证 Hadoop
在终端中执行以下命令，创建一个测试文件并上传到 HDFS：
echo "Hello, Hadoop" > test.txt
hdfs dfs -mkdir /input
hdfs dfs -put test.txt /input
执行完毕后，可以通过以下命令查看上传的文件：文章来源：https://www.toymoban.com/news/detail-547718.html
hdfs dfs -ls /input
如果成功上传文件，会看到类似以下的输出：文章来源地址https://www.toymoban.com/news/detail-547718.html
Found 1 items
-r
到了这里，关于在mac上如何安装和搭建Hadoop集群的文章就介绍完了。如果您还想了解更多内容，请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章，希望大家以后多多支持TOY模板网！
