1. HDFS命令使用
[root@master bin]# su hd
[hd@master bin]$
#查看/目录
[hd@master bin]$ hdfs dfs -ls /
5文章来源：https://www.toymoban.com/news/detail-441241.html
#在/目录创建一个为test名字的文件夹
[hd@master bin]$ hdfs dfs -mkdir /test
#查看/目录
[hd@master bin]$ hdfs dfs -ls
Found 1 items
drwxr-xr-x - hd supergroup 0 2020-02-27 01:02 /test
#创建一个本地的txt文件
[hd@master ~]$ echo "abc123def456" > hello.txt
#把创建的文件上传到hdfs
[hd@master ~]$ hdfs dfs -put hello.txt /
#在hdfs查看上传的文件
[hd@slave02 ~]$ hdfs dfs -cat /hello.txt
abc123def456
#下载hdfs文件到本地的linux当前目录
[hd@slave02 ~]$ ll
total 0
drwxrwxr-x. 4 hd hd 30 Feb 26 23:08 apps
#下载hdfs文件到当前目录
[hd@slave02 ~]$ hdfs dfs -get /hello.txt .
[hd@slave02 ~]$ ll
total 4
drwxrwxr-x. 4 hd hd 30 Feb 26 23:08 apps
-rw-r--r--. 1 hd hd 13 Feb 27 01:13 hello.txt
[hd@slave02 ~]$
[hd@slave02 ~]$ cat hello.txt
abc123def456
文章来源地址https://www.toymoban.com/news/detail-441241.html
MapReduct执行单词统计的程序
#创建文件
[hd@master ~]$ vi words.txt
Hello World Bye World
Hello Hadoop Bye Hadoop
Bye Hadoop Hello Hadoop
#上传文件
[hd@master ~]$ hdfs dfs -mkdir /word
[hd@master ~]$ hdfs dfs -put words.txt /word
#执行单词统计的样例
[hd@master hadoop]$ hadoop jar /home/hd/apps/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-3.0.0.jar wordcount /word/words.txt /out 到了这里，关于【大数据学习篇3】HDFS命令操作与MR单词统计的文章就介绍完了。如果您还想了解更多内容，请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章，希望大家以后多多支持TOY模板网！
![[机器学习、Spark]Spark MLlib实现数据基本统计](https://imgs.yssmx.com/Uploads/2024/02/781801-1.png)
