【shell脚本里的命令】

这篇具有很好参考价值的文章主要介绍了【shell脚本里的命令】。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。


一、sort命令

sort命令—以行为单位对文件内容进行排序,也可以根据不同的数据类型来排序比较原则是从首字符向后,依次按ASCII码值进行比较,最后将他们按升序输出。

语法格式:
sort [选项]  参数(文件排序)

cat 文件名 | sort 选项
常用选项 命令解释
-n 按照数字进行排序
-r 反向排序
-u 等同于unig,表示相同的数据仅显示一行
-t 指定字段分隔符,默认使用 [Tab]键分隔
-k 指定排序字段
-o <输出文件> 将排序后的结果转存至指定文件
-f 忽略大小写,会将小写字母都转换为大写字母来进行比较
-b 忽略每行前面的空格

1.1、命令演示

1、不加上-n,只会看首个字符来排序

[root@dz666 ~]# sort shuzi.txt 
1
10
100
155
177
2
3
333
333
35
444
444
75

2、加上-n后就会按大小来排序

[root@dz666 ~]# sort shuzi.txt -n
1
2
3
10
35
75
100
155
177
333
333
444
444

3、加上-r后就是用反向排序

[root@dz666 ~]# sort shuzi.txt -n -r
444
333
333
177
155
100
75
35
10
3
2
1

4、使用-u后将重复的行内容都压缩在一行

[root@dz666 ~]# sort shuzi.txt -n -r -u
888
777
666
555
444
333
177
155
100
75
35
10
3
2
1

5、使用-t来指定分割符,-k指定排序字段,-n指定大小顺序

#使用-t来指定分割符,-k指定字段,-n指定大小顺序
[root@dz666 ~]# cat test1 | sort -t "." -k 4 -n
192.168.102.12
192.168.102.14
192.168.102.15
192.168.102.17
192.168.102.19
192.168.102.20
192.168.102.40
192.168.102.100
192.168.102.111

6、使用-o,效果为从定向输出,直接写入指定目录的文件
【shell脚本里的命令】
使用-b后忽略每行前面的空格

[root@dz666 ~]# cat test1 | sort -t "." -k 4 -n -b
192.168.102.12
   192.168.102.14
192.168.102.15
192.168.102.17
 192.168.102.19
  192.168.102.20
192.168.102.40
192.168.102.100
   192.168.102.111

二、unip命令

unig命令—用于报告或者忽略文件中连续的重复行,常与 sort 命令结合使用

语法格式:
uniq [选项] 参数
cat 文件名 | unig 选顶
常用选项 命令解释
-c 进行计数,并删除文件中重复出现的行
-d 仅显示连续的重复行
-u 仅显示出现一次的行

1、命令演示

先使用sort -n命令来整理序列在使用uniq来去除重合的数

[root@dz666 ~]# sort shuzi.txt -n | uniq 
1
2
3
10
35
75
100
155
177
333
444
555
666
777
888

使用uniq -d 来查看重复的值

[root@dz666 ~]# sort shuzi.txt -n | uniq -d
333
444

使用uniq -u 来查看没有重复的值

[root@dz666 ~]# sort shuzi.txt -n | uniq -u
1
2
3
10
35
75
100
155
177
555
666
777
888

查看这个内容中的行内容出现的次数可以使用 uniq -c 来查看

[root@dz666 ~]# sort shuzi.txt -n | uniq -c
      1 1
      1 2
      1 3
      1 10
      1 35
      1 75
      1 100
      1 155
      1 177
      2 333
      2 444
      1 555
      1 666
      1 777
      1 888

1、列题:

在这些ip地址中查看有哪些重复超过3次的ip地址
【shell脚本里的命令】

#!/bin/bash

cat test1 | sort -n -t "." -k 4 | uniq -c > /root/abc.txt

IFSB=$IFS
IFS=$'\n'  #for循环的空格符只输出一个

for i in $(cat /root/abc.txt)
do
    #获取出第一列的值
   num=$(echo $i | awk '{print $1}')
   
   if [ $num -gt 3 ]
   then
        #获取出这个文件的值
        echo $i | awk '{print $2}'
   fi
done

IFS=$IFSB   #恢复原来的值

2、使用脚本来查看用户有没有被恶意登录,查看登录用户的对应ip地址

在源主机里查看日志

使用cd /var/log/  #进入var目录里的log里

使用tail secure -f   #来查看日志

查看日志里的输入错误密码的用户ip地址
如果被人攻击了会出现大量的ip地址报错

【shell脚本里的命令】

使用shell脚本将输入错误次数过多的ip地址放进黑名单里

#!/bin/bash

count=$(cat /var/log/secure | grep 'Failed password' | awk '{print $11}' | sort -n | uniq -c )

IFSB=$IFS
IFS=$'\n'   #for循环的空格符只输出一个

for i in $count
do
   num=$(echo $i | awk '{print $1}')   #对重复的ip地址进行分片查看**加粗样式**
   if [ $num -gt 3 ]
   then
        IP=$(echo $i | awk '{print $2}')
        echo "sshd:$IP"  >> /etc/hosts.deny   #将出现错误次数过多的ip地址放进黑名单文件里
   fi

done

IFS=$IFSB

在指定的文件里找到了登录错误过多用户的ip地址,将这些ip地址加入黑名单中
【shell脚本里的命令】

三、tr命令

tr命令—常用来对来自标准输入的字符进行替换、压缩和删除

语法格式:
tr [选项][参数]
常用选项 命令解释
-c 保留字符集1的字符,其他的字符 (包括换行符\n) 用字符集2替换
-d 删除所有属于字符集1的字符
-s 将重复出现的字符串压缩为一个字符;用字符集2 替换 字符集1
-t 字符集2 替换 字符集1,不加选项同结果

参数:
字符集1:指定要转换或删除的原字符集。当执行转换操作时,必须使用参数"字符集2”指定转换的目标宁符集。但执行删除操作时,不需要参数"字符集2"

字符集2:指定要转换成的目标宁符集。

[root@dz666 ~]# echo abc | tr 'a-z' 'A-Z'
ABC
[root@dz666 ~]# 
[root@dz666 ~]# echo abc | tr 'a' 'A'
Abc
[root@dz666 ~]# echo abc | tr 'ac' 'AC'
AbC
[root@dz666 ~]# echo abc | tr 'ac' 'AX'
AbX
[root@dz666 ~]# 

1.1、命令演示

1、使用-c来进行替换,不想将换行符进行替换的话加入\n

[root@dz666 ~]# echo -e "abc\nabcd\nab"
abc
abcd
ab
[root@dz666 ~]# echo -e "abc\nabcd\nab" | tr -c 'ab' '1'
[rooecho -e "abc\nabcd\nab" | tr -c 'ab\n' '1'
ab1
ab11
ab

2、删除某个字符使用-d来实现

[root@dz666 ~]# echo 'hellow nb'
hellow nb
[root@dz666 ~]# echo 'hellow nb' | tr -d ' '  
#删除空字符,让两个字符连在一起
hellownb
[root@dz666 ~]# echo 'hellow nb' | tr -d 'ol'   
#删除在这个字符串里有ol的所有字符
hew nb

3、使用-s来压缩重复的字符,也能实现替换

[root@dz666 ~]# echo 'thisssss  iiiiiiis  tessssssst    linnnnnne' | tr -s 'sin'  #将重复的字符写入进行压缩
this  is  test    line


[root@dz666 ~]# echo 'thisssss  iiiiiiis  tessssssst    linnnnnne' | tr -s 'sin' 'SIN'
thIS  IS  teSt    lINe
[root@dz666 ~]# echo -e "ab\n\n\n\n\n\ncd"
ab





cd
[root@dz666 ~]# echo -e "ab\n\n\n\n\n\ncd" | tr -s "\n"
ab
cd  
 #使用tr -s命令来将中间空的换行符压缩成一个换行符

1.2、使用tr命令对数组进行排序

[root@dz666 ~]# arr=(63 2 4 3 15 1)
[root@dz666 ~]# echo ${arr[@]}
63 2 4 3 15 1
[root@dz666 ~]# echo ${arr[@]} | tr ' ' '\n'
63
2
4
3
15
1
[root@dz666 ~]# echo ${arr[@]} | tr ' ' '\n' | sort -n
#对数组进行大小排序
1
2
3
4
15
63
[root@dz666 ~]# echo ${arr[@]} | tr ' ' '\n' | sort -n | tr '\n' ' '
1 2 3 4 15 63 [root@dz666 ~]# 

使用shell脚本来编写数组的排序

#!/bin/bash

arr=(24 36 53 12 6 9 1 3)
echo "排序前数组的值为; ${arr[@]}"

newarr=$(echo ${arr[@]} | tr ' ' '\n' | sort -n | tr '\n' ' ')

echo "排序后的数据的值为: ${newarr[@]}"

【shell脚本里的命令】

四、从Windows里拉文件到Linux系统中要做的潜在条件

使用在线源安装dos2unix

【shell脚本里的命令】
将Windows拉文件到Linux主机里会显示^M,用这个文件时会出现报错
【shell脚本里的命令】

使用

[root@dz666 ~]# dos2unix 12345.txt.md 
#使用这个软件加上对应的文件名进行修改
dos2unix: converting file 12345.txt.md to Unix format ...
#正在修改文件内容
[root@dz666 ~]# cat 12345.txt.md 

使用 “cat-A 文件名” 查看修改完成没
【shell脚本里的命令】

五、cut命令

cut命令—显示行中的指定部分,删除文件中指定字段

语法格式:
cut 参数
cat 文件名 | cut 选项
常用选项 命令解释
-f 通过指定哪一个字段进行提取。cut命令使用"TAB”作为默认的字段分隔符
-d “TAB”是默认的分隔符,使用此选项可以更改为其他的分隔符。
- - complement 此选项用于排除所指定的字段
- -output-delimiter 更改输出内容的分隔符

1、使用-f和-d来指示分割字段

【shell脚本里的命令】

[root@dz666 ~]# cat test1 | cut -d '.' -f 4
14
17
40
12
111
40
15
20
111
19
40
111
100
111
40

实现多字段分割显示

【shell脚本里的命令】

2、使用–complement命令来进行反向输出,除了指定的数不显示,其他都输出

【shell脚本里的命令】
3、使用–output-delimiter命令来指定输出内容的分隔符
【shell脚本里的命令】

六、split命令

定义:
在Linux系统中将一个大的文件拆分成若干个小文件

split 选项 参数 原始文件 拆分后文件名前缀
常用选项 命令解释
-l 以行数拆分
-b 以大小拆分

1.1、文件拆分

使用 -l 将文件进行,行数拆分为50层

拆分后使用
cat  -n 拆分的文件 
查看分割的行数

【shell脚本里的命令】
使用-b进行大小拆分

[root@dz666 ~]# split -b 1k ./abc.txt abc
[root@dz666 ~]# ls                           
 abcaa   
 initial-setup-ks.cfg  
 abc.txt          

[root@dz666 ~]# cat abcaa
      2 
      1 192.168.102.12
      1 192.168.102.14
      1 192.168.102.15
      1 192.168.102.17
      1 192.168.102.19
      1 192.168.102.20
      4 192.168.102.40
      1 192.168.102.100
      4 192.168.102.111
[root@dz666 ~]# du -sh abcaa 
4.0K	abcaa

七、paste命令

1、以列的方式进行文件的合并
【shell脚本里的命令】

2、指定间隔字符

[root@dz666 ~]# paste -d ',' a b
a,1
b,2
c,3
d,4
e,5
f,6
g,7

3、使用-s来将文件合并成行而不是按行粘贴

[root@dz666 ~]# paste -d ' ' -s a b
a b c d e f g 
1 2 3 4 5 6 7 

4、在命令行上面加上r 指定目录里的文件进行合并
【shell脚本里的命令】【shell脚本里的命令】

示例:
输出a的第二列和b的第二列

【shell脚本里的命令】
操作步骤

[root@dz666 ~]# paste -d ' ' a b #连接文件默认分隔符为制表符 改为空格
a A 1:10
b B 2:20
c C 3:30
d D 4:40
e E 5:50
f F 6:60
g G 7:70
 
[root@dz666 ~]# paste -d ' ' a b | tr ':' ' ' 
#paste合并文件,分隔符为空格
#tr将冒号改为空格(b文件是冒号连接的)
a A 1 10
b B 2 20
c C 3 30
d D 4 40
e E 5 50
f F 6 60
g G 7 70

[root@dz666 ~]# paste -d ' ' a b | tr ':' ' ' | cut -d ' ' -f 2,4
#paste合并文件,分隔符为空格
#tr将冒号改为空格(b文件是冒号连接的)
#cut根据空格为分隔符 取2 4段
A 10
B 20
C 30
D 40
E 50
F 60
G 70

八、eval命令

命令字前加上eval,shell在执行命令前扫描它两次。
eval命令首先会扫描命令行进行所有的替换,然后执行命令。
该命令适用于那些一次扫描无法实现功能的变量。该命令对变量进行两次扫描

echo "hello world" > file1
myfile="cat file1"
echo $myfile 
#现在还只是显示变量的值
eval $myfile  
#经过eval的扫描后,变量的值被替换为cat file1的执行结果
 
[root@dz666 ~]# echo "hello world" > file
[root@dz666 ~]# myfile="cat file"
[root@dz666 ~]# echo $myfile 
cat file
[root@dz666 ~]# eval $myfile
hello world
# eval $myfile -> cat file -> hello world

eval命令的编写文章来源地址https://www.toymoban.com/news/detail-438519.html

vim 2.sh
    a=100
    b=a
    echo \$$b
    eval echo \$$b
 
[root@dz666 ~]# sh test2.sh
   $a  #执行\$$b的命令
   100
执行顺序为 echo \$$b  →  echo \$a100

到了这里,关于【shell脚本里的命令】的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • Shell脚本常用命令及如何通过shell脚本实现服务器上文件的上传和下载

    Shell脚本常用命令 简介 1、什么是shell: Shell 是一个用 C 语言编写的应用程序,这个应用程序提供了一个界面,用户通过这个界面访问操作系统内核的服务。Shell 脚本(shell script),是一种为 shell 编写的脚本程序,扩展名为.sh。 2、如何编写shell脚本: 文本编辑器(可以使用

    2024年02月03日
    浏览(69)
  • linux 之 shell脚本实现SFTP下载、上传文件、执行sftp命令

    需求方通过sftp不定时的上传一批用户(SBXDS_ACC_M_任务ID_yyyymmddHHMMSS.csv),需要我们从这些用户中找出满足条件的用户。然后把这些结果用户通过文件的形式上传到ftp。 ip1能连接hive库环境,不能连接sftp。 ip2不能连接hive库环境,能连接sftp。 ip1和ip2是共享盘,能同时访问公共目录

    2024年02月19日
    浏览(67)
  • 大数据:HDFS的Shell操作,进程启动管理,文件系统操作命令,创建文件文件夹,下载上传,复制移动,删除,展示,追加内容

    2022找工作是学历、能力和运气的超强结合体,遇到寒冬,大厂不招人,可能很多算法学生都得去找开发,测开 测开的话,你就得学数据库,sql,oracle,尤其sql要学,当然,像很多金融企业、安全机构啥的,他们必须要用oracle数据库 这oracle比sql安全,强大多了,所以你需要学

    2024年02月07日
    浏览(64)
  • SHELL 基础 显示字符颜色, 修改历史命令,Linux里的命令 执行顺序

    目录 echo 打印命令  :        显示字符串  :  显示转义字符 :   显示颜色  :   显示命令执行结果  :  history 历史命令 :  修改默认记录历史命令条数 :             历史命令的调用  :  命令别名    查看命令别名  :  命令的执行顺序  :   选项   :   

    2024年02月12日
    浏览(43)
  • linux中用shell脚本定时备份重要日志等文件【命令结果输出也在内。按月份自动创建时间自动规划到月份中】、linux中用shell脚本备份文件并自动scp汇总到一个服务器上

    现在甲方有一个需求:要求每月备份系统日志 问题: 1、有37台服务器需要备份且汇总到一

    2024年02月19日
    浏览(58)
  • 【Linux命令-shell】虚拟机中创建shell脚本、查看当前路径、执行脚本

    目录 一、创建shell脚本 二、查看当前的路径 三、执行脚本 一、创建shell脚本 shell脚本的特点 提前将可执行的命令语句写入一个文件中 顺序执行 解释器逐行解释代码 常见的脚本有:shell、python、PHP...... 注:用什么解释器就是什么脚本 编写shell脚本: 步骤: 1、新建文件 2、

    2024年02月05日
    浏览(63)
  • shell脚本----awk命令

    逐行读取文本,默认以空格或tab键为分隔符进行分隔,将分隔所得的各个字段保存到内建变量中,并按模式或者条件执行编辑命令。 sed命令常用于一整行的处理,而awk比较倾向于将一行分成多个\\\"字段\\\"然后再进行处理。awk信息的读入也是逐行读取的,执行结果可以通过print的

    2024年02月04日
    浏览(35)
  • Linux shell脚本命令记录

    1、cut cut 命令可以从一个文本文件或者文本流中提取文本列。 egg:  参考:https://www.cnblogs.com/liuyansheng/p/6180332.html 2、identify identify命令主要用于获取一个或多个图像文件的格式和特性。 3、shell中#*,##*,#*,##*,%*,%%*的含义及用法    参考:shell中#*,##*,#*,##*,%*,%%*的

    2024年02月08日
    浏览(47)
  • Java获取上传的文件大小并且转换对文件大小进行单位转化

    今天产品提出来一个需求,上传文件的时候要记录文件的大小,并且保存到数据库里面。 正好借着这个机会,分享下对文件大小进行单位转化的一个方法。 一般和前后端进行文件交互,都是通过MultipartFile实现的,它有一个方法:getSize() 无需参数,返回的是该文件Long类型的

    2024年02月16日
    浏览(36)
  • nodejs脚本中执行shell命令

    Node.js v8.x 中文文档: child_process - 子进程 Node.js中使用内置的 child_process 模块来执行shell命令。该模块提供了 exec 、 execFile 、 spawn 等方法来启动子进程并执行命令 exec 方法是将整个命令输出缓存到内存中,当执行 完成后一次性 返回,所以适合执行 较小 的命令 exec 方法的 回调

    2024年01月21日
    浏览(49)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包