当前位置：网站首页>Shell script quick start to actual combat -02

Shell script quick start to actual combat -02

2022-07-31 19:03:00 【51CTO】

7 流程控制 (重点)

7.1 case 语句

7.2 case语句

7.3 for 循环

7.4 while循环

8 read 读取控制台输入

9 函数

9.1 系统函数

9.2 自定义函数

10 Shell 工具(重点)

10.1 cut

10.2 sed

10.3 awk

11 企业真实面试题

11.1 京东

11.2 搜狐&和讯网

11.3 新浪

11.4 金和网络

7 流程控制 (重点)

7.1 case 语句

基本语法

注意：

[ 条件判断式 ],中括号和条件判断式之间必须有空格
if后要有空格

实例

#!/bin/bash

if [ $1 -eq 1 ]
then
        echo "banzhang is handsome"
elif [ $1 -eq 2 ]
then
        echo "banzhang is beautiful"
fi

     1.
2.
3.
4.
5.
6.
7.
8.
9.

7.2 case语句

基本语法:可以类比java的switch case break deflaut那一套

case $变量名 in
	"值1")
	程序
	;;
	"值2"
	程序
	;;
	*)
	remaining program
	;;
rsac

     
      1.
      2.
      3.
      4.
      5.
      6.
      7.
      8.
      9.
      10.
      11.

案例

输入一个数字,如果是1,则输出banzhang,如果是2,则输出fubanzhang,如果是其他,output classmates

#!/bin/bash

case $1 in
1)
        echo "banzhang"
;;
2)
        echo "fubanzhang"
;;
*)
        echo "tongxue"
;;
esac

     1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.

[[email protected] datas]$ bash case.sh 1
banzhang
[[email protected] datas]$ bash case.sh 2
fubanzhang
[[email protected] datas]$ bash case.sh 3
tongxue
[[email protected] datas]$ bash case.sh 4
tongxue

     
      1.
      2.
      3.
      4.
      5.
      6.
      7.
      8.

7.3 for 循环

基本语法：可以类比java的for循环,Change the parentheses to do,done

案例

从1加到100

 #!/bin/bash

s=0
for(( i=1;i<=100;i++ ))		//为什么不用-eq不用=,因为=是赋值,-eq一般用在判断
do
        s=$[$s+$i]		//The front here$[]means operator,$s和$i是变量
done

echo $s


     1.
2.
3.
4.
5.
6.
7.
8.
9.
10.

第二种for语法：Works with discrete values

案例

打印输入的所有参数

加入[email protected]

#!/bin/bash

for i in $*
do
        echo "banzhang xihuan $i"       
done


for j in [email protected]
do
        echo "banzhang xihuan $j"
done

     1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.

[[email protected] datas]$ bash for2.sh lili meimei yingying
banzhang xihuan lili
banzhang xihuan meimei
banzhang xihuan yingying
banzhang xihuan lili
banzhang xihuan meimei
banzhang xihuan yingying

     
      1.
      2.
      3.
      4.
      5.
      6.
      7.

加个“”就不同了

#!/bin/bash

for i in "$*"
do
        echo "banzhang xihuan $i"       
done


for j in "[email protected]"
do
        echo "banzhang xihuan $j"
done

     1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.

[[email protected] datas]$ bash for2.sh lili meimei yingying
banzhang xihuan lili meimei yingying
banzhang xihuan lili
banzhang xihuan meimei
banzhang xihuan yingying

     
      1.
      2.
      3.
      4.
      5.

7.4 while循环

基本语法

实例

1+100

#!/bin/bash

s=0
i=1
while [ $i -le 100 ]
do
        s=$[$s+$i]
        i=$[$i+1]
done

echo $s

     1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.

8 read 读取控制台输入

基本语法

read(选项)(参数)
选项：
-p：指定读取值时的提示符
-t：指定读取时等待的时间(秒)
参数：
变量：Specify the variable name when reading

     
      1.
      2.
      3.
      4.
      5.
      6.

实例

提示7 秒内,Read the name entered in the console

[[email protected] datas]$ bash read.sh 
input your name fenfen
fenfen
[[email protected] datas]$ bash read.sh
input your name

     
      1.
      2.
      3.
      4.
      5.

9 函数

9.1 系统函数

basename基本语法

选项：suffix为后缀,如果suffix被指定了,basename会将pathname去掉suffix

功能

Remove all suffixes including the last one(‘/’)字符,然后将字符串显示出来
干嘛用的啊：After getting the path or file name,can be assigned to variables,Do more follow up,实现自动化

实例

[[email protected] datas]$ basename /home/fenfen/datas/batch.sh 
batch.sh
[[email protected] datas]$ basename /home/fenfen/datas/parameter.sh 
parameter.sh
[[email protected] datas]$ basename /home/fenfen/datas/parameter.sh .sh
parameter

     
      1.
      2.
      3.
      4.
      5.
      6.

dirname 基本语法

功能：从给定的包含绝对路径的文件名中出去文件名(非目录的部分),然后返回剩下的路径(目录的部分)
使用：basename和dirname一起使用

实例

9.2 自定义函数

基本语法

注意点：

必须在调用函数地方之前,先声明函数.shellThe script will only run line by line.
Function feedback value,只能通过$?系统变量获得,可以显示加return,如果不加,Just run the result with the last command,作为返回值.

实例

计算两个输入参数的和

#!/bin/bash

function sum()
{
        s=0
        s=$[$1+$2]
        echo $s
}

read -p "input your parameter1:" P1        //The first parameter comes in
read -p "input your parameter2:" P2

sum $P1 $2					 //然后调用上面定义的sum函数,具体定义的$1与$2is to take the parameter value

     1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.

10 Shell 工具(重点)

10.1 cut

功能：剪,Specifically, it is responsible for cutting data in the file.Trimmed for ease of output
基本用法：

cut [选项参数] filename
选项说明：
	-f：列好,提取第几列
	-d：分隔符,按照指定分隔符分割列,默认的分隔符是制表符

     
      1.
      2.
      3.
      4.

实例

Take the first column out

[[email protected] datas]$ vim cut.txt

guang nan
zhou jing
wo  wo
lai  lai
le  le

"cut.txt" 5L, 45C

[[email protected] datas]$ cut -d " " -f 1 cut.txt
guang
zhou
wo
lai
le

     
      1.
      2.
      3.
      4.
      5.
      6.
      7.
      8.
      9.
      10.
      11.
      12.
      13.
      14.
      15.
      16.

Take the first2,3列

Just one wide(guang)字呢

[[email protected] datas]$ cat cut.txt | grep guang
guang nan 
[[email protected] datas]$ cat cut.txt | grep guang | cut -d " " -f 1 
guang

     
      1.
      2.
      3.
      4.

选取系统PATH变量值,第五个":"开始后的所有路径

[[email protected] datas]$ echo $PATH
/usr/local/bin:/usr/bin:/usr/local/sbin:/usr/sbin:/usr/local/jdk1.8.0_291/bin:/home/fenfen/.local/bin:/home/fenfen/bin


[[email protected] datas]$ echo $PATH | cut -d : -f 3-   //3-表示取3all after the column
/usr/local/sbin:/usr/sbin:/usr/local/jdk1.8.0_291/bin:/home/fenfen/.local/bin:/home/fenfen/bin

[[email protected] datas]$ echo $PATH | cut -d : -f 3
/usr/local/sbin 

     
      1.
      2.
      3.
      4.
      5.
      6.
      7.
      8.
      9.

切个ip地址玩玩

[[email protected] datas]$ ifconfig
ens33: flags=4163<UP,BROADCAST,RUNNING,MULTICAST>  mtu 1500
        inet 192.168.60.102  netmask 255.255.255.0  broadcast 192.168.60.255
        inet6 fe80::20c:29ff:fea1:55c5  prefixlen 64  scopeid 0x20<link>
        ether 00:0c:29:a1:55:c5  txqueuelen 1000  (Ethernet)
        RX packets 2546  bytes 201586 (196.8 KiB)
        RX errors 0  dropped 0  overruns 0  frame 0
        TX packets 1536  bytes 208753 (203.8 KiB)
        TX errors 0  dropped 0 overruns 0  carrier 0  collisions 0

lo: flags=73<UP,LOOPBACK,RUNNING>  mtu 65536
        inet 127.0.0.1  netmask 255.0.0.0
        inet6 ::1  prefixlen 128  scopeid 0x10<host>
        loop  txqueuelen 1000  (Local Loopback)
        RX packets 0  bytes 0 (0.0 B)
        RX errors 0  dropped 0  overruns 0  frame 0
        TX packets 0  bytes 0 (0.0 B)
        TX errors 0  dropped 0 overruns 0  carrier 0  collisions 0

     
      1.
      2.
      3.
      4.
      5.
      6.
      7.
      8.
      9.
      10.
      11.
      12.
      13.
      14.
      15.
      16.
      17.
      18.

[[email protected] datas]$ ifconfig ens33
ens33: flags=4163<UP,BROADCAST,RUNNING,MULTICAST>  mtu 1500
        inet 192.168.60.102  netmask 255.255.255.0  broadcast 192.168.60.255
        inet6 fe80::20c:29ff:fea1:55c5  prefixlen 64  scopeid 0x20<link>
        ether 00:0c:29:a1:55:c5  txqueuelen 1000  (Ethernet)
        RX packets 2585  bytes 204474 (199.6 KiB)
        RX errors 0  dropped 0  overruns 0  frame 0
        TX packets 1562  bytes 211807 (206.8 KiB)
        TX errors 0  dropped 0 overruns 0  carrier 0  collisions 0


[[email protected] datas]$ ifconfig ens33 | grep "inet "
        inet 192.168.60.102  netmask 255.255.255.0  broadcast 192.168.60.255


[[email protected] datas]$ ifconfig ens33 | grep "inet "|cut -d " " -f 10
192.168.60.102

     
      1.
      2.
      3.
      4.
      5.
      6.
      7.
      8.
      9.
      10.
      11.
      12.
      13.
      14.
      15.
      16.
      17.

eth0的ip的cut过程

Shell 脚本 Quick start to actual combat -02_shell

10.2 sed

功能：sed是一种流编辑器,它一次处理一行内容.The currently processed line is stored in a temporary buffer,称为“模式空间”,Push the screen after processing.
基本语法

选项参数说明

-e:Do it directly in command line modesed的动作编辑

命令功能描述

a：新增,followed by the string,在下一行出现

d：删除

s：查找并替换

案例

将”believe“这个单词插入到sed.txt第二行下,并打印,But the original file has not changed

[[email protected] datas]$ sed "2a believe" sed.txt
guang nan
zhou jing
believe
wo  wo
lai  lai

le  le

[[email protected] datas]$ cat sed.txt 
guang nan
zhou jing
wo  wo
lai  lai

le  le

     
      1.
      2.
      3.
      4.
      5.
      6.
      7.
      8.
      9.
      10.
      11.
      12.
      13.
      14.
      15.
      16.

删除sed.txt中所有包含wo的行

[[email protected] datas]$ sed "/wo/d" sed.txt    这个/wo/d记下来吧,This grammar feels dreamy
guang nan
zhou jing
lai  lai

le  le

     
      1.
      2.
      3.
      4.
      5.
      6.

将sed.txt中的wo替换成ni

[[email protected] datas]$ sed "s/wo/ni/g" sed.txt         //g表示全局替换
guang nan
zhou jing
ni  ni
lai  lai

le  le

     
      1.
      2.
      3.
      4.
      5.
      6.
      7.

将sed.txtThe second line in the file is removed and replaced with ini

10.3 awk

Regular expression content added： (73条消息) 正则表达式全解析+常用示例_Moyao's blog-CSDN博客_Regular expression line endings
正则表达式测试网站Regex101的使用方法：正则表达式测试网站Regex101的使用方法 - 知乎 (zhihu.com)
check again,No more learning：【韩顺平讲Java】Java 正则表达式专题 -正则正则表达式元字符限定符 Pattern Matcher 分组捕获反向引用等_哔哩哔哩_bilibili

功能：一个强大的文本分析工具,把文件逐行的读入,以空格为默认分隔符将每行切片, 切开的部分在进行分析处理
基本语法

pattern:表示AWK在数据中查找的内容,匹配模式,Equivalent to regular matching

action：The command to execute when a match is found

选项参数说明

-F：指定输入文件分隔符 F大写

-v：赋值一个用户定义变量 v小写

内置变量

FILENAME:文件名

NR：已读的记录数

NF：浏览记录的域的个数

案例

搜索passwd文件以root关键字开头的所有行,并输出改行的第7列
- /^Regular start

[[email protected] etc]$ sudo cp /etc/passwd ./
[[email protected] datas]$ sudo chown fenfen passwd
[[email protected] datas]$ sudo chgrp happy passwd
[[email protected] datas]$ ll
-rw-r--r-- 1 fenfen happy  1037 Jul 30 21:49 passwd
-rw-r--r-- 1 fenfen happy   62 Jul 26 18:06 read.sh
-rw-r--r-- 1 fenfen happy   44 Jul 30 21:04 sed.txt

     
      1.
      2.
      3.
      4.
      5.
      6.
      7.

[[email protected] datas]$ cat passwd
root:x:0:0:root:/root:/bin/bash

[[email protected] datas]$ awk -F : '/^root/{print $7}' passwd
/bin/bash

     
      1.
      2.
      3.
      4.
      5.

搜索passwd文件以root关键字开头的所有行,并输出改行的第1列和第7列,中间以”,“号分割

显示passwd文件的第1列和第7列,以逗号分隔, 且在所有行前面添加列名user,shell在最后一行添加”fenfen,/bin/zuibang“

[[email protected] datas]$ awk -F : 'BEGIN{print "user,shell"} {print $1","$7} END{print "fenfen,bin/zuibang"}' passwd 
user,shell
root,/bin/bash
bin,/sbin/nologin
daemon,/sbin/nologin
adm,/sbin/nologin
lp,/sbin/nologin
sync,/bin/sync
shutdown,/sbin/shutdown
halt,/sbin/halt
mail,/sbin/nologin
operator,/sbin/nologin
games,/sbin/nologin
ftp,/sbin/nologin
nobody,/sbin/nologin
systemd-network,/sbin/nologin
dbus,/sbin/nologin
polkitd,/sbin/nologin
sshd,/sbin/nologin
postfix,/sbin/nologin
hadoop,/bin/bash
mysql,/bin/false
fenfen,/bin/bash
tss,/sbin/nologin
fenfen,bin/zuibang

     
      1.
      2.
      3.
      4.
      5.
      6.
      7.
      8.
      9.
      10.
      11.
      12.
      13.
      14.
      15.
      16.
      17.
      18.
      19.
      20.
      21.
      22.
      23.
      24.
      25.

将passwd文件中的用户id增加1并输出

[[email protected] datas]$ awk -F : -v i=1 '{print $3+i}' passwd        //-v 定义了一个变量
1
2
3
4
5
6
7
8
9
12
13
15
100
193
82
1000
75
90
1001
28
1002
60

     
      1.
      2.
      3.
      4.
      5.
      6.
      7.
      8.
      9.
      10.
      11.
      12.
      13.
      14.
      15.
      16.
      17.
      18.
      19.
      20.
      21.
      22.
      23.

内置变量：统计passwd文件名,每行的行号,每行的列数

[[email protected] datas]$ awk -F : '{print FILENAME"," NR"," NF}' passwd
passwd,1,7
passwd,2,7
passwd,3,7
passwd,4,7
passwd,5,7
passwd,6,7
passwd,7,7
passwd,8,7
passwd,9,7
passwd,10,7
passwd,11,7
passwd,12,7
passwd,13,7
passwd,14,7
passwd,15,7
passwd,16,7
passwd,17,7
passwd,18,7
passwd,19,7
passwd,20,7
passwd,21,7
passwd,22,7

     
      1.
      2.
      3.
      4.
      5.
      6.
      7.
      8.
      9.
      10.
      11.
      12.
      13.
      14.
      15.
      16.
      17.
      18.
      19.
      20.
      21.
      22.
      23.

切割ip

[[email protected] datas]$ ifconfig ens33
ens33: flags=4163<UP,BROADCAST,RUNNING,MULTICAST>  mtu 1500
        inet 192.168.60.102  netmask 255.255.255.0  broadcast 192.168.60.255
        ether 00:0c:29:a1:55:c5  txqueuelen 1000  (Ethernet)
        RX packets 5834  bytes 462224 (451.3 KiB)
        RX errors 0  dropped 0  overruns 0  frame 0
        TX packets 3699  bytes 447930 (437.4 KiB)
        TX errors 0  dropped 0 overruns 0  carrier 0  collisions 0
        
[[email protected] datas]$ ifconfig ens33 | grep "inet "
        inet 192.168.60.102  netmask 255.255.255.0  broadcast 192.168.60.255


[[email protected] datas]$ ifconfig ens33 | grep "inet " | awk -F " " '{print $2}'
192.168.60.102

     
      1.
      2.
      3.
      4.
      5.
      6.
      7.
      8.
      9.
      10.
      11.
      12.
      13.
      14.
      15.

eth0版本

Shell 脚本 Quick start to actual combat -02_hadoop_02

查询sed .txt中空行所在的行号
- /^$正则：There is no content at the beginning and the end is a space

[[email protected] datas]$ awk '/^$/ {print NR}' sed.txt
5
[[email protected] datas]$ cat sed.txt

guang nan
zhou jing
wo  wo
lai  lai

le  le

     
      1.
      2.
      3.
      4.
      5.
      6.
      7.
      8.
      9.
      10.

10.4 sort

功能：sort命令在Linux中非常有用,He sorts the files,并将排序结果输出
基本语法

sort (选项) (参数)
选项：
-n 依照数值的大小排序
-r 以相反的顺序排序
-t 设置排序时所用的分割字符
-k 指定需要排序的列

     
      1.
      2.
      3.
      4.
      5.
      6.

实例

Sort by the second column value

[[email protected] datas]$ sort -t : -nrk 2 sort.sh
xz:50:2.3
bb:40:5.4
ss:30:1.6
bd:20:4.2
cls:10:3.5
[[email protected] datas]$ cat sort.sh 
bb:40:5.4
bd:20:4.2
xz:50:2.3
cls:10:3.5
ss:30:1.6

     
      1.
      2.
      3.
      4.
      5.
      6.
      7.
      8.
      9.
      10.
      11.
      12.

11 企业真实面试题

11.1 京东

使用Linux命令查询file1中空行所在的行号

有文件chengji.txt内容如下

张三 40

李四 50

王五 60

使用Linux命令计算第二列的和并输出

11.2 搜狐&和讯网

Shell脚本中如何检查一个文件是否存在？If there is no change how to deal with it

[[email protected] datas]$ # vim a.sh
#!/bin/bash

if[ -f file.txt]
then
	echo "文件存在"
else
	echo "文件不存在"
fi

     1.
2.
3.
4.
5.
6.
7.
8.
9.

11.3 新浪

问题：用Shell写一个脚本,Sorts an unordered column of numbers and adds up the sum

[[email protected] datas]$ cat test.txt
9
8
7
6
5
4
3
2
10
1
[[email protected] datas]$ sort -n test.txt | awk '{a+=$1;print$1}END{print "SUM="a}'

     
      1.
      2.
      3.
      4.
      5.
      6.
      7.
      8.
      9.
      10.
      11.
      12.

11.4 金和网络

问题：请用shell脚本写出查找当前文件夹(/home)下所有的文本文件内容中包含有字符”shen“的文件名称

[[email protected] datas]$ grep -r zhou /home
grep: /home/hadoop: Permission denied
/home/fenfen/datas/cut.txt:zhou jing 
/home/fenfen/datas/sed.txt:zhou jing


[[email protected] datas]$ grep -r zhou /home | cut -d ":" -f 1
grep: /home/hadoop: Permission denied
/home/fenfen/datas/cut.txt
/home/fenfen/datas/sed.txt

     
      1.
      2.
      3.
      4.
      5.
      6.
      7.
      8.
      9.
      10.