Linux文本三剑客#

1
演示文本：
2
/etc/passwd

1
以行为输出，只做筛选并输出，不会改变文件原来的内容
2

3
grep命令是我们常用的一个强大的文本搜索命令。
4
命令格式：
5
grep [参数] [关键字] <文件名>
6
注意：
7
可以通过 grep --help 查看grep的帮助信息
8
参数详解：
9
c 只输出匹配关键字的计数
10
n 显示匹配行内容及行号
11
v 显示不包含匹配文本的所有行
12
o 只列出所匹配关键字
13

14
grep -v "^#" /etc/sudoers | grep -v "^$"  //筛选以#开头和空行以外的内容
15
grep -v "^#\|^$" /etc/sudoers
16

17
 ^ 以...开头
18
 $ 以...结尾
19
 ^$ 空行
20
 \ 转义符

1
演示文本：
2
hello sed1 sed1 sed1
3
hello sed2 sed2 sed2
4
hello sed3 sed3 sed3
5
hello sed4 sed4 sed4
6
hello sed5 sed5 sed5
7
hello sed6 sed6 sed6
8
hello sed7 sed7 sed7
9
hello sed8 sed8 sed8

1
行文本编辑工具

1
sed 行文件编辑工具。因为它编辑文件是以行为单位的。
2
命令格式：
3
sed [参数] '<匹配条件> [动作]' [文件名]
4
注意：
5
可以通过 sed --help 查看帮助信息
6
参数详解：
7
参数为空 表示sed的操作效果，实际上不对文件进行编辑
8
-n 取消静默输出
9
-i 表示对文件进行编辑
10

11
匹配条件：
12
匹配条件分为两种：数字行号或者关键字匹配
13
关键字匹配格式：
14
‘/关键字/’
15
动作详解：
16
a 在匹配到的内容下一行增加内容
17
i 在匹配到的内容当前行增加内容
18
d 删除匹配到的内容
19
s 替换匹配到的内容
20
p 查看指定内容
21
e 多点编辑

1
sed -n '3p' sed  //查看第三行的内容
2
sed -n '3p;5p' sed   //查看第三行和第五行的内容
3
sed -n '2,5p' sed   //查看2-5行的内容

1
sed -i '1s/sed/SED/' sed  //将第一行第一个sed替换为SED
2
sed -i '1s/sed/SED/2' sed //将第一行第二个sed替换为SED
3
sed -i '3s/sed/SED/g' sed //将第三行所有sed替换为SED
4
sed -i 's/sed/SED/' sed //将每一行首个sed替换为SED
5
sed -i '6,8s/sed/SED/g' sed //将6-8行所有sed替换为SED
6
sed -i '2s/sed/SED/g;5s/sed/SED/g' sed //将第2和5行所有sed替换为SED

1
1.在第2行后增加add-1
2
sed -i '2a\add-1' sed
3
2.在第2行前增加insert-1
4
sed -i '2i\insert-1' sed
5
3.在第5-7行后每一行增加add-2
6
sed -i '5,7a\add-2' sed
7
4.在第5-7行前增加insert-2
8
sed -i '5,7i\insert-2' sed
9
5.在第1行后连续增加两行
10
sed -i '1a\add-11\nadd-11' sed

1
删除第2行
2
sed -i '2d' sed
3
删除第2-5行
4
sed -i '2,5d' sed
5
删除第2和5行
6
sed -i '2d;5d' sed

1
演示文本：
2
hello awk1 awk2 awk3
3
hello awk4 awk5 awk6
4
Hello awk7 awk8 awk9

1
不仅能以行为单位，也能以列为单位处理文件

1
awk是一个功能非常强大的文档编辑工具，它不仅能以行为单位还能以列为单
2
位处理文件。
3
命令格式
4
awk [参数] '[动作]' [文件名]
5

6
常见参数：
7
-F 指定列的分隔符
8
-f 调用脚本
9
-v 定义变量
10

11
常见动作：
12
print 显示内容
13
$0 显示当前行所有内容
14
$n 显示当前行的第n列内容
15

16
动作组成
17
BEGIN{ 命令 } 初始代码块，主要和变量相关
18
/pattern/{ 命令 } 匹配、执行代码块
19
END{ 命令 } 结束代码块，主要和信息输出相关
20

21
内置变量
22
FILENAME 当前输入文件的文件名，该变量是只读的
23
NR 指定显示行的行号
24
NF 输出当前行的列数
25
OFS 输出格式的列分隔符，缺省是空格
26
FS 输入文件的列分融符，缺省是连续的空格和Tab

1
awk '/hello/' awk  //筛选有hello的内容
2
awk '{print $2}' awk //打印第2列内容
3
 默认情况下awk会以空格作为分隔符
4
awk '{print NR,$2}' awk  //打印第二列的内容并显示行号
5
awk 'NR==2{print $2,$4}' awk //打印第二行的内容的第二列和第四列的内容
6

7
awk -F ',' '{print $3}' awk  //以，为分隔符，打印第三列的内容
8
awk -F ',' 'BEGIN{OFS=":"}{print NR,$2}' awk //以，为分隔符，打印   行号:第二列的内容
9

10
ll | awk '{if ($5>=1910) print "\n" "filename:" $9 "\n" "lenth:" $5 "B" "\n"}'  //输出当前目录下文件大小大于1910的文件名和文件大小
11

12
ll | awk '{if ($5>=1910 && /^-/) print "\n" "filename:" $9 "\n" "lenth:" $5 "B" "\n"}' //输出当前目录下普通文件大小大于1910的文件名和文件大小
13

14

15
awk -F ',' '{for(i=1;i<=NF;i++) print $i}' awk  //按顺序输出所有内容
16
awk -F ',' '{for(i=NF;i>=1;i--) print $i}' awk  //按倒序输出所有内容

1
1.查询系统中UID为0的用户
2
awk -F ':' '$3==0{print $1}' /etc/passwd
3
2.查询空密码的用户
4
awk -F ':' '$2==""{print $1}' /etc/shadow
5
awk -F ':' 'length($2)==0{print $1}' /etc/shadow