正则表达式描述了一种字符串匹配的模式可以用来检查一个串是否含有某种子串将匹配的子串替换或者从某个串中取出符号某个条件的子串等在linux中代表自定义的模式模版linux工具可以用正则表达式过滤文本。

Linux工具能够在处理数据时使用正则表达式对数据进行模式匹配如果数据符合匹配的要求那么就会进入下一步处理如果数据不符合匹配的要求就会被过滤掉

1.3.1

print表示全局正则表达式使用权限是所有用户grep命令是文本搜集工具能够使用正则表达式搜索文本并把匹配的行打印出来

匹配几次后停止

halt:x:7:0:halt:/sbin:/sbin/halt

mail:x:8:12:mail:/var/spool/mail:/sbin/nologin

operator:x:11:0:operator:/root:/sbin/nologin

games:x:12:100:games:/usr/games:/sbin/nologin

[rootlocalhost

lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin

sync:x:5:0:sync:/sbin:/bin/sync

shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown

halt:x:7:0:halt:/sbin:/sbin/halt

[rootlocalhost

lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin

sync:x:5:0:sync:/sbin:/bin/sync

shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown

halt:x:7:0:halt:/sbin:/sbin/halt

mail:x:8:12:mail:/var/spool/mail:/sbin/nologin

operator:x:11:0:operator:/root:/sbin/nologin

games:x:12:100:games:/usr/games:/sbin/nologin

[rootlocalhost

1:root:x:0:0:root:/root:/bin/bash

10:operator:x:11:0:operator:/root:/sbin/nologin

[rootlocalhost

UUIDee382caa-3a27-4985-a6a0-2920648fe4f4

/boot

在正则表达式中^表示行的开始$表示行的结尾那么空行则可以用^$表示

[rootlocalhost

root:x:0:0:root:/root:/bin/bash

operator:x:11:0:operator:/root:/sbin/nologin

.表示任意一个字符上例中r.o表示把r与o之间有一个任意字符的行过滤出来

[rootlocalhost

root:x:0:0:root:/root:/bin/bash

lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin

mail:x:8:12:mail:/var/spool/mail:/sbin/nologin

operator:x:11:0:operator:/root:/sbin/nologin

postfix:x:89:89::/var/spool/postfix:/sbin/nologin

*表示零个或多个*前面的字符上例中ooo*表示oo、ooo、oooo.....或者更多的

[rootlocalhost

*表示零个或多个*前面的字符空行也包含在内它会把/etc/passwd文件里面的所有行都匹配到

1.3.2

sed编辑器是一种流编辑器流编辑器会在编辑器处理数据之前基于预先提供的一组规则来编辑数据流

sed编辑器可以根据命令来处理数据流中的数据这些命令要么从命令行中输入要么存储在一个命令文本文件中

替换替换指定字符

打印如果同时指定行表示打印指定行;如果不指定行则表示打印所有内容;如果有非打印字符则以ASCII码输出。

其通常与-n选项一起使用

打印行号

打印数据流中的文本和不可打印的ASCII字符比如结束符$、制表符\t

打印某行

bin:x:1:1:bin:/bin:/sbin/nologin

打印所有行

root:x:0:0:root:/root:/bin/bash

bin:x:1:1:bin:/bin:/sbin/nologin

daemon:x:2:2:daemon:/sbin:/sbin/nologin

[rootlocalhost

root:x:0:0:root:/root:/bin/bash

operator:x:11:0:operator:/root:/sbin/nologin

删除某些行

awk是一种处理文本文件的语言是一个强大的文本分析工具可以在无交互的模式下实现复杂的文本操作相较于sed常作用于一整个行的处理awk则比较倾向于一行当中分成数个字段来处理因为awk相当适合小型的文本数据

awk格式及原理

awk命令逐行读取文本默认以空格或tab键为分隔符进行分隔将分隔所得的各个字段保存到内建变量中并按模式或者条件执行编辑命令。

sed命令常用于一整行的处理而awk比较倾向于将一行分成多个“字段”然后再进行处理awk信息的读入也是逐行读取的执行结果可以通过print的功能将字段数据打印

列分隔符指定每行文本的字段分隔符默认为空格或制表位与-F作用相同

FILENAME

行分隔符。

awk从文件上读取资料时将根据RS的定义把资料切割成许多条记录而awk一次仅读入一条记录以进行处理。

预设值是’\n’

$NF

root:x:0:0:root:/root:/bin/bash

bin:x:1:1:bin:/bin:/sbin/nologin

匹配字符或者字符串

root:x:0:0:root:/root:/bin/bash

lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin

[rootlocalhost

root:x:0:0:root:/root:/bin/bash

条件操作符

shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown

halt:x:7:0:halt:/sbin:/sbin/halt

mail:x:8:12:mail:/var/spool/mail:/sbin/nologin

nobody:x:99:99:Nobody:/:/sbin/nologin

dbus:x:81:81:System

sshd:x:74:74:Privilege-separated

SSH:/var/empty/sshd:/sbin/nologin

postfix:x:89:89::/var/spool/postfix:/sbin/nologin

chrony:x:998:996::/var/lib/chrony:/sbin/nologin

[rootlocalhost

chrony:x:998:996::/var/lib/chrony:/sbin/nologin

awk常用的变量有OFS、NF和NROFS和-F选项有类似的功能也是用来定义分隔符的但是他是在输出的时候定义NF表示用分隔符分隔后一共有多少段NR表示行号

[rootlocalhost

root:x:0:0:root:/root:/bin/bash

bin:x:1:1:bin:/bin:/sbin/nologin

[rootlocalhost

root:x:0:0:root:/root:/bin/bash