Linux - grep -正则表达式
目录
练习题目:
1.只显示/boot目录下所有对象的实际空间(文件的大小,占用磁盘空 间),并按由小到大排序
ll -R /boot | awk '{print $5,$9}'|sort -n
2.统计/etc/passwd中每种shell的被使用情况
[root@localhost lianxi]# cat /etc/passwd | cut -d ":" -f7 | uniq -c
3.用df -Th 命令只显示出分区和文件系统的类型,使用率
[root@localhost lianxi]# df -Th | awk '{print $1,$2,$6}'
4.统计 /etc/passwd中sbin这个单词出现多少次
[root@localhost lianxi]# cat /etc/passwd | grep sbin | tr ":" "\n" | grep sbin | wc -l
思路 : 将所有以:分隔的字符全部替换为 \n 然后再统计有多少行,就是sbin出现多少次数
5.ps aux列出前五位占MEM最多的进程的命令
[root@localhost lianxi]# ps aux | awk '{print $2,$4,$11}' | sort -rn | head -5
6.ps aux 列出前五位占cpu最多的进程的命令
[root@localhost lianxi]# ps aux | awk '{print $2,$3,$11}' | sort -rn | head -5
7.只显示网卡en33的ip地址
[root@localhost lianxi]# ip add | grep 192
8. 将 /etc/passwd文件中的名字,gid , 以及使用什么类型的shell截取出 来,并且gid>1000.
[root@localhost lianxi]# cat /etc/passwd | awk -F : ' $3>1000 {print $1,$3,$7}'
9.安装好nginx统计出访问次数最多的前三个ip地址,以及出现次数最多的 两个状态码
日志格式如下:
192.168.44.130 - - [25/Feb/2022:13:19:13 +0800] GET / HTTP/1.1 200 15 - curl/7.29.0 -
200是状态码
192.168.44.130是ip地址
[root@localhost nginx]# cat access.log |awk '{print $1,$9}' | uniq -c | sort -r | head -2
############################################################################
grep命令
用途:在文件中查找并显示包含指定字符串的行
格式:grep [选项]... 模式 目标文件
常见选项:
-i : 查找时忽略大小写
-v: 反转查找,输出与模式不相符的行
-n : 显示符合模式要求的行号
-r : 递归搜索所有文件
-o : 只显示匹配的内容
-E : 支持更多的元字符,支持扩展正则
-A :显示匹配内容以及它的后面几行内容
-B ; 显示匹配内容以及它的前面几行内容
-C:显示匹配内容并且显示他的前后几行内容
模式:
^...: 以什么开头,整行以什么开头
...$ : 以什么结尾,整行以什么结尾
模式 : 其实就是一些条件的组合,用来表达某个意思
主要是一些字符串 + 数字 + 特殊符号,组成一个模式
用来表示某个意思
############################################################################
-o 选项 --》 只显示匹配的内容
例:查看/etc/passwd文件里面所有的sbin
1)不加 -o时候:会将匹配内容的那一行全部输出出来
[root@localhost script]# cat /etc/passwd | grep "sbin"
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin
systemd-network:x:192:192:systemd Network Management:/:/sbin/nologin
dbus:x:81:81:System message bus:/:/sbin/nologin
polkitd:x:999:998:User for polkitd:/:/sbin/nologin
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
chrony:x:998:996::/var/lib/chrony:/sbin/nologin
nginx:x:997:995:Nginx web server:/var/lib/nginx:/sbin/nologin
tss:x:59:59:Account used by the trousers package to sandbox the tcsd daemon:/dev/null:/sbin/nologin
ntp:x:38:38::/etc/ntp:/sbin/nologin
2)加-o的时候:只会输出匹配的内容
[root@localhost script]# cat /etc/passwd | grep -o "sbin"
sbin
sbin
sbin
sbin
sbin
sbin
sbin
sbin
sbin
sbin
sbin
sbin
sbin
############################################################################
-i 选项 --》 忽略大小写,都匹配显示出来
-n 选项 --》 给匹配的内容加行号
[root@localhost script]# cat phone.txt | grep xiaomi
xiaomi
[root@localhost script]# cat phone.txt | grep -i xiaomi
xiaomi
XIAOMI
[root@localhost script]# cat phone.txt | grep -ni xiaomi
1:xiaomi
2:XIAOMI
############################################################################
-v 选项: 反转查找,输出与模式不相符的内容
当我们不接-v选项的时候:只会输出匹配的内容
[root@localhost script]# cat phone.txt | grep "xiaomi"
xiaomi
当我们接-v选项的时候:反转查找输出与模式不相符的内容
[root@localhost script]# cat phone.txt | grep -v "xiaomi"
XIAOMI
huawei
HUAWEI OPPO vivo
VIVO
apple meizu kupai
nokia
############################################################################
-r : 递归搜索所有文件
/lianxi/script/phone.txt:xiaomi
/lianxi/company.txt:xiaomi ghuwei tencent alibaba baidu mangguotv bytedance xiaomi
/lianxi/company.txt:xiaomi huwei tencent alibaba baidu mangguotv bytedance xiaomi
/lianxi/company.txt:xiaomi huwei tencent alibaba baidu mangguotv bytedance xiaomi
/lianxi/company.txt:xiaomi huwei tencent alibaba baidu mangguotv bytedance xiaomi
############################################################################
-A + 长度 : 显示出匹配内容以及它的后面几行
[root@localhost script]# cat phone.txt | grep -A 3 huawei
huawei
HUAWEI OPPO vivo
VIVO
apple meizu kupai
############################################################################
B + 长度 : 显示匹配内容以及他的前几行
[root@localhost script]# cat phone.txt | grep -B 2 huawei
xiaomi
XIAOMI
huawei
grep在匹配字符的时候,是模糊匹配
############################################################################
-C + 长度 :显示匹配内容并且显示他的前后几行内容
[root@localhost script]# cat phone.txt | grep -C 2 huawei
xiaomi
XIAOMI
huawei
HUAWEI OPPO vivo
VIVO
############################################################################
-E 选项:支持更多的元字符,支持扩展正则
正则:正则表达式 --》 就是一组规则,表示出某个意思
regular expression --》 feng[0]
egrep = grep -E
模式采用的就是正则表达式
正则表达式就是有字符串 + 数字 + 特殊符号按照正确的规则组合而成的要来表达某个意思的公式
元字符:有特殊作用的字符
基本正则:
里面有很多常见的元字符 ^ $ [ ]
^ 以什么开头
$ 以什么结尾
[ ] 表示集合
^$ 表示空行,一行里什么都没有
扩展正则:
在基本正则的基础上新加了很多的元字符,例如 :|表示或者
-E, --extended-regexp
因为grep默认支持基本正则,所以在用到扩展正则的时候要加-E
Interpret PATTERN as an extended regular expression (ERE, see below)
############################################################################
例: 查找出 以root开头或者feng[1-5]的信息
因为有或,所以要用到 | 符号,|属于扩展正则,要接 -E
注意 | 两边不要空格
root@localhost lianxi]# cat /etc/passwd | grep -E ^root|feng[0-5]
root:x:0:0:root:/root:/bin/bash
feng1:x:1017:1017::/home/feng1:/bin/bash
feng2:x:1018:1018::/home/feng2:/bin/bash
feng3:x:1019:1019::/home/feng3:/bin/bash
feng4:x:1020:1020::/home/feng4:/bin/bash
feng5:x:1021:1021::/home/feng5:/bin/bash
############################################################################
egrep = grep -E
[root@localhost lianxi]# cat /etc/passwd | egrep ^root|feng[0-5]
root:x:0:0:root:/root:/bin/bash
feng1:x:1017:1017::/home/feng1:/bin/bash
feng2:x:1018:1018::/home/feng2:/bin/bash
feng3:x:1019:1019::/home/feng3:/bin/bash
feng4:x:1020:1020::/home/feng4:/bin/bash
feng5:x:1021:1021::/home/feng5:/bin/bash
############################################################################
输出有效行
^$ 表示空行
例: 查找出来sshd_config配置文件里的有效行
有效行:不是注释和空行
以# 开头的都是注释
[root@localhost lianxi]# cat /etc/ssh/sshd_config | grep -vE ^#|^$
HostKey /etc/ssh/ssh_host_rsa_key
HostKey /etc/ssh/ssh_host_ecdsa_key
HostKey /etc/ssh/ssh_host_ed25519_key
SyslogFacility AUTHPRIV
AuthorizedKeysFile .ssh/authorized_keys
PasswordAuthentication yes
ChallengeResponseAuthentication no
GSSAPIAuthentication yes
GSSAPICleanupCredentials no
UsePAM yes
X11Forwarding yes
AcceptEnv LANG LC_CTYPE LC_NUMERIC LC_TIME LC_COLLATE LC_MONETARY LC_MESSAGES
AcceptEnv LC_PAPER LC_NAME LC_ADDRESS LC_TELEPHONE LC_MEASUREMENT
AcceptEnv LC_IDENTIFICATION LC_ALL LANGUAGE
AcceptEnv XMODIFIERS
Subsystem sftp /usr/libexec/openssh/sftp-server
############################################################################
正则表达式(简单的)
基本正则:
基本正则:里面有很多常见的元字符 ^ $ [ ]
^ 以什么开头
$ 以什么结尾
[ ] 表示集合
^$ 表示空行,一行里什么都没有
############################################################################
[] {}
[0-9]{2} 表示0-9里面可以取2次的意思,随便你取哪一个,取两次
[0-9]{2,5} 表示从0-9里可以取2-5次的数字,随便你取哪个,至少两次,最多取5次
[0-9]{2,} 表示从0-9里可以取两次以上,最少2次
a{2} 表示花括号前面的a连续出现两次
abc{2}表示abc中的c出现2次
例:
[root@localhost lianxi]# echo fefabcce|egrep abc{2}
fefabcce
扩展正则:
扩展正则:在基本正则的基础上新加了很多的元字符,例如 :|表示或者
-E, --extended-regexp
因为grep默认支持基本正则,所以在用到扩展正则的时候要加-E
Interpret PATTERN as an extended regular expression (ERE, see below)
############################################################################
练习题:
2.[root@localhost lianxi]# cat passwd | egrep "^ftp|^mail"
3.[root@localhost lianxi]# cat passwd | egrep -v "^r|^m|^f"
[root@localhost lianxi]# cat passwd | egrep -v "^[rmf]"
[root@localhost lianxi]# cat passwd | egrep -v "^[^rmf]"
4.[root@localhost lianxi]# cat passwd | grep "bash$"
5.[root@localhost lianxi]# cat /etc/login.defs | egrep -v "^#|^$"
6.[root@localhost lianxi]# cat /var/log/messages | egrep [a-Z]{16}
7.[root@localhost lianxi]# cat passwd | egrep liu.*bash
[root@localhost lianxi]# cat passwd | egrep liu | grep bash
8.[root@localhost lianxi]# cat /etc/ssh/sshd_config | grep -vE "^#|^$"
9.[root@localhost lianxi]# cat /etc/ssh/ssh_config | egrep [0-9][0-9]
10.[root@localhost lianxi]# cat /etc/ssh/ssh_config | egrep [^0-Z]
11.[root@localhost lianxi]# cat /etc/ssh/ssh_config | grep -v [0-9]
12.[root@localhost lianxi]# cat /var/log/secure | egrep [0-9]{,3}.[0-9]{1,3}
############################################################################
更多推荐
所有评论(0)