linux每日命令(35):grep命令
linux系统中grep命令是一种强大的文本搜索工具,它能使用正则表达式搜索文本,并把匹 配的行打印出来。grep全称是global regular expression print,表示全局正则表达式版本,它的使用权限是所有用户。
grep的工作方式是这样的,它在一个或多个文件中搜索字符串模板。如果模板包括空格,则必须被引用,模板后的所有字符串被看作文件名。搜索的结果被送到标准输出,不影响原文件内容。
grep可用于shell脚本,因为grep通过返回一个状态值来说明搜索的状态,如果模板搜索成功,则返回0,如果搜索不成功,则返回1,如果搜索的文件不存在,则返回2。我们利用这些返回值就可进行一些自动化的文本处理工作。
一.命令格式:
grep [-abcefghhillnqrsvvwxy][-a<显示列数>][-b<显示列数>][-c<显示列数>][-d<进行动作>][-e<范本样式>][-f<范本文件>][--help][范本样式][文件或目录...]
二.命令功能:
用于过滤/搜索的特定字符。可使用正则表达式能多种命令配合使用,使用上十分灵活。
三.命令参数:
参数 | 描述 |
---|---|
-a | 或 --text : 不要忽略二进制的数据。 |
-a显示行数> | 或 --after-context= : 除了显示符合范本样式的那一列之外,并显示该行之后的内容。显示行数> |
-b | 或 --byte-offset : 在显示符合样式的那一行之前,标示出该行第一个字符的编号。 |
-b显示行数> | 或 --before-context= : 除了显示符合样式的那一行之外,并显示该行之前的内容。显示行数> |
-c | 或 --count : 计算符合样式的列数。 |
-c显示行数> | 或 --context=或- : 除了显示符合样式的那一行之外,并显示该行之前后的内容。显示行数>显示行数> |
-d 动作> | 或 --directories= : 当指定要查找的是目录而非文件时,必须使用这项参数,否则grep指令将回报信息并停止动作。动作> |
-e范本样式> | 或 --regexp= : 指定字符串做为查找文件内容的样式。范本样式> |
-e | 或 --extended-regexp : 将样式为延伸的普通表示法来使用。 |
-f 或 --file= : 指定规则文件,其内容含有一个或多个规则样式,让grep查找符合规则条件的文件内容,格式为每行一个规则样式。规则文件>规则文件> | |
-f | 或 --fixed-regexp : 将样式视为固定字符串的列表。 |
-g | 或 --basic-regexp : 将样式视为普通的表示法来使用。 |
-h | 或 --no-filename : 在显示符合样式的那一行之前,不标示该行所属的文件名称。 |
-h | 或 --with-filename : 在显示符合样式的那一行之前,表示该行所属的文件名称。 |
-i | 或 --ignore-case : 忽略字符大小写的差别。 |
-l | 或 --file-with-matches : 列出文件内容符合指定的样式的文件名称。 |
-l | 或 --files-without-match : 列出文件内容不符合指定的样式的文件名称。 |
-n | 或 --line-number : 在显示符合样式的那一行之前,标示出该行的列数编号。 |
-q | 或 --quiet或--silent : 不显示任何信息。 |
-r | 或 --recursive : 此参数的效果和指定"-d recurse"参数相同。 |
-s | 或 --no-messages : 不显示错误信息。 |
-v | 或 --revert-match : 显示不包含匹配文本的所有行。 |
-v | 或 --version : 显示版本信息。 |
-w | 或 --word-regexp : 只显示全字符合的列。 |
-x | --line-regexp : 只显示全列符合的列。 |
-y | 此参数的效果和指定"-i"参数相同。 |
四. 规则表达式
grep 的规则表达式
表达式 | 描述 |
---|---|
^ | 锚定行的开始 如:'^grep'匹配所有以grep开头的行。 |
$ | 锚定行的结束 如:'grep$'匹配所有以grep结尾的行。 |
. | 匹配一个非换行符的字符 如:'gr.p'匹配gr后接一个任意字符,然后是p。 |
* | 匹配零个或多个先前字符 如:'*grep'匹配所有一个或多个空格后紧跟grep的行。 |
.* | 一起用代表任意字符。 |
[] | 匹配一个指定范围内的字符,如'[gg]rep'匹配grep和grep。 |
[^] | 匹配一个不在指定范围内的字符,如:'[^a-fh-z]rep'匹配不包含a-f和h-z的一个字母开头,紧跟rep的行。 |
\(..) #标记匹配字符,如'(love)',love被标记为1。 | |
< | 锚定单词的开始,如:'<grep'匹配包含以grep开头的单词的行。 |
> | 锚定单词的结束,如'grep>'匹配包含以grep结尾的单词的行。 |
x{m} | 重复字符x,m次,如:'0{5}'匹配包含5个o的行。 |
x{m,} | 重复字符x,至少m次,如:'o{5,}'匹配至少有5个o的行。 |
x{m,n} | 重复字符x,至少m次,不多于n次,如:'o{5,10}'匹配5--10个o的行。 |
\w | 匹配文字和数字字符,也就是[a-za-z0-9],如:'g\w*p'匹配以g后跟零个或多个文字或数字字符,然后是p。 |
\w | \w的反置形式,匹配一个或多个非单词字符,如点号句号等。 |
\b | 单词锁定符,如: '\bgrep\b'只匹配grep。 |
posix字符:
为了在不同国家的字符编码中保持一至,posix(the portable operating system interface)增加了特殊的字符类,如[:alnum:]是[a-za-z0-9]的另一个写法。要把它们放到[]号内才能成为正则表达式,如[a- za-z0-9]或[[:alnum:]]。在linux下的grep除fgrep外,都支持posix的字符类。
字符 | 描述 |
---|---|
[:alnum:] | 文字数字字符 |
[:alpha:] | 文字字符 |
[:digit:] | 数字字符 |
[:graph:] | 非空字符(非空格、控制字符) |
[:lower:] | 小写字符 |
[:cntrl:] | 控制字符 |
[:print:] | 非空字符(包括空格) |
[:punct:] | 标点符号 |
[:space:] | 所有空白字符(新行,空格,制表符) |
[:upper:] | 大写字符 |
[:xdigit:] | 十六进制数字(0-9,a-f,a-f) |
五. 使用实例
1. 查找指定进程
命令:
ps -ef|grep uwsgi
输出:
[root@localhost autoaweme]# ps -ef|grep uwsgi root 30568 795 0 12月01 ? 00:00:23 /home/hc/project/envs/pgc/bin/uwsgi --ini /home/hc/project/pgc.ini root 30578 30568 0 12月01 ? 00:00:00 /home/hc/project/envs/pgc/bin/uwsgi --ini /home/hc/project/pgc.ini root 59379 795 1 12月04 ? 00:13:13 /home/hc/project/envs/autoaweme/bin/uwsgi --ini /home/hc/project/autoaweme.ini root 59406 59379 0 12月04 ? 00:00:03 /home/hc/project/envs/autoaweme/bin/uwsgi --ini /home/hc/project/autoaweme.ini root 112483 86053 0 09:29 pts/1 00:00:00 grep --color=auto uwsgi
说明:
除最后一条记录外,其他的都是查找出的进程;最后一条记录结果是grep进程本身,并非真正要找的进程。
2. 查找指定进程时,不显示grep 本身进程
命令:
ps aux | grep uwsgi | grep -v "grep" ps aux|grep [u]wsgi ps aux|grep /[u]wsgi
输出:
[root@localhost test]# ps -aux | grep uwsgi root 30568 0.0 1.3 310244 53696 ? s 12月01 0:23 /home/hc/project/envs/pgc/bin/uwsgi --ini /home/hc/project/pgc.ini root 30578 0.0 1.2 310244 49556 ? s 12月01 0:00 /home/hc/project/envs/pgc/bin/uwsgi --ini /home/hc/project/pgc.ini root 59379 1.5 1.3 457952 50236 ? sl 12月04 13:50 /home/hc/project/envs/autoaweme/bin/uwsgi --ini /home/hc/project/autoaweme.ini root 59406 0.0 1.3 467760 53104 ? s 12月04 0:03 /home/hc/project/envs/autoaweme/bin/uwsgi --ini /home/hc/project/autoaweme.ini root 87765 0.0 0.0 112704 1016 pts/1 r+ 10:14 0:00 grep --color=auto uwsgi [root@localhost test]# ps -aux | grep uwsgi | grep -v "grep" root 30568 0.0 1.3 310244 53696 ? s 12月01 0:23 /home/hc/project/envs/pgc/bin/uwsgi --ini /home/hc/project/pgc.ini root 30578 0.0 1.2 310244 49556 ? s 12月01 0:00 /home/hc/project/envs/pgc/bin/uwsgi --ini /home/hc/project/pgc.ini root 59379 1.5 1.3 457952 50236 ? sl 12月04 13:50 /home/hc/project/envs/autoaweme/bin/uwsgi --ini /home/hc/project/autoaweme.ini root 59406 0.0 1.3 467760 53104 ? s 12月04 0:03 /home/hc/project/envs/autoaweme/bin/uwsgi --ini /home/hc/project/autoaweme.ini [root@localhost test]# ps -aux | grep [u]wsgi root 30568 0.0 1.3 310244 53696 ? s 12月01 0:23 /home/hc/project/envs/pgc/bin/uwsgi --ini /home/hc/project/pgc.ini root 30578 0.0 1.2 310244 49556 ? s 12月01 0:00 /home/hc/project/envs/pgc/bin/uwsgi --ini /home/hc/project/pgc.ini root 59379 1.5 1.3 457952 50236 ? sl 12月04 13:45 /home/hc/project/envs/autoaweme/bin/uwsgi --ini /home/hc/project/autoaweme.ini root 59406 0.0 1.3 467760 53104 ? s 12月04 0:03 /home/hc/project/envs/autoaweme/bin/uwsgi --ini /home/hc/project/autoaweme.ini [root@localhost test]# ps -aux | grep \[u]wsgi root 30568 0.0 1.3 310244 53696 ? s 12月01 0:23 /home/hc/project/envs/pgc/bin/uwsgi --ini /home/hc/project/pgc.ini root 30578 0.0 1.2 310244 49556 ? s 12月01 0:00 /home/hc/project/envs/pgc/bin/uwsgi --ini /home/hc/project/pgc.ini root 59379 1.5 1.3 457952 50236 ? sl 12月04 13:45 /home/hc/project/envs/autoaweme/bin/uwsgi --ini /home/hc/project/autoaweme.ini root 59406 0.0 1.3 467760 53104 ? s 12月04 0:03 /home/hc/project/envs/autoaweme/bin/uwsgi --ini /home/hc/project/autoaweme.ini
3. 查找指定进程个数
命令:
ps -ef|grep uwsgi -c ps -ef|grep -c uwsgi
输出:
[root@localhost autoaweme]# ps -ef|grep uwsgi -c 5 [root@localhost autoaweme]# ps -ef|grep -c uwsgi 5
4. 从文件中读取关键词进行搜索
命令:
cat 3.log | grep -f 4.log
输出:
[root@localhost test]# cat 3.log 1 2 3 [root@localhost test]# cat 4.log 1 12 5 43 [root@localhost test]# cat 3.log | grep -f 4.log 1 [root@localhost test]# cat 4.log | grep -f 3.log 1 12 43
说明:
cat 3.log | grep -f 4.log 从3.log文件中匹配出含有4.log中关键字的行并输出
cat 4.log | grep -f 3.log 从4.log文件中匹配出含有3.log中关键字的行并输出
如:4.log中的关键字有1,12,5,43四个,在3.log中无论是完全匹配还是部分匹配只能匹配到1,并输出
在 3.log中关键字为1,2,3, 所以在4.log中匹配3时,能完全匹配到含有1,2,3的行,并把匹配部分着色表示输出
5. 从文件中读取关键词进行搜索 且显示行号
命令:
cat 4.log | grep -nf 3.log
输出:
[root@localhost test]# cat 4.log | grep -nf 3.log 1:1 2:12 4:43 [root@localhost test]# cat 3.log | grep -nf 4.log 1:1
说明:
输出4.log文件中含有从3.log 文件中读取出的关键词的内容行,并显示每一行的行号,冒号(:)左边是行号,右边是匹配的内容
6. 从文件中查找关键词
命令:
grep "1" 4.log
输出:
[root@localhost test]# cat 4.log 1 12 "1" 5 43 [root@localhost test]# grep 1 4.log 1 12 "1" [root@localhost test]# grep '1' 4.log 1 12 "1" [root@localhost test]# grep "1" 4.log 1 12 "1" [root@localhost test]# grep \"1\" 4.log "1"
说明:
有无引号,或者单双引号 效果是一样的,但是加上引号可读性好一点。另外如果要查询带引号的内容,需要用\进行转义
7. 从多个文件中查找关键词
命令:
grep '1' 3.log 4.log
输出:
[root@localhost test]# grep '1' 3.log 4.log 3.log:1 4.log:1 4.log:12 4.log:"1" [root@localhost test]# grep -n 1 3.log 4.log 3.log:1:1 4.log:1:1 4.log:2:12 4.log:3:"1"
说明:
多文件时,输出查询到的信息内容行时,会把文件的命名放在在行的最左边输出并且加上":"作为标示符分隔,如果用了-n展示行号,则第二个:的左边是行号,最右边的是匹配内容
8.找出以1开头的行内容
命令:
cat 4.log |grep ^1
输出:
[root@localhost test]# cat 4.log 1 12 "1" 5 43 [root@localhost test]# cat 4.log |grep ^1 1 12
9.找出非1开头的行内容
命令:
cat 4.log |grep ^[^1]
输出:
[root@localhost test]# cat 4.log |grep ^[^1] "1" 5 43
10.找出以3结尾的行内容
命令:
cat 4.log |grep 3$
输出:
[root@localhost test]# cat 4.log |grep 3$ 43
11.在当前目录中,查找后缀有 log 字样的文件中包含 1 字符串的文件,并打印出该字符串的行
命令:
grep 1 *log
输出:
[root@localhost test]# ls 1.log 2.log 2.log.back 3.log 4.log [root@localhost test]# grep 1 *log 3.log:1 4.log:1 4.log:12 4.log:"1"
12 . 以递归的方式查找符合条件的文件
命令:
grep -r 仅此一条 /home/hc
输出:
[root@localhost hc]# grep -r 仅此一条 /home/hc /home/hc/test/2.log.back:仅此一条,我是第五行 [root@localhost hc]#
说明:
查找指定目录/home/hc 及其子目录(如果存在子目录的话)下所有文件中包含字符串"仅此一条"的文件,并打印出该字符串所在行的内容
13.反向查找
命令:
grep -v 仅此一条 *
输出:
[root@localhost test]# ls 1.log 2.log 2.log.back 3.log 4.log [root@localhost test]# grep 仅此一条 * 2.log.back:仅此一条,我是第五行 [root@localhost test]# grep -v 仅此一条 * 1.log:hnlinux 1.log: 1.log:hpython.cn 1.log: 1.log:ubuntu 1.log: 1.log:ubuntu linux 1.log: 1.log:redhat 1.log: 1.log:redhat 1.log: 1.log:linuxmint 2.log:linux 2.log: 2.log:redhat 2.log.back:第一行 2.log.back:第二行 2.log.back:我是log2第3行 2.log.back:第四行 3.log:1 3.log:2 3.log:3 4.log:1 4.log:12 4.log:"1" 4.log:5 4.log:43
说明:
查找当前目录下所有文件,找出其中不包含"仅此一条"的行