文本搜索利器:grep egrep fgrep

    grep名称来自于g/re/p(globally search a regular expression and print,以正规表示法进行全域查找以及打印),是一个最初用于Unix操作系统的命令行工具。在给出文件列表或标准输入后,grep会对匹配一个或多个正则表达式的文本进行搜索,并只输出匹配(或者不匹配)的行或文本。

命令名称:grep, egrep, fgrep
命令作用:print lines matching a pattern
命令用法:grep [OPTIONS] PATTERN [FILE...]
          grep [OPTIONS] [-e PATTERN | -f FILE] [FILE...]
参数选项:-v  反向选取
          -o  仅显示匹配的字符串,而非字符串所在的行
          -i  忽略字符串大小写
          -E  支持只用扩展正则表达式
          -A n  显示匹配到字符串之后的n行
          -B n  显示匹配到字符串之前的n行
          -C n  显示匹配到字符串前后的n行
          --color  高亮显示匹配到的字符串


常见字符集:

[:space:] 所以空白字符
[:punct:] 所以标点符号
[:lower:] 所有小写字母
[:upper:] 所以大写字母
[:digit:] 所有数字
[:alnum:] 所有大小写字母和数字
[:alpha:] 所有大小写字母


文件名通配:


* 任意长度的任意字符
? 匹配任意单个字符
[] 匹配指定范围内的任意单个字符
[^] 匹配指定范围以外的任意单个字符


基本正则表达式:

字符匹配 . 匹配任意单个字符
[] 匹配指定范围内的任意单个字符
[^] 匹配指定范围外的任意单个字符
次数匹配 * 前面的字符可以出现任意次
\? 前面的字符出现0次或者1次
\{m\} 前面的字符出现m次
\{m,n\} 前面的字符出现n次~m次
\{m,\} 前面的字符至少出现m次
\{0,n\} 前面的字符至多出现n次
.* 任意长度的任意字符
位置锚定 ^ 行首锚定,写在模式的最左侧
$ 行尾锚定,写在模式的最右侧
^$ 匹配空行
\< 词首锚定,出现于单词左侧
\> 词尾锚定,出现于单词右侧
分组 \(\) 匹配一个分组
\1 引用第1个括号所匹配到的内容,而非模式本身
\2

引用第2个括号所匹配到的内容,而非模式本


扩展正则表达式:

字符匹配 . 匹配任意单个字符
[] 匹配指定范围内的任意单个字符
[^] 匹配指定范围外的任意单个字符
次数匹配 * 前面的字符可以出现任意次
? 前面的字符出现0次或者1次
+ 前面的字符至少出现1次
{m} 前面的字符出现m次
{m,n} 前面的字符出现n次~m次
{m,} 前面的字符至少出现m次
{0,n} 前面的字符至多出现n次
锚定 ^ 行首锚定,写在模式的最左侧
$ 行尾锚定,写在模式的最右侧
\<,\b 词首锚定,出现于单词左侧
\>,\b 词尾锚定,出现于单词右侧
^$ 匹配空行
分组 () 匹配一个分组
\1 引用第1个括号所匹配到的内容,而非模式本身


grep练习:

1、显示/proc/meminfo文件中以大写或小写S开头的行;

[root@DB2 ~]# grep -i '^s' /proc/meminfo 

[root@DB2 ~]# grep -E '^(S|s)' /proc/meminfo

[root@DB2 ~]# grep '^[S|s]' /proc/meminfo


2、显示/etc/passwd文件中其默认shell为非/sbin/nologin的用户;

[root@DB2 ~]# grep -v "/sbin/nologin$" /etc/passwd | cut -d: -f1


3、显示/etc/passwd文件中其默认shell为/bin/bash并且ID号最大的用户;

[root@DB2 ~]# grep '/bin/bash' /etc/passwd | sort -t: -k3 -n | tail -1 | cut -d: -f1


4、找出/etc/passwd文件中的一位数或两位数;

[root@DB2 ~]# grep '\<[0-9][0-9]\?\>' /etc/passwd

[root@DB2 ~]# grep '\<[0-9][0-9]\{0,1\}\>' /etc/passwd


5、显示/boot/grub/grub.conf中以至少一个空白字符开头的行;

[root@DB2 ~]# grep '^[[:space:]]\{1,\}' /boot/grub/grub.conf


6、显示/etc/rc.d/rc.sysinit文件中,以#开头,后面跟至少一个空白字符,而后又有至少一个非空白字符的行;

[root@DB2 ~]# grep --color '^#[[:space:]]\{1,\}[^[:space:]]\{1,\}' /etc/rc.d/rc.sysinit


7、找出netstat -tan命令执行结果中以'LISTEN'结尾的行;

[root@DB2 ~]# netstat -tan | grep --color 'LISTEN[[:space:]]*$'


8、添加用户bash, testbash, basher, nologin(SHELL为/sbin/nologin),而找出当前系统上其用户名和默认shell相同的用户;

[root@DB2 ~]# grep --color '^\([[:alnum:]]\{1,\}\):.*\1$' /etc/passwd


9、扩展题:新建一个文本文件,假设有如下内容:

He like his lover.

He love his lover.

He like his liker.

He love his liker.

找出其中最后一个单词是由此前某单词加r构成的行。

cat <<EOF> 2.txt

He like his lover.

He love his lover.

He like his liker.

He love his liker.

EOF

[root@DB2 ~]# grep --color '\(l..e\).*\1r' 2.txt


文本搜索利器:grep egrep fgrep


练习:使用扩展的正则表达式

10、显示当前系统上root、bin或halt用户的默认shell;

[root@Oracle ~]# grep -E "^(root|bin|halt):" /etc/passwd | cut -d: -f7文本搜索利器:grep egrep fgrep


11、找出/etc/rc.d/init.d/functions文件中某单词后跟一组小括号“()”行;

[root@Oracle ~]# grep -E -o "\<[[:alnum:]]+\>\(\)" /etc/rc.d/init.d/functions

文本搜索利器:grep egrep fgrep


12、使用echo命令输出一个路径,而后使用grep取出其基名;

echo "/etc/sysconfig/" | grep -o -E "[[:alnum:]]+/?"

[root@Oracle ~]# echo "/etc/sysconfig/" | grep -o -E "[^/]+/?$" | cut -d/ -f1

sysconfig

[root@Oracle ~]# echo "/etc/sysconfig/" | grep -o -E "[[:alnum:]]+/?"

etc/sysconfig/


13、找出ifconfig命令结果中的1-255之间的数字;

[root@Oracle ~]# ifconfig | grep -o -E --color "\<([1-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-5])\>"

文本搜索利器:grep egrep fgrep



14、挑战题:写一个模式,能匹配合理的ipv4地址;

cat << EOF > 5.txt 

192.168.1.1

127.0.0.1

10.127.5.1

202.96.128.166

202.96.128.255

255.255.255.255

239.0.1.25

240.1.1.1

0.0.0.1

EOF

[root@Oracle ~]# grep -o -E --color "\<([1-9]|[1-9][0-9]|1[0-9][0-9]|2[0-3][0-9])\>\.\<([0-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-5])\>\.\<([0-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-5])\>\.\<([0-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-4])\>" 5.txt 

文本搜索利器:grep egrep fgrep