手机版
你好,游客 登录 注册
背景:
阅读新闻

Shell脚本应用之正则表达式详解

[日期:2019-08-16] 来源:Linux社区  作者:筱振 [字体: ]

通过Shell脚本应用(一)Shell脚本应用(二)Shell脚本应用(三)这几篇博文,我们已经掌握了Shell脚本的编写规则和各种语句的具体应用,但是实际生产环境中,Shell脚本通常与正则表达式、文本处理工具结合使用。我们就来认识一下“正则表达式(RE)”。

正则表达式概述

1.正则表达式的定义

正则表达式又称正规表达式、常规表达式。在代码中常简写为regex、regexp或RE。正则表达式是使用单个字符串来描述,匹配一系列符合某个句法规则的字符串。简单的说,正则表达式是一种匹配字符串的方法,通过一些特殊符号,实现快速查找、删除、替换某个特定字符串。

正则表达式作为一个模板,将某个字符模式与所搜索的字符串相匹配。其中由两部分组成:
1.普通字符:包括大小写字母、数字、标点符号及一些其他符号;
2. 元符号:是指那些在正则表达式中具有特殊意义的专用字符。

正则表达式一般用于脚本编程与文本编辑器。很多文本处理器与程序设计语言均支持正则表达式。正则表达式具备很强大的文本匹配功能,能够在文本海洋中快速高效地处理文本。

2.正则表达式用途

正则表达式对于系统管理员来说是非常重要的,系统运行过程中会产生大量的信息,这些信息中有些是非常重要的,有些仅仅是高中的信息。身为系统管理员如果直接查看这么多的信息数据,无法快速定位到非常重要的信息。如“用户账号登录失败”、“服务启动失败”等重要信息。这是便可以通过正则表达式快速提取“有问题”的信息,如此一来,可以将运维工作变得更加简单、方便。

目前很多软件也支持正则表达式,最常见的就是邮件服务器。在Internet中,垃圾广告、邮件等将会造成网络塞车,如果在服务器端将这些问题提前剔除的话,客户端就会减少很多不必要的带宽消耗。

正则表达式的字符串根据不同的严谨程度与功能分为:
1.基本正则表达式;
2.扩展正则表达式。

一、基础正则表达式

在Linux系统中常见的文件处理工具中grep与sed支持基础正则表达式,基础正则表达式以grep命令为例

基础正则表达式示例:

1)查找包含“the”的行
[root@localhost ~]# grep -n 'the' test.txt 

Shell脚本应用之正则表达式详解

grep命令的选项有:
* -n:表示显示行号;
* -i:表示不区分大小写;
* -v:表示反向查找。
2)查找不包含“the”的行
[root@localhost ~]# grep -vn 'the' test.txt

Shell脚本应用之正则表达式详解

3)查找以sh开头,以rt结尾,中间是i或o的字符
[root@localhost ~]# grep -n 'sh[io]rt' test.txt 

Shell脚本应用之正则表达式详解

4)查询oo前面不是w的字符串
[root@localhost ~]# grep -n '[^w]oo' test.txt 

Shell脚本应用之正则表达式详解

5)查询oo前面不是小写字母的字符串
[root@localhost ~]# grep -n '[^a-z]oo' test.txt 

Shell脚本应用之正则表达式详解

6)^匹配以某个字符开头的行。查询以the开头的字符串
[root@localhost ~]# grep -n '^the' test.txt 

Shell脚本应用之正则表达式详解

7)[^]匹配未包含的一个任意字符。查询不以字母开头的字符串
[root@localhost ~]# grep -n '^[^a-zA-Z]' test.txt 

Shell脚本应用之正则表达式详解

8)$匹配以某个字符结尾的行。查询以.结尾的字符串
[root@localhost ~]# grep -n '\.$' a.txt 
//其中小数点“.”具有特殊意义,所以需要使用转义字符“\”将具有特殊意义的字符转化为普通字符

Shell脚本应用之正则表达式详解

9)“.”匹配除\r\n外的任意一个字符。查询w与d之间包含两个字符的行
[root@localhost ~]# grep -n 'w..d' test.txt 

Shell脚本应用之正则表达式详解

10)查询包含连续o字母的行
[root@localhost ~]# grep -n 'ooo*' test.txt 
//“*”表示的是重复零个或多个前面的单字符

Shell脚本应用之正则表达式详解

11)查询以w开头以d结尾中间至少包含一个o的行
[root@localhost ~]# grep -n 'woo*d' test.txt 

Shell脚本应用之正则表达式详解

12)查询以w开头d结尾,中间的字符可有可无的行
[root@localhost ~]# grep -n 'w.*d' test.txt 

Shell脚本应用之正则表达式详解

13){n}匹配确定的n次。查询包含两个o的行
[root@localhost ~]# grep -n 'o\{2\}' test.txt 
//“{}”是特殊字符需要用“\”转义

Shell脚本应用之正则表达式详解

14)查询以w开头d结尾,中间包含2~5个o的行
[root@localhost ~]# grep -n 'wo\{2,5\}' test.txt 
//  {n,m}最少匹配n次且最多m次

Shell脚本应用之正则表达式详解

15)查询以w开头以d结尾,中间包含2个以上o的行
[root@localhost ~]# grep -n 'wo\{2,\}' test.txt 
// {n,}至少匹配n次

Shell脚本应用之正则表达式详解

基础正则表达式常见元字符总结

Shell脚本应用之正则表达式详解

二、扩展正则表达式

通常情况下会使用基础正则表达式就已经足够了,但是为了简化整个指令,需要使用范围更广的扩展正则表达式。

在Linux系统常见的文本处理工具中egrep与awk支持扩展正则表达式,egrep命令与grep命令的用法基本相似。

扩展正则表达式常见元字符总结

Shell脚本应用之正则表达式详解

正则表达式就简单介绍这么多,等以后有需要了,会实时更新的!

Linux公社的RSS地址https://www.linuxidc.com/rssFeed.aspx

本文永久更新链接地址https://www.linuxidc.com/Linux/2019-08/160117.htm

linux
本文评论   查看全部评论 (0)
表情: 表情 姓名: 字数

       

评论声明
  • 尊重网上道德,遵守中华人民共和国的各项有关法律法规
  • 承担一切因您的行为而直接或间接导致的民事或刑事法律责任
  • 本站管理人员有权保留或删除其管辖留言中的任意内容
  • 本站有权在网站内转载或引用您的评论
  • 参与本评论即表明您已经阅读并接受上述条款