Linux基础命令-正则表达式和通配符
正则表达式和通配符
一、正则表达式
1.正则表达式概念
1.REGEXP: Regular Expressions,由一类特殊字符及文本字符所编写的模式,
其中有些字符(元字符)不表示字符字面意义,而表示控制或通配的功能
2.程序支持:grep,sed,awk,vim, less,nginx,varnish等
3.分两类:
基本正则表达式:BRE
扩展正则表达式:ERE
grep -E, egrep
4.正则表达式引擎:
采用不同算法,检查处理正则表达式的软件模块
PCRE(Perl Compatible Regular Expressions)
5.元字符分类:字符匹配、匹配次数、位置锚定、分组
6.man 7 regex
2.字符匹配
字符匹配:
. 匹配任意单个字符
[] 匹配指定范围内的任意单个字符,示例:[wang] [0-9] [a-z] [a-zA-Z]
[^] 匹配指定范围外的任意单个字符
[:alnum:] 字母和数字
[:alpha:] 代表任何英文大小写字符,亦即 A-Z, a-z
[:lower:] 小写字母 [:upper:] 大写字母
[:blank:] 空白字符(空格和制表符)
[:space:] 水平和垂直的空白字符(比[:blank:]包含的范围广)
[:cntrl:] 不可打印的控制字符(退格、删除、警铃...)
[:digit:] 十进制数字 [:xdigit:]十六进制数字
[:graph:] 可打印的非空白字符
[:print:] 可打印字符
[:punct:] 标点符号
3.匹配次数
匹配次数:用在要指定次数的字符后面,用于指定前面的字符要出现的次数
* 匹配前面的字符任意次,包括0次
贪婪模式:尽可能长的匹配
.* 任意长度的任意字符
\? 匹配其前面的字符0或1次
\+ 匹配其前面的字符至少1次
\{n\} 匹配前面的字符n次
\{m,n\} 匹配前面的字符至少m次,至多n次
\{,n\} 匹配前面的字符至多n次
\{n,\} 匹配前面的字符至少n次
4.位置锚定
位置锚定:定位出现的位置
^ 行首锚定,用于模式的最左侧
$ 行尾锚定,用于模式的最右侧
^PATTERN$ 用于模式匹配整行
^$ 空行
^[[:space:]]*$ 空白行
\< 或 \b 词首锚定,用于单词模式的左侧
\> 或 \b 词尾锚定,用于单词模式的右侧
\<PATTERN\> 匹配整个单词
5.分组
1.分组:\(\) 将一个或多个字符捆绑在一起,当作一个整体处理,如:\(root\)\+
2.分组括号中的模式匹配到的内容会被正则表达式引擎记录于内部的变量中,这些
变量的命名方式为: \1, \2, \3, ...
3.\1 表示从左侧起第一个左括号以及与之匹配右括号之间的模式所匹配到的字符
4.示例: \(string1\(string2\)\)
\1 :string1\(string2\)
\2 :string2
6.后向引用
1.后向引用:引用前面的分组括号中的模式所匹配字符,而非模式本身
2.或者:\|
示例:a\|b a或b
C\|cat C或cat
\(C\|c\)at Cat或cat
7.扩展正则表达式
egrep = grep -E
egrep [OPTIONS] PATTERN [FILE...]
1.字符匹配:
. 任意单个字符
[] 指定范围的字符
[^] 不在指定范围的字符
2.次数匹配:
* 匹配前面字符任意次
? 0或1次
+ 1次或多次
{m} 匹配m次
{m,n} 至少m,至多n次
3.位置锚定:
^ 行首
$ 行尾
\<, \b 语首
\>, \b 语尾
4.分组:
()
后向引用:\1, \2, ...
5.或者:
a|b a或b
C|cat C或cat
(C|c)at Cat或cat
二、通配符
1.通配符
通配符是shell在做PathnameExpansion时用到的。说白了一般只用于文件名匹配,
它是由shell解析的,比如find,ls,cp,mv等。
2.Shell常见通配符
3.shell Meta字符(元字符)
shell 除了有通配符之外,还有一系列自己的其他特殊字符。
字符 说明
IFS 由 <space> 或 <tab> 或 <enter> 三者之一组成(我们常用 space )
CR 由 enter> 产生
= 设定变量
$ 取变量值或取运算值
> 重定向 stdout
< 重定向 stdin
| 管道符号
& 重导向 file descriptor ,或将命令置于背景执行
( ) 将其内的命令置于 nested subshell 执行,或用于运算或命令替换
{ } 将其内的命令置于 non-named function 中执行,或用在变量替换的界定范围
; 在前一个命令结束时,而忽略其返回值,继续执行下一个命令
&& 在前一个命令结束时,若返回值为 true,继续执行下一个命令
|| 在前一个命令结束时,若返回值为 false,继续执行下一个命令
! 运算意义上的非(not)的意思
# 注释,常用在脚本中
\ 转移字符,去除其后紧跟的元字符或通配符的特殊意义
4.转义字符
有时候,我们想让 通配符,或者元字符 变成普通字符,不需要使用它。
那么这里我们就需要用到转义符了。 shell提供转义符有三种。
字符 说明
‘’(单引号) 硬转义,其内部所有的shell 元字符、通配符都会被关掉。
“”(双引号) 软转义,其内部只允许出现特定的shell 元字符:$用于参数替换 `(反单引号,esc键下面)用于命令替换
\(反斜杠) 又叫转义,去除其后紧跟的元字符或通配符的特殊意义