Linux中正则表达式和字符串的查询、替换(tr/diff/wc/find)

目录

​​正则表达式​​

​​基本正则表达式​​

​​扩展正则表达式​​

​​grep​​

​​tr​​

​​diff​​

​​du​​

​​wc​​

​​find​​

正则表达式

正则表达式，又称正规表示法、常规表示法（ Regular Expression，在代码中常简写为regex、regexp或RE），计算机科学的一个概念。正则表达式使用单个字符串来描述、匹配一系列符合某个句法规则的字符串。正则表达式可以用来检查一个串是否含有某种子串、将匹配的子串替换或者从某个串中取出符合某个条件的子串等。在很多文本编辑器里，正则表达式通常被用来检索、替换那些符合某个模式的文本。

正则表达式分为 基本正则表达式 和 扩展正则表达式。

元字符就是指那些在正则表达式中具有特殊意义的专用字符

基本正则表达式

字符匹配

次数匹配

位置匹配

分组及引用

1、过滤 /etc/passwd 中以s或S开头的行
grep "^[sS]" /etc/passwd
2、过滤 /etc/passwd　中不以小写字母开头的行
grep "^[^a-z]" /etc/passwd
3、过滤 /etc/passwd 中以nologin结尾的行
grep "nologin$" /etc/passwd
4、过滤 /etc/passwd 中以空格开头的行
grep "^ " /etc/passwd
5、过滤 /etc/passwd 中的空行
grep "^$" /etc/passwd

6、过滤 /etc/passwd 中以r开头的行，r后面可以跟0个或任意多个o(也就是说这行的第一个字符必须是r，这行还可以有0个或任意个o)
grep "^ro*" /etc/passwd
7、过滤 /etc/passwd 中以r开头的行，r后面必须跟1个或1个以上的字符(也就是这行第一个字符必须是r，而且这行必须还有其他字符，空格也算字符)
grep "^r." /etc/passwd
8、过滤 /etc/passwd 中r后跟了任意字符，任意字符后跟了 h 的行 (也就是这一行必须得有r和h，而且h必须在r的后面)
grep "r.*h" /etc/passwd

9、过滤/etc/passwd 中，包含 root 单词的行，并且root不和其他字符相邻(空格不算)
grep "\<root\>" /etc/passwd
10、过滤 /etc/passwd 中 r后跟了o  o出现0次或者1此的行
grep "ro\?" /etc/passwd
11、过滤 /etc/passwd 中 r后跟了o  o出现至少一次的行
grep "ro\+" /etc/passwd
12、过滤 /etc/passwd 中， r后跟了o，o只出现2次的行
grep "ro\{2\}" /etc/passwd
13、过滤 /etc/passwd 中, r 后跟了o ，o出现至少1次至多2次的行
grep "ro\{1,2\}" /etc/passwd
14、 过滤 /etc/passwd　中，ｒ后跟了o,  o 至少出现2次的行
grep "ro\{2,\}" /etc/passwd

扩展正则表达式

扩展正则表达式使用 egrep 或者 grep  -E 

1、匹配 /etc/passwd 中r后紧跟了o，o出现0次或者1次的行
egrep "ro?" /etc/passwd
2、匹配 /etc/passwd 中r后紧跟了o，o出现至少1次至多2次的行
egrep "ro{1,2}" /etc/passwd
3、匹配 /etc/passwd 中r后紧跟了o，o出现至少1次的行
egrep "ro+" /etc/passwd
4、匹配 /etc/passwd 中出现root或者halt的行
egrep "root|halt" /etc/passwd
5、匹配 /etc/passwd 中出现root on或者halt failed的行
egrep "(root on|halt failed)" /etc/passwd

grep

Linux中grep工具的使用

tr

eg:  tr  'A-Z'  'a-z'   <  passwd   将passwd中 A-Z 的大写字符全部替换成 a-z 的小写字符，但是并不会改变passwd中的数据

tr  'A-Z'  'a-z'  < passwd  >  passwd2   将passwd中 A-Z 的大写字符全部替换成 a-z 的小写字符，然后写入到 passwd2 中

diff

diff 

这里表示文件passwd和文件passwd2第2行、第4、5行和第7行都不同，并且分别打印出文件1和文件3的第2、4 、5、7 行

diff  passwd    passwd2   > diff.path               将 passwd 和 passwd2 的不同写入到 diff.path文件中

patch  -b  passwd2  diff.path                        用 diff.path文件修改 passwd2 中的不同，最后得到的 passwd2 文件和 passwd 文件一模一样

du

du ： 查看目录或文件占用大小

• 不加参数时，显示当前文件夹下的所有文件夹的磁盘使用情况(包括递归文件夹内的文件夹)
• -a  给指定文件夹内的所有文件显示磁盘使用情况( 包括层层递归文件 )
• -s  仅显示总计，即当前目录的大小
• -h 以人性化方式显示
• du -sh    /tmp/test     或者      du -sh  /tmp/test/                      显示test文件夹的占用大小
• du -sh   /tmp/test/*      显示test文件夹内的所有文件和文件夹的占用大小 (不包括递归文件)
• du -ah  /tmp/test         显示test文件夹内的所有文件的占用大小（包括递归文件）

wc

wc ： 统计文件中的数据 

• -  l 统计行数
• - c 统计字节数
• - w 统计字数
• - m 统计字符数

统计文件夹内文件的个数:         ls -l | grep "^-" | wc -l
统计文件夹内包括递归文件的个数:   ls -lR | grep "^-" | wc -l
统计文件夹内文件夹的个数 :     ls -l | grep "^d" | wc -l
统计文件夹内包括递归文件夹的个数:   ls -lR | grep "^d" | wc -l

find

find ：查找文件或文件夹

• 根据文件名查找     find  /tmp  -name  abc     查找/tmp目录下名字叫做abc的文件，它会遍历tmp目录下的所有文件及文件夹
• 根据文件大小查找   find /tmp   -size    -1M       +号表示大于  -号表示小于
• -name   通过文件名查找
• -size     通过文件大小查找
• -type    通过文件类型查找
• -user    通过文件用户查找
• -perm  通过权限查找
• 因为find对管道支持比较弱，所以可以借助exec扩展选项
• find /etc  -size  +1M  -exec  ls  -lh  {}  \;               {}代表find查找到的内容
• find /etc -size +1M   -exec  cp  {}   /tmp/test/  \;
• find  /  -type  -newermt  '2018 '  !   -newermt   ''

find命令按时间查找文件

find /etc -atime  3    #查找/etc目录三天之内查看过的文件
find /etc -mtime -3    #查找/etc目录三天之内修改过的文件 
find /etc mtime  +3    #查找三天前修改过的文件 

find /etc -type f -newermt '2014-1-1 00:00:00' ! -newermt '2015-1-1 00:00:00'  #查找在2014-1-1 00:00:00和 2015-1-1 00:00:00 之间的文件