Linux学习笔记(三)

2018/09/16 Linux

Linux之正则表达式,awk

正则表示法汇总

RE 字符 意义与范例
^word 意义:待搜寻的字串(word)在行首! 范例:搜寻行首为 # 开始的那一行,并列出行号grep -n ‘^#’ regular_express.txt
word$ 意义:待搜寻的字串(word)在行尾! 范例:将行尾为 ! 的那一行列印出来,并列出行号grep -n ‘!$’ regular_express.txt
. 意义:代表『一定有一个任意字节』的字符! 范例:搜寻的字串可以是 (eve) (eae) (eee) (e e), 但不能仅有 (ee) !亦即 e 与 e 中间『一定』仅有一个字节,而空白字节也是字节!grep -n ‘e.e’ regular_express.txt
\ 意义:跳脱字符,将特殊符号的特殊意义去除! 范例:搜寻含有单引号 ‘ 的那一行!grep -n ' regular_express.txt
* 意义:重复零个到无穷多个的前一个 RE 字符 范例:找出含有 (es) (ess) (esss) 等等的字串,注意,因为 * 可以是 0 个,所以 es 也是符合带搜寻字串。另外,因为 * 为重复『前一个 RE 字符』的符号, 因此,在 * 之前必须要紧接著一个 RE 字符喔!例如任意字节则为 『.』 !grep -n ‘ess’ regular_express.txt
[list] 意义:字节集合的 RE 字符,里面列出想要撷取的字节! 范例:搜寻含有 (gl) 或 (gd) 的那一行,需要特别留意的是,在 [] 当中『谨代表一个待搜寻的字节』, 例如『 a[afl]y 』代表搜寻的字串可以是 aay, afy, aly 即 [afl] 代表 a 或 f 或 l 的意思!grep -n ‘g[ld]’ regular_express.txt
[n1-n2] 意义:字节集合的 RE 字符,里面列出想要撷取的字节范围! 范例:搜寻含有任意数字的那一行!需特别留意,在字节集合 [] 中的减号 - 是有特殊意义的,他代表两个字节之间的所有连续字节!但这个连续与否与 ASCII 编码有关,因此,你的编码需要配置正确(在 bash 当中,需要确定 LANG 与 LANGUAGE 的变量是否正确!) 例如所有大写字节则为 [A-Z]grep -n ‘[A-Z]’ regular_express.txt
[^list] 意义:字节集合的 RE 字符,里面列出不要的字串或范围! 范例:搜寻的字串可以是 (oog) (ood) 但不能是 (oot) ,那个 ^ 在 [] 内时,代表的意义是『反向选择』的意思。 例如,我不要大写字节,则为 [^A-Z]。但是,需要特别注意的是,如果以 grep -n [^A-Z] regular_express.txt 来搜寻,却发现该文件内的所有行都被列出,为什么?因为这个 [^A-Z] 是『非大写字节』的意思, 因为每一行均有非大写字节,例如第一行的 “Open Source” 就有 p,e,n,o…. 等等的小写字grep -n ‘oo[^t]’ regular_express.txt
{n,m} 意义:连续 n 到 m 个的『前一个 RE 字符』 意义:若为 {n} 则是连续 n 个的前一个 RE 字符, 意义:若是 {n,} 则是连续 n 个以上的前一个 RE 字符! 范例:在 g 与 g 之间有 2 个到 3 个的 o 存在的字串,亦即 (goog)(gooog)grep -n ‘go{2,3}g’ regular_express.txt

awk

awk 是『以行为一次处理的单位』, 而『以栏位为最小的处理单位』。

变量名称 代表意义
NF 每一行 ($0) 拥有的栏位总数
NR 目前 awk 所处理的是『第几行』数据
FS 目前的分隔字节,默认是空白键
[root@www ~]# last -n 5| awk '{print $1 "\t lines: " NR "\t columns: " NF}' 
root     lines: 1        columns: 10 
root     lines: 2        columns: 10 
root     lines: 3        columns: 10 
dmtsai   lines: 4        columns: 10 
root     lines: 5        columns: 9 # 注意喔,在 awk 内的 NR, NF 等变量要用大写,且不需要有钱字号 $ 啦!`

逻辑运算字节

既然有需要用到 “条件” 的类别,自然就需要一些逻辑运算罗~例如底下这些:

运算单元 代表意义
> 大於
< 小於
>= 大於或等於
<= 小於或等於
== 等於
!= 不等於

组合示例

`[root@www ~]# cat pay.txt | \ 
> awk 'NR==1{printf "%10s %10s %10s %10s %10s\n",$1,$2,$3,$4,"Total" } NR>=2{total = $2 + $3 + $4 printf "%10s %10d %10d %10d %10.2f\n", $1, $2, $3, $4, total}'       
Name        1st        2nd        3th      Total      
VBird      23000      24000      25000   72000.00     
DMTsai      21000      20000      23000   64000.00      
Bird2      43000      42000      41000  126000.00`

Search

    Table of Contents