linux正則表達(dá)式awk詳解
awk和sed一樣是流式編輯器,它也是針對(duì)文檔中的行來操作的,一行一行的去執(zhí)行。awk比sed更加強(qiáng)大,它能做到sed能做到的,同樣也能做到sed不能做到的。awk常用來分段;
awk不用加任何參數(shù)就可以實(shí)現(xiàn) + ? * . | 這些特殊符號(hào);
1、截取文檔中的某個(gè)段
[root@yonglinux ~]# head -n2 passwd |awk -F: '{print $1}' root bin [root@yonglinux ~]# head -n2 passwd |awk -F: '{print $0}' root:x:0:0:root:/root:/bin/bash bin:x:1:1:bin:/bin:/sbin/nologin [root@yonglinux ~]# head -n2 passwd |awk -F: '{print $1,$3,$7}' root 0 /bin/bash bin 1 /sbin/nologin
-F 選項(xiàng)的作用是指定分隔符,如果不加-F指定,則以空格或者tab為分隔符。 Print為打印的動(dòng)作,用來打印出某個(gè)字段。$1為第一個(gè)字段,$2為第二個(gè)字段,依次類推,有一個(gè)特殊的那就是$0,它表示整行。
{ }內(nèi)可以打印多個(gè)字段$1,$3,$7 打印第1、3、7段,中間用逗號(hào)隔開;
打印分段默認(rèn)分隔符為空格,可以自定義分隔符,分隔符需要用雙引號(hào)括起來;也可以O(shè)FS定義輸出分隔符;
[root@localhost ~]# awk -F: '{print $3,$4}' 1.txt |head -5 0 0 1 1 2 2 3 4 4 7 [root@localhost ~]# awk -F: '{print $3":"$4}' 1.txt |head -5 0:0 1:1 2:2 3:4 4:7 [root@localhost ~]# awk -F: 'OFS="#"{print $3,$4}' 1.txt |head -5 0#0 1#1 2#2 3#4 4#7
[root@yonglinux ~]# head -n2 passwd |awk -F: '{print $1"#""@"$3"#"$7}' root#@0#/bin/bash bin#@1#/sbin/nologin
注意awk的格式,-F后緊跟單引號(hào),然后里面為分隔符,print的動(dòng)作要用 { } 括起來,否則會(huì)報(bào)錯(cuò)。print還可以打印自定義的內(nèi)容,但是自定義的內(nèi)容要用“”雙引號(hào)括起來。
2、匹配字符或字符串
[root@yonglinux ~]# awk -F: '$1~/me/' passwd games:x:12:100:games:/usr/games:/sbin/nologin [root@yonglinux ~]# awk -F: '$1~/user/' passwd user1:x:600:501::/home/user1:/bin/bash
可以讓某個(gè)段去匹配,~ 表示匹配的意思,以冒號(hào)分隔第一字段然后匹配//里的關(guān)鍵字;
[root@yonglinux ~]# awk -F: '/root/ {print $1,$3} /user/ {print $1,$3}' passwd root 0 operator 11 ftp 14 saslauth 499 user1 600
awk還可以多次匹配,如上例全文匹配包含root關(guān)鍵詞的行,再匹配包含user的行,打印所匹配的第1、3段。
3、條件操作符
判斷第3個(gè)字段為0的
[
root@yonglinux ~]# awk -F: '$3=="0"' passwd root:x:0:0:root:/root:/bin/bash [root@yonglinux ~]# awk -F: '$3==10' passwd uucp:x:10:14:uucp:/var/spool/uucp:/sbin/nologin
判斷第3個(gè)字段為10的并且打印該行的第7字段;
[root@yonglinux ~]# awk -F: '$3==10 {print $7}' passwd /sbin/nologin [root@yonglinux ~]# awk -F: '$3=="600"' passwd user1:x:600:501::/home/user1:/bin/bash
awk中是可以用邏輯符號(hào)判斷的,比如 ‘==' 就是等于,也可以理解為 ‘精確匹配' 另外也有 >, ‘>=, ‘<, ‘<=, ‘!= 等等,值得注意的是,在和數(shù)字比較時(shí),若把比較的數(shù)字用雙引號(hào)引起來后,那么awk不會(huì)認(rèn)為是數(shù)字,而認(rèn)為是字符,不加雙引號(hào)則認(rèn)為是數(shù)字。
示例,雙引號(hào)括起來認(rèn)為是字符;加單引號(hào)和不加則認(rèn)為是數(shù)字;
[root@yonglinux ~]# awk -F: '$3>"500"' passwd | sort -t: -k 3 -n shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown halt:x:7:0:halt:/sbin:/sbin/halt mail:x:8:12:mail:/var/spool/mail:/sbin/nologin vcsa:x:69:69:virtual console memory owner:/dev:/sbin/nologin sshd:x:74:74:privilege-separated ssh:/var/empty/sshd:/sbin/nologin dbus:x:81:81:system message bus:/:/sbin/nologin postfix:x:89:89::/var/spool/postfix:/sbin/nologin nobody:x:99:99:nobody:/:/sbin/nologin user1:x:600:501::/home/user1:/bin/bash
[root@yonglinux ~]# awk -F: '$3>500' passwd | sort -t: -k 3 -n user1:x:600:501::/home/user1:/bin/bash [root@yonglinux ~]# awk -F: '$3>'500'' passwd | sort -t: -k 3 -n user1:x:600:501::/home/user1:/bin/bash
!= 為不匹配,第7字段不等于/sbin/nologin的行,需要用雙引號(hào)括起來。
[root@yonglinux ~]# awk -F: '$7!="/sbin/nologin"' passwd root:x:0:0:root:/root:/bin/bash sync:x:5:0:sync:/sbin:/bin/sync shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown halt:x:7:0:halt:/sbin:/sbin/halt user1:x:600:501::/home/user1:/bin/bash mysql:x:27:27:MySQL Server:/var/lib/mysql:/bin/bash
除了針對(duì)某一個(gè)段的字符進(jìn)行邏輯比較外,還可以兩個(gè)段之間進(jìn)行邏輯比較。
示例,加雙引號(hào)之后把數(shù)字當(dāng)字符看;
[root@yonglinux ~]# awk -F: '$3>"5" && $3<"7"' passwd shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown vcsa:x:69:69:virtual console memory owner:/dev:/sbin/nologin user1:x:600:501::/home/user1:/bin/bash
示例,加單引號(hào)之后為數(shù)字比較;
[root@yong ~]# awk -F: '$3>'5' && $3<'7' {print }' passwd shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
另外還可以使用 && “并且”和 || “或者” 的意思。
示例,打印第3段大于第4段,并且第7段為/bin/bash的行;
[root@yonglinux ~]# awk -F: '$3>$4 && $7=="/bin/bash"' passwd user1:x:600:501::/home/user1:/bin/bash
示例,打印第3段小于第4段,或者第7段為/bin/bash的行;
[root@yonglinux ~]# awk -F: '$3<$4 || $7=="/bin/bash"' passwd root:x:0:0:root:/root:/bin/bash adm:x:3:4:adm:/var/adm:/sbin/nologin lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin mail:x:8:12:mail:/var/spool/mail:/sbin/nologin uucp:x:10:14:uucp:/var/spool/uucp:/sbin/nologin games:x:12:100:games:/usr/games:/sbin/nologin gopher:x:13:30:gopher:/var/gopher:/sbin/nologin ftp:x:14:50:ftp user:/var/ftp:/sbin/nologin user1:x:600:501::/home/user1:/bin/bash mysql:x:27:27:mysql server:/var/lib/mysql:/bin/bash
4、awk的內(nèi)置變量
awk常用的變量有:
NF :用分隔符分隔后一共有多少段
NR :行數(shù)
{print NR":"NF} 列出行號(hào),以冒號(hào)分隔,列出共有多少段;
[root@yonglinux ~]# head -5 passwd |awk -F: '{print NR":"NF}' 1:7 2:7 3:7 4:7 5:7 [root@yonglinux ~]# head -5 passwd |awk -F: '{print NF}' 7 7 7 7 7 [root@yonglinux ~]# head -5 passwd |awk -F: '{print NR}' 1 2 3 4 5 [root@yonglinux ~]# head -5 passwd |awk -F: '{print $NF}' /bin/bash /sbin/nologin /sbin/nologin /sbin/nologin /sbin/nologin
NF 表示是多少段,而$NF是最后一段的值, 而NR則是行號(hào)。
5、awk中的數(shù)學(xué)運(yùn)算
awk還可以對(duì)各個(gè)段的值進(jìn)行數(shù)學(xué)運(yùn)算:
[root@yonglinux ~]# awk -F: '{(tot=tot+$3)};END {print tot};' passwd 1720
這里的END要注意一下,表示所有的行都已經(jīng)執(zhí)行,這是awk特有的語法,其實(shí)awk連同sed都可以寫成一個(gè)腳本文件,而且有他們特有的語法,在awk中使用if判斷、for循環(huán)都是可以的。
示例,if判斷,如第一段的值為root,打印整行;
[root@yonglinux ~]# awk -F: '{if ($1=="root") print $0}' passwd root:x:0:0:root:/root:/bin/bash
示例,for循環(huán),定義sum變量,i值為第3段的值;求第3段的和;
[root@yonglinux ~]# sum=0;for i in `awk -F: '{print $3}' passwd`;do sum=$[($sum+$i)];done;echo $sum 1720
以上就是關(guān)于linux正則表達(dá)式awk的全部?jī)?nèi)容,希望對(duì)大家的學(xué)習(xí)有所幫助。
相關(guān)文章
javascript中使用正則表達(dá)式刪除前后空格的方法
去掉前后位空格的方法有很多種,下面腳本之家小編給大家分享使用js正則表達(dá)式如何刪除前后空格,感興趣的朋友跟著一起學(xué)習(xí)學(xué)習(xí)吧2015-09-09中文正則表達(dá)式匹配問題之正則表達(dá)式中文匹配使用方法
這篇文章主要介紹了中文正則表達(dá)式匹配問題之正則表達(dá)式中文匹配使用方法,本文給大家介紹的非常詳細(xì),具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2019-07-07