a亚洲精品_精品国产91乱码一区二区三区_亚洲精品在线免费观看视频_欧美日韩亚洲国产综合_久久久久久久久久久成人_在线区

首頁 > 編程 > C > 正文

linux之awk命令的用法

2020-01-26 15:47:15
字體:
來源:轉載
供稿:網友

先來一個例子:
文件a,統計文件a的第一列中是浮點數的行的浮點數的平均值。用awk來實現只需要一句話就可以搞定
$cat a
1.021 33
1#.ll   44
2.53 6
ss    7

awk 'BEGIN{total = 0;len = 0} {if($1~/^[0-9]+/.[0-9]*/){total += $1; len++}} END{print total/len}' a
(分析:$1~/^[0-9]+/.[0-9]*/表示$1與“/ /”里面的正則表達式進行匹配,若匹配,則total加上$1,且len自增,即數目加1.“^[0-9]+/.[0-9]*”是個正則表達式,“^[0-9]”表示以數字開頭,“/.”是轉義的意思,表示“.”為小數點的意思。“[0-9]*”表示0個或多個數字)

awk的一般語法格式為:
awk [-參數 變量] 'BEGIN{初始化}條件類型1{動作1}條件類型2{動作2}。。。。END{后處理}'
其中:BEGIN和END中的語句分別在開始讀取文件(in_file)之前和讀取完文件之后發揮作用,可以理解為初始化和掃尾。

(1)參數說明:
-F re:允許awk更改其字段分隔符
-v var=$v 把v值賦值給var,如果有多個變量要賦值,那么就寫多個-v,每個變量賦值對應一個-v
e.g. 要打印文件a的第num行到num+num1行之間的行,
awk -v num=$num -v num1=$num1 'NR==num,NR==num+num1{print}' a
-f progfile:允許awk調用并執行progfile程序文件,當然progfile必須是一個符合awk語法的程序文件。

(2)awk內置變量:
ARGC    命令行參數的個數
ARGV    命令行參數數組
ARGIND 當前被處理文件的ARGV標志符
e.g 有兩個文件a 和b
awk '{if(ARGIND==1){print "處理a文件"} if(ARGIND==2){print "處理b文件"}}' a b
文件處理的順序是先掃描完a文件,再掃描b文件

NR   已經讀出的記錄數
FNR    當前文件的記錄數
上面的例子也可以寫成這樣:
awk 'NR==FNR{print "處理文件a"} NR > FNR{print "處理文件b"}' a b
輸入文件a和b,由于先掃描a,所以掃描a的時候必然有NR==FNR,然后掃描b的時候,FNR從1開始計數,而NR則接著a的行數繼續計數,所以NR > FNR

e.g 要顯示文件的第10行至第15行
awk 'NR==10,NR==15{print}' a

FS   輸入字段分隔符(缺省為:space:),相當于-F選項
awk -F ':' '{print}' a    和   awk 'BEGIN{FS=":"}{print}' a 是一樣的

OFS輸出字段分隔符(缺省為:space:)
awk -F ':' 'BEGIN{OFS=";"}{print $1,$2,$3}' b
如果cat b為
1:2:3
4:5:6
那么把OFS設置成";"后就會輸出
1;2;3
4;5;6
(小注釋:awk把分割后的第1、2、3個字段用$1,$2,$3...表示,$0表示整個記錄(一般就是一整行))

NF:當前記錄中的字段個數
awk -F ':' '{print NF}' b的輸出為
3
3
表明b的每一行用分隔符":"分割后都3個字段
可以用NF來控制輸出符合要求的字段數的行,這樣可以處理掉一些異常的行
awk -F ':' '{if (NF == 3)print}' b

RS:輸入記錄分隔符,缺省為"/n"
缺省情況下,awk把一行看作一個記錄;如果設置了RS,那么awk按照RS來分割記錄
例如,如果文件c,cat c為
hello world; I want to go swimming tomorrow;hiahia
運行 awk 'BEGIN{ RS = ";" } {print}' c 的結果為
hello world
I want to go swimming tomorrow
hiahia
合理的使用RS和FS可以使得awk處理更多模式的文檔,例如可以一次處理多行,例如文檔d cat d的輸出為
1 2
3 4 5

6 7
8 9 10
11 12

hello
每個記錄使用空行分割,每個字段使用換行符分割,這樣的awk也很好寫
awk 'BEGIN{ FS = "/n"; RS = ""} {print NF}' d 輸出
2
3
1

ORS:輸出記錄分隔符,缺省為換行符,控制每個print語句后的輸出符號
awk 'BEGIN{ FS = "/n"; RS = ""; ORS = ";"} {print NF}' d 輸出
2;3;1

(3)awk讀取shell中的變量
可以使用-v選項實現功能
     $b=1
     $cat f
     apple

$awk -v var=$b '{print var, $var}' f
1 apple
至于有沒有辦法把awk中的變量傳給shell呢,這個問題我是這樣理解的。shell調用awk實際上是fork一個子進程出來,而子進程是無法向父進程傳遞變量的,除非用重定向(包括管道)
a=$(awk '{print $b, '$b'}' f)
$echo $a
apple 1

(4)輸出重定向

awk的輸出重定向類似于shell的重定向。重定向的目標文件名必須用雙引號引用起來。
$awk '$4 >=70 {print $1,$2 > "destfile" }' filename
$awk '$4 >=70 {print $1,$2 >> "destfile" }' filename

(5)awk中調用shell命令:

1)使用管道
awk中的管道概念和shell的管道類似,都是使用"|"符號。如果在awk程序中打開了管道,必須先關閉該管道才能打開另一個管道。也就是說一次只能打開一個管道。shell命令必須被雙引號引用起來。“如果打算再次在awk程序中使用某個文件或管道進行讀寫,則可能要先關閉程序,因為其中的管道會保持打開狀態直至腳本運行結束。注意,管道一旦被打開,就會保持打開狀態直至awk退出。因此END塊中的語句也會收到管道的影響。(可以在END的第一行關閉管道)”
awk中使用管道有兩種語法,分別是:
awk output | shell input
shell output | awk input

對于awk output | shell input來說,shell接收awk的輸出,并進行處理。需要注意的是,awk的output是先緩存在pipe中,等輸出完畢后再調用shell命令 處理,shell命令只處理一次,而且處理的時機是“awk程序結束時,或者管道關閉時(需要顯式的關閉管道)”
$awk '/west/{count++} {printf "%s %s/t/t%-15s/n", $3,$4,$1 | "sort +1"} END{close "sort +1"; printf "The number of sales pers in the western"; printf "region is " count "." }' datafile (解釋:/west/{count++}表示與“wes”t進行匹配,若匹配,則count自增)
printf函數用于將輸出格式化并發送給管道。所有輸出集齊后,被一同發送給sort命令。必須用與打開時完全相同的命令來關閉管道(sort +1),否則END塊中的語句將與前面的輸出一起被排序。此處的sort命令只執行一次。

在shell output | awk input中awk的input只能是getline函數。shell執行的結果緩存于pipe中,再傳送給awk處理,如果有多行數據,awk的getline命令可能調用多次。
$awk 'BEGIN{ while(("ls" | getline d) > 0) print d}' f

發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表

圖片精選

主站蜘蛛池模板: 精品91| 日韩电影在线播放 | 中文字幕在线观看www | 日本一区二区视频 | 亚洲美女网站 | av一区二区在线观看 | 久久99精品久久久久久国产越南 | 九九热精| 四虎国产精品成人免费影视 | 啪一啪操一操 | 激情欧美一区二区三区中文字幕 | 国产精品三级在线 | 国产精品成av人在线视午夜片 | 国产精品兄妹在线观看麻豆 | 日韩欧美在 | 日韩成人免费视频 | 天天操操| 久久久亚洲综合 | 99久久免费精品国产男女性高好 | 国产精品成人3p一区二区三区 | 欧洲成人在线视频 | 欧美日韩精品 | 日一区二区 | 国产精品久久久久久久久久免费 | 免费在线一区二区 | 亚洲一区二区中文字幕 | 99久久精品国产一区二区三区 | 自拍偷拍专区 | 五月激情综合 | 国产福利久久 | 国产精品福利网站 | 欧美一级欧美三级在线观看 | 欧美日韩国产综合在线 | 91男女视频| 中文在线a在线 | 亚洲黄色大片网站 | 欧美性猛交久久久乱大交小说 | 夜夜躁狠狠躁夜躁2021鲁大师 | 亚洲一区二区三区高清 | 日韩视频一区二区三区 | 国产精拍 |