情景
曾經有一同事問我,在linux下如何輸出一個文本文件的第二列,文本內容不限。我不假思索地說用awk
啊。她追問只有這一種方式么?于是我仔細想了想,……
分析
既然內容不限,則可以自定義文件內容的格式,這樣可以用的命令自然會多一些。
需求為輸出文件第二列,則基本上有兩種方式實現:
- 直接過濾第二列并輸出;
- 將其他列刪除,只剩下第二列;
因而,任何能直接輸出特定列的命令,以及能夠截取或刪除其它列的命令都滿足此需求。
示例文件
為了方便說明,列舉幾個示例文件:
cat test1.txt
1 zhangsan 15 hebei
2 lisi 17 jiangsu
3 wangwu 29 tianjin
4 zhaoliu 21 fujian
cat test2.txt
1:test001:15:hebei
2:test002:17:jiangsu
3:test003:29:tianjin
4:test004:21:fujian
方案
awk
awk自然是最容易想到的,它處理格式化的文本得心應手。
awk '{print $2}' test1.txt
zhangsan
lisi
wangwu
zhaoliu
使用-F
指定列(字段)分隔符。
awk -F ":" '{print $2}' test2.txt
test001
test002
test003
test004
如果文件只有兩列,還可以使用$NF
,如awk '{print $NF}' test1.txt
。
awk還支持一些函數,同樣可以將第二列提取出來,此處不再贅述。
cut
cut命令的默認字段分隔符是TAB
,可以使用-d
重新指定。 -f
列出指定字段。
cut -d " " -f 2 test1.txt
zhangsan
lisi
wangwu
zhaoliu
cut -d ":" -f 2 test2.txt
test001
test002
test003
test004
如果第二列的字符的起始和結束序號為固定值,如test2.txt,可以使用-c
參數,截取特定的字符序列。
cut -c 3-9 test2.txt
test001
test002
test003
test004
sed
sed采用的是第二種實現方式,即將其它列刪除掉,利用后向引用
:
sed "s/^[^ ]* \([^ ]*\) [^ ]* [^ ]*/\1/g" test1.txt
zhangsan
lisi
wangwu
zhaoliu
sed "s/^[^:]*:\([^:]*\):[^:]*:[^:]*/\1/g" test2.txt
test001
test002
test003
test004
grep
在test1.txt中,第二列的前面和后面分別為數字空格和空格數字,所以可以利用正則表達式
將其輸出出來。
grep -oP "(?<=[0-9] )[^ ]+(?= [0-9])" test1.txt
zhangsan
lisi
wangwu
zhaoliu
同理:
grep -oP "(?<=[0-9]:)[^:]+(?=:[0-9])" test2.txt
test001
test002
test003
test004
colrm
colrm命令可以刪除標準輸入中的指定列,但該命令中所定義的列指的是單個字符,這與常規對字段的定義不同,需注意。
格式如下:
colrm [start [stop]]
如果只指定start,則大于等于start的列均被刪除;如果指定了start和stop,則大于等于start,小于等于stop的列被刪除。
因此,此命令可處理第二個字段起始位置為固定值的test2.txt文件。
cat test2.txt | colrm 1 2 | colrm 8
test001
test002
test003
test004
read
read讀取文件中的每行,將特定的列輸出來。
while read a b c d ;do echo $b;done < test1.txt
zhangsan
lisi
wangwu
zhaoliu
IFS=":";while read a b c d ;do echo $b;done < test2.txt
test001
test002
test003
test004
shell命令替換
shell支持命令替換,通過兩次命令替換,得到第二列:
while read line;do temp1=${line#* };temp2=${temp1%% *};echo $temp2; done < test1.txt
zhangsan
lisi
wangwu
zhaoliu
while read line;do temp1=${line#*:};temp2=${temp1%%:*};echo $temp2; done < test2.txt
test001
test002
test003
test004
總結
雖然不清楚她從哪里看到的這道題目,題目本身是何用意。但以一個問題,調動起了對linux多個命令及知識點的學習和總結,還是有價值的。
歡迎提出不同解法!
相關命令
- awk
- cut
- grep
- sed
- colrm
- read
- shell命令替換
- 后向引用
- 正則表達式