情景
曾经有一同事问我,在linux下如何输出一个文本文件的第二列,文本内容不限。我不假思索地说用awk
啊。她追问只有这一种方式么?于是我仔细想了想,……
分析
既然内容不限,则可以自定义文件内容的格式,这样可以用的命令自然会多一些。
需求为输出文件第二列,则基本上有两种方式实现:
- 直接过滤第二列并输出;
- 将其他列删除,只剩下第二列;
因而,任何能直接输出特定列的命令,以及能够截取或删除其它列的命令都满足此需求。
示例文件
为了方便说明,列举几个示例文件:
cat test1.txt
1 zhangsan 15 hebei
2 lisi 17 jiangsu
3 wangwu 29 tianjin
4 zhaoliu 21 fujian
cat test2.txt
1:test001:15:hebei
2:test002:17:jiangsu
3:test003:29:tianjin
4:test004:21:fujian
方案
awk
awk自然是最容易想到的,它处理格式化的文本得心应手。
awk '{print $2}' test1.txt
zhangsan
lisi
wangwu
zhaoliu
使用-F
指定列(字段)分隔符。
awk -F ":" '{print $2}' test2.txt
test001
test002
test003
test004
如果文件只有两列,还可以使用$NF
,如awk '{print $NF}' test1.txt
。
awk还支持一些函数,同样可以将第二列提取出来,此处不再赘述。
cut
cut命令的默认字段分隔符是TAB
,可以使用-d
重新指定。 -f
列出指定字段。
cut -d " " -f 2 test1.txt
zhangsan
lisi
wangwu
zhaoliu
cut -d ":" -f 2 test2.txt
test001
test002
test003
test004
如果第二列的字符的起始和结束序号为固定值,如test2.txt,可以使用-c
参数,截取特定的字符序列。
cut -c 3-9 test2.txt
test001
test002
test003
test004
sed
sed采用的是第二种实现方式,即将其它列删除掉,利用后向引用
:
sed "s/^[^ ]* \([^ ]*\) [^ ]* [^ ]*/\1/g" test1.txt
zhangsan
lisi
wangwu
zhaoliu
sed "s/^[^:]*:\([^:]*\):[^:]*:[^:]*/\1/g" test2.txt
test001
test002
test003
test004
grep
在test1.txt中,第二列的前面和后面分别为数字空格和空格数字,所以可以利用正则表达式
将其输出出来。
grep -oP "(?<=[0-9] )[^ ]+(?= [0-9])" test1.txt
zhangsan
lisi
wangwu
zhaoliu
同理:
grep -oP "(?<=[0-9]:)[^:]+(?=:[0-9])" test2.txt
test001
test002
test003
test004
colrm
colrm命令可以删除标准输入中的指定列,但该命令中所定义的列指的是单个字符,这与常规对字段的定义不同,需注意。
格式如下:
colrm [start [stop]]
如果只指定start,则大于等于start的列均被删除;如果指定了start和stop,则大于等于start,小于等于stop的列被删除。
因此,此命令可处理第二个字段起始位置为固定值的test2.txt文件。
cat test2.txt | colrm 1 2 | colrm 8
test001
test002
test003
test004
read
read读取文件中的每行,将特定的列输出来。
while read a b c d ;do echo $b;done < test1.txt
zhangsan
lisi
wangwu
zhaoliu
IFS=":";while read a b c d ;do echo $b;done < test2.txt
test001
test002
test003
test004
shell命令替换
shell支持命令替换,通过两次命令替换,得到第二列:
while read line;do temp1=${line#* };temp2=${temp1%% *};echo $temp2; done < test1.txt
zhangsan
lisi
wangwu
zhaoliu
while read line;do temp1=${line#*:};temp2=${temp1%%:*};echo $temp2; done < test2.txt
test001
test002
test003
test004
总结
虽然不清楚她从哪里看到的这道题目,题目本身是何用意。但以一个问题,调动起了对linux多个命令及知识点的学习和总结,还是有价值的。
欢迎提出不同解法!
相关命令
- awk
- cut
- grep
- sed
- colrm
- read
- shell命令替换
- 后向引用
- 正则表达式