Question

有没有办法使用bash删除某些输入CSV文件的最后四列？最后四列可以包含从一行到另一行的长度不同的字段，因此仅从每行的末尾删除一定数量的字符是不够的。

Answer 1

如果所有行都具有相同数量的字段，则剪切可以执行此操作;如果不是，则可以执行此操作。

cut -d, -f1-6 # assuming 10 fields

如果要控制输出分隔符，将打印出前6个字段--output-delimiter = string

awk -F , -v OFS=, '{ for (i=1;i<=NF-4;i++){ printf $i, }; printf "\n"}'

循环遍历多个字段-4的字段并打印出来。

Answer 2

cat data.csv | rev | cut -d, -f-5 | rev

rev会反转这些行，所以如果所有行都具有相同的列数并不重要，它将始终删除最后一行4.仅当最后4列不包含任何行时才有效逗号本身。

Answer 3

如果知道列数，可以使用cut。例如，如果您的文件有9列，并且逗号是您的分隔符：

cut -d',' -f -5

但是，这假设您的csv文件中的数据不包含任何逗号。 cut也会将引号内的逗号解释为分隔符。

Answer 4

awk -F, '{NF-=4; OFS=","; print}' file.csv

或者

awk -F, -vOFS=, '{NF-=4;print}' file.csv

将删除每行的最后4列。

Answer 5

awk one-liner：

awk -F, '{for(i=0;++i<=NF-5;)printf $i", ";print $(NF-4)}'  file.csv

使用awk over cut的优点是，您不必计算您拥有的列数以及要保留的列数。因为你想要的是删除最后4列。

看测试：

kent$  seq 40|xargs -n10|sed 's/ /, /g'           
1, 2, 3, 4, 5, 6, 7, 8, 9, 10
11, 12, 13, 14, 15, 16, 17, 18, 19, 20
21, 22, 23, 24, 25, 26, 27, 28, 29, 30
31, 32, 33, 34, 35, 36, 37, 38, 39, 40

kent$  seq 40|xargs -n10|sed 's/ /, /g' |awk -F, '{for(i=0;++i<=NF-5;)printf $i", ";print $(NF-4)}'
1,  2,  3,  4,  5,  6
11,  12,  13,  14,  15,  16
21,  22,  23,  24,  25,  26
31,  32,  33,  34,  35,  36

Answer 6

这可能适合你（GNU sed）：

sed -r 's/(,[^,]*){4}$//' file

Answer 7

这种糟糕的解决方案

awk -F, 'OFS=","{for(i=NF; i>=NF-4; --i) {$i=""}}{gsub(",,,,,","",$0);print $0}' temp.txt

Answer 8

当CVS文件的带引号的字段带有<逗号>字符时，上述任何方法都无法正常工作。因此，仅使用<逗号>字符作为字段分隔符有点困难。

以下两个帖子现在非常方便：

What's the most robust way to efficiently parse CSV using awk?
[U&L] How to delete the last column of a file in Linux（注意：这仅适用于GNU awk）

由于您使用的是GNU awk，因此可以执行以下两项操作之一：

$ awk -v FPAT='[^,]*|"[^"]+"' -v OFS="," 'NF{NF-=4}1'

或者通过任何awk，您都可以这样做：

$ awk 'BEGIN{ere="([^,]*|\042[^\042]+\042)"
             ere=","ere","ere","ere","ere"$"
       }
       {sub(ere,"")}1'

bash方法从csv文件中删除最后4列

8 个答案: