请教：csv文件中的双引号和逗号处理

voipexplore

万能的cu shell版，给我个答案吧：
我有一个csv的文件要处理，格式如下吧：
1,"2009/01/05","name1","           6,301","    13,459,138"
2,"2009/02/05","name2","           6,302","    23,459,138"
最终要处理成：
1,2009/01/05,name1,6301,13459138
2,2009/02/05,name2,6302,23459138

也就是：
（1）如果双引号中有逗号，去掉逗号
（2）去掉所有的双引号，最终只使用逗号分隔

有时候第二列、第三列没有双引号的，有时候有
而第四列则是，如果中间有逗号，则有双引号，没有逗号，则没有双引号

我理解的csv格式是：
（1）列之间使用逗号分隔
（2）如果单列里的内容有逗号，则用双引号括起该列，以区别列分隔符的逗号

如何处理这种csv格式？请教各位大侠

haimming

cat urfile | tr -d "\"\t "

1. 
   
2. [rockfall@tmp]$cat b
   
3. 1,"2009/01/05","name1","           6,301","    13,459,138"
   
4. 2,"2009/02/05","name2","           6,302","    23,459,138"
   
5. [rockfall@tmp]$cat b |tr -d "\"\t "
   
6. 1,2009/01/05,name1,6,301,13,459,138
   
7. 2,2009/02/05,name2,6,302,23,459,138
   
8. [rockfall@tmp]$
   
9. 
   

复制代码

voipexplore

。。。。。。。。。。。。。。。。。。。
双引号是去掉了，列分隔符也乱掉了

voipexplore

忘记说了 其实我文件里实际的name是日文字符：ﾌｺﾘｳ  之类的。
所以 sed 's/\(\"\)(a-zA-Z1-9,)*\(\"\)/\2/g' 之类的匹配双引号中间的字符是不行的

[ 本帖最后由 voipexplore 于 2009-2-27 20:21 编辑 ]

haimming

不好意，没认真看，现在只想到了个很恶心的
sed -r 's/"([^",]*)"/\1/g;s/" *([^,]*),([^,]*)*"/\1\2/;s/" *([^,]*),([^,]*),([^,]*)"/\1\2\3/' urfile
如果格式只是这样可能没问题

justlooks

这个问题比较有意思，我只会这种笨办法
sed -r 's/"([^"]+),([^"]+),([^"]*)"/\1\2\3/g;s/"([^"]+),([^"]*)"/\1\2/g;s/"([^"]*)"/\1/g;s/\s+//g'
不知道有没有更好的解决办法

ly5066113

sed -r ':a;s/("[^"]+),([^"]+")/\1\2/g;ta;s/[" \t]//g' urfile

haimming

sed 's/,//g;s/\s//g;s/\"\+/,/g;s/.$//' urfile
这个没那么恶心了

1. 
   
2. [rockfall@tmp]$sed 's/,//g;s/\s//g;s/\"\+/,/g;s/.$//' urfile
   
3. 1,2009/01/05,name1,6301,13459138
   
4. 2,2009/02/05,name2,6302,23459138
   
5. 
   

复制代码

voipexplore

@ly5066113

谢谢 完全正确啊 多谢

也谢谢haimming  justlooks，不过有结果不对，可能是中间有日文的原因吧，结果没再深究。

voipexplore

@haimming
多谢 你最后的也是正确的