提取行中不同的字符串的行

blackold

发重了。


awk 居然不支持后引用，太烂了，不要用它了。

bmne

回复 10# blackold


大牛好

你太忙，没想到有时间出手。谢谢

实话实说。这两个命令效率慢的吓人。实战中运行结束要5个多小时（估计）。运行途中让我停止了

我没想到grep也会这么慢

bmne

回复 10# blackold


大牛

我这次的实战样本是  （每一行中）纯字母+空格，没有其它，就是稍大些（近15GB）。每一组字符串最长超不过7个字符。换言之，极端情况每一行最多共30个字符。

我运行前先dos2unix  然后 我前面必须LANG=C再运行。因我以前吃过亏，我已长记性。总之，前期该做的工作已准备好

然后，再运行你的命令的。同等条件下目前较理想的是1、2楼的awk  运行时间估计你也看到了

如果有点时间，麻烦你看看grep的那个（我自己认为它应该效率高些）。如果太忙，就到此吧。我凑合着用awk即可

不好意思

blackold

回复 15# bmne

对的。

要效率的话，最好不用正则。正则本身就是循环，尤其是后引用。

dahe_1984

行中（各列中）不同?

题目啥意思？我咋没看懂呢？
行不同，列也不同？

bmne

回复 17# dahe_1984


每一行的不同，各个字符串的不同
因为中间有空格，所以我括号说明了一下，同一行中的各列的不同
若再没看明白，就看看列举的数据

bmne

回复 19# 本友会机友会摄友会


知道你用心了，大牛级人物，也浪费脑细胞了。谢谢，辛苦了

老师只告诉我去买一瓶醋，突然半路遇到一个熟人，非要让我再买瓶酱油，可我没带钱。 不好意思，开个玩笑

（另，若非要让我说实话， @jason680    对这方面shell研究深）

dahe_1984

回复 7# bmne

$ time perl find.pl

1 2 3 4
a b c d

real    0m0.261s
user    0m0.031s
sys     0m0.030s