如何删除大文件的末尾几行？（效率优先，文件有几十G）

lucash

找到了是这个

dd of=urfile seek=1 bs=$(($(stat -c%s urfile)-$(tail -1 urfile|wc -c)))

flw

原帖由 lucash 于 2009-10-15 16:45 发表
找到了是这个

dd of=urfile seek=1 bs=$(($(stat -c%s urfile)-$(tail -1 urfile|wc -c)))

其实这个不是效率最高的。

用 truncate 效率应该还可以更高（如果不想要备份的话）。

MYSQLER

原帖由 flw 于 2009-10-15 17:04 发表

其实这个不是效率最高的。

用 truncate 效率应该还可以更高（如果不想要备份的话）。

这个怎么用？只知道sql有truncate

haimming

高手说说吧

lucash

大家等你的答案呢。不知道truncate怎么用阿。
不会跟数据库里的那个truncate一样吧

cjaizss

用C语言我可以写一个效率高的，但是用shell我不会写。
可以用truncate,关键在怎么确定最后几行，用C语言从后往前读。

MYSQLER

原帖由 cjaizss 于 2009-10-15 20:31 发表
用C语言我可以写一个效率高的，但是用shell我不会写。
可以用truncate,关键在怎么确定最后几行，用C语言从后往前读。

C的我也想看看，顺便向老大学习

lucash

写一个嘛，让咱们留着哪天备用阿

ruifox

1. new=`tail -10 file|wc -c|awk '{print $1}'`

复制代码

##new_为最后10行所占的字节数

1. size=`l file|awk '{printf "%d\n",$5-'$new'}'`

复制代码

##size为整个文件去掉最后10行的大小

1. eho "dd if=file of=new bs=$size count=1"
   
2. eval "dd if=file of=file.new bs=$size count=1"

复制代码

##count=1表示只处理一个block，block的大小为size