python分析日志问题

hycrisk

有一个程序的日志size比较大，有快1G，如果日志不分割，想用分析python分析最近10分钟的内容，有什么好的方法吗？
Fri Oct 12 11:14:42 [rsSync] info DFM::findAll(): extent 4:38a12000 was empty, skipping ahead. ns:local.replset.minvalid
Fri Oct 12 13:42:15 [conn283] end connection 10.13.213.125:56466 (0 connections now open)
Fri Oct 12 16:59:57 [conn678] end connection 10.13.213.125:44162 (0 connections now open)
....
有什么方法不从文件的开头一行一行读取呢，可是不一行一行的读取，怎么知道是最近10分钟的日志呢？求解答！！

dyausma

不久前做过一个路由器日志分析的

不过还是分割了 用时间做key存在字典里

q1208c

我不太确定, 不过, 我相信 python 应该有 seek 这个功能. 你可能直接 seek到文件尾, 然后再向上seek.

如果你是每10分钟执行一次的话, 就简单了, 直接把上次打开时年字节数记录下, 下次直接 seek过去, 然后继续, 就OK了.

bikong0411

有seek不假

ghostwwl

reobj = re.compile('(?is)xxxx')
reobj.math 这个时候的math 和 re.math是不一样的 你自己查查去

这个时候math 有三个参数 第一个要匹配的字符 第二个参数 pos  第三个 endpos

你地明白了  读取固定的 然后通过偏移来匹配