特殊格式的大文本文件处理

hitsubunnu

原帖由 cindymusic 于 2009-2-10 01:59 发表
_do部分根据性能要求，可以使用数据库,bsddb重写
class logParser:
    def __init__(self,filename):
        self._filename=filename


    def _do_init_db(self):
        if not hasattr(self,'_d ...

不懂 python

但是从代码长度看  还是perl 简单些

ynchnluiti

原帖由 hitsubunnu 于 2009-2-10 11:51 发表


不懂 python

但是从代码长度看  还是perl 简单些

对这段代码有同感

cindymusic

想减长度还不简单，就怕谁也看不懂。君不见有一行的python的p2p服务器代码。就是可读性太差。这方面本身比较没什么意思。做程序，可读性第一位，性能第二位，长度吗，无所谓拉

hitsubunnu

原帖由 cindymusic 于 2009-2-10 12:02 发表
想减长度还不简单，就怕谁也看不懂。君不见有一行的python的p2p服务器代码。就是可读性太差。这方面本身比较没什么意思。做程序，可读性第一位，性能第二位，长度吗，无所谓拉

你是来挑衅的

鉴定完毕

MMMIX

原帖由 cindymusic 于 2009-2-10 12:02 发表
想减长度还不简单，就怕谁也看不懂。君不见有一行的python的p2p服务器代码。就是可读性太差。这方面本身比较没什么意思。做程序，可读性第一位，性能第二位，长度吗，无所谓拉

长度当然有所谓了，长度越长，整个理解越困难，可能的 bug 越多。

Lonki

原帖由 cindymusic 于 2009-2-10 01:59 发表
_do部分根据性能要求，可以使用数据库,bsddb重写
class logParser:
    def __init__(self,filename):
        self._filename=filename


    def _do_init_db(self):
        if not hasattr(self,'_d ...

策略模式？

DQP

原帖由 cindymusic 于 2009-2-10 12:02 发表
想减长度还不简单，就怕谁也看不懂。君不见有一行的python的p2p服务器代码。就是可读性太差。这方面本身比较没什么意思。做程序，可读性第一位，性能第二位，长度吗，无所谓拉

这里指的是正常情况下的代码长度，
你说的那种情况不在讨论范围内

cindymusic

哈哈，原来是perl的地，闪人

其实什么语言都是一样的，无论是C,perl,python,java等
关键是算法，思路

本题关键是遍历，即然是巨文件，就要保证只遍历一次
由于是固定格式，思路应该是
（1）数据提取：将有用的数据取出来，这部分相对固定
（2）数据处理：对提取数据进行处理，无论是用程序、数据库、文件均可处理。根据所处情况而定。

哈哈，走人

cobrawgl

原帖由 cindymusic 于 2009-2-10 21:58 发表
哈哈，原来是perl的地，闪人

其实什么语言都是一样的，无论是C,perl,python,java等
关键是算法，思路

本题关键是遍历，即然是巨文件，就要保证只遍历一次
由于是固定格式，思路应该是
（1）数据提取： ...

ynchnluiti

原帖由 cindymusic 于 2009-2-10 21:58 发表
哈哈，原来是perl的地，闪人

其实什么语言都是一样的，无论是C,perl,python,java等
关键是算法，思路

本题关键是遍历，即然是巨文件，就要保证只遍历一次
由于是固定格式，思路应该是
（1）数据提取： ...

有道理