免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12
最近访问板块 发新帖
楼主: 小星2
打印 上一主题 下一主题

问大家一个问题,当读取一个超过100万行文本文件时 [复制链接]

论坛徽章:
0
11 [报告]
发表于 2008-08-24 18:33 |只看该作者
原帖由 andylei 于 2008-8-22 08:43 发表
open(F,"file")

while ()
{
   ...... #what you want to do!
}

你用@list =  这样把整个文件都直接读进内存,很慢的。用while()是一行一行循环读该文件中没行纪录,会快很多。



谢谢。 我想读 第 1000行 到  2000行,这个怎么表达?

论坛徽章:
0
12 [报告]
发表于 2008-08-24 18:34 |只看该作者
原帖由 flw 于 2008-8-21 13:04 发表
man split

split -l 1 /path/to/urfile



有点高深,看不懂。

我想读取  第1000,到第2000行, 怎么处理?

论坛徽章:
23
15-16赛季CBA联赛之吉林
日期:2017-12-21 16:39:27白羊座
日期:2014-10-27 11:14:37申猴
日期:2014-10-23 08:36:23金牛座
日期:2014-09-30 08:26:49午马
日期:2014-09-29 09:40:16射手座
日期:2014-11-25 08:56:112015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:49:0315-16赛季CBA联赛之山东
日期:2017-12-21 16:39:1915-16赛季CBA联赛之广东
日期:2016-01-19 13:33:372015亚冠之山东鲁能
日期:2015-10-13 09:39:062015亚冠之西悉尼流浪者
日期:2015-09-21 08:27:57
13 [报告]
发表于 2008-08-24 18:42 |只看该作者
原帖由 小星2 于 2008-8-24 18:34 发表



有点高深,看不懂。

我想读取  第1000,到第2000行, 怎么处理?


split 是 shell 命令,大家在猜你要做什么。

while (<F>){
    print if $. >= 1000 && $. <= 2000
}

论坛徽章:
0
14 [报告]
发表于 2008-08-25 16:15 |只看该作者
原帖由 小星2 于 2008-8-24 18:33 发表



谢谢。 我想读 第 1000行 到  2000行,这个怎么表达?


自己写个子例程吧:

sub read_file
{
    my $file_name = @_[0];
    my @file_list = undef;

    open (FILE,"$file_name");
    while (<FILE>)
    {
        push(@file_list,$_);
    }
    close (FILE);

     for (my $i=1000;$i < 2000;$i++)
    {
        print @file_list[$i];
    }

}

&read_file("./xxx");

我暂时只能想到这个方法,如果有哪位高手能有好的方法希望共享一下,谢谢了。因为觉得这个方法如果文件大的话可能会慢。

[ 本帖最后由 andylei 于 2008-8-25 16:17 编辑 ]

论坛徽章:
0
15 [报告]
发表于 2008-08-25 16:18 |只看该作者
13  楼的不是写的很简捷了嘛

论坛徽章:
0
16 [报告]
发表于 2008-08-25 17:38 |只看该作者
嗯,很多人都是被迫用perl写东西,然后就有了很多类型C风格的perl代码了。

论坛徽章:
0
17 [报告]
发表于 2008-08-27 18:04 |只看该作者
说的好,不过至少不难看。
yangfengwait 该用户已被删除
18 [报告]
发表于 2008-09-02 11:35 |只看该作者
提示: 作者被禁止或删除 内容自动屏蔽
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP