perl 读取文件报“OUT OF MEMORY",急！！！

hairboy168

谢谢大家的真诚的回复，这个问题我们已经找到原因了：
1、out of memory是因为Aix的系统设置问题，重新unlimit一下文件系统的大小即可

2、另一个关于循环的问题，最后我们也查到这个100MB的文件，只有一行数据，无论采用什么方式读文件都是读取整个文件，导致我们程序无法处理，已经与AS400主机人员协调解决。

再次谢谢大家！！

blackold

mark

billypeng

原帖由 hairboy168 于 2009-9-28 10:13 发表
谢谢大家的真诚的回复，这个问题我们已经找到原因了：
1、out of memory是因为Aix的系统设置问题，重新unlimit一下文件系统的大小即可

2、另一个关于循环的问题，最后我们也查到这个100MB的文件，只有一行数 ...

只有一行数据的，可以用：
read FILEHANDLE,SCALAR,LENGTH,OFFSET
这个函数读，每次只读指定大小。

dugu072

一开始就告诉lz了，数据应该是非文本的，一次读入所有的导致的，也告诉lz了，用 read / sysread 可以解决，但是 lz 完全不知道自己解决问题，反而去责怪厂商、系统的问题，哎，不过这年头，确实，客户至上，不论谁错，都是乙方的错！

hairboy168

呵呵，多谢，再请教一下楼上的read函数是否一块一块自动往下读？？读取一个整文件，是否需要一个循环去控制（aix环境）？？

[ 本帖最后由 hairboy168 于 2009-9-28 21:17 编辑 ]

dugu072

Typical case of using read,
     while( 1 ) {
          $bytes = read( $hFile, $buffer, 50, length( $buffer ));
          last unless $bytes > 0;
     }

read FILEHANDLE,SCALAR,LENGTH,OFFSET
read FILEHANDLE,SCALAR,LENGTH
        Attempts to read LENGTH *characters* of data into variable
        SCALAR from the specified FILEHANDLE. Returns the number of
        characters actually read, 0 at end of file, or undef if there
        was an error (in the latter case $! is also set). SCALAR will be
        grown or shrunk so that the last character actually read is the
        last character of the scalar after the read.

        An OFFSET may be specified to place the read data at some place
        in the string other than the beginning. A negative OFFSET
        specifies placement at that many characters counting backwards
        from the end of the string. A positive OFFSET greater than the
        length of SCALAR results in the string being padded to the
        required size with "\0" bytes before the result of the read is
        appended.

        The call is actually implemented in terms of either Perl's or
        system's fread() call. To get a true read(2) system call, see
        "sysread".

        Note the *characters*: depending on the status of the
        filehandle, either (8-bit) bytes or characters are read. By
        default all filehandles operate on bytes, but for example if the
        filehandle has been opened with the ":utf8" I/O layer (see
        "open", and the "open" pragma, open), the I/O will operate on
        UTF-8 encoded Unicode characters, not bytes. Similarly for the
        ":encoding" pragma: in that case pretty much any characters can
        be read.

[ 本帖最后由 dugu072 于 2009-9-28 22:13 编辑 ]

hairboy168

楼上高手，能否加入Msn聊，msn acc：hairboy168@hotmail.com,急切期盼中，谢谢！！

hairboy168

各位高手，这个数据文件如果采用read的方式来读的话，因为spool file包含中英文（单双字节），所以这种读取方法将导致诸多地方的中文乱码（中文双字节时read只读了其中一个字节），请问有什么解决方案吗？谢谢！！