免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12下一页
最近访问板块 发新帖
查看: 3040 | 回复: 15
打印 上一主题 下一主题

sed或awk对于一行超过2048字节的行操作都不启作用! [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2006-08-21 14:48 |只看该作者 |倒序浏览
上个标题的问题,本用个小程序测试是可用的了。可我现在真实的文件一行太长,超过2048字符,用vi也不能打开,我用more 查看,没想到sed对太长的行不启作用,请高手们还得指导一下.谢谢:)

论坛徽章:
1
荣誉会员
日期:2011-11-23 16:44:17
2 [报告]
发表于 2006-08-21 15:09 |只看该作者
1,系统?
2,sed/awk版本?
3,出错信息?
BTW:我测试每行6000多字符都没问题

论坛徽章:
0
3 [报告]
发表于 2006-08-21 15:27 |只看该作者
我测试了一下,sed 作用在每行2300个字符的文件,没有问题!
BTY: 烈火 测试过6000 阿?这么强!

论坛徽章:
0
4 [报告]
发表于 2006-08-21 15:37 |只看该作者
做了个测试,apache日志文件1.6G,一共1600多万行。
我用awk '{print $1}' access_log 发现出现错误
  1. awk: input record `61.132.138.150 - - [...' too long
  2. input record number 710342, file access_log
  3. source line 1 of program << {print $1} >>
复制代码


我删除了第710342行,还是一样出错。原因不明,可能是文件行数太多了。看来用awk确实不行。
后来我用了sed 's/\(.*\) - - .*/\1/' access_log处理的。

论坛徽章:
0
5 [报告]
发表于 2006-08-21 15:41 |只看该作者
系统是AIX的,偶不知道sed的版本,没有任何出错信息,用的是shell脚本做的,生成的新文件字节是0.

shell脚本如下1.sh

sed 's/{2:/\^J&/g' 1.txt  11.txt


执行这个shell不报错误信息,但是11.txt生成了就是大小为0个字节.

论坛徽章:
0
6 [报告]
发表于 2006-08-21 15:47 |只看该作者
是不是系统的内核参数有什么控制呀!!

论坛徽章:
1
荣誉会员
日期:2011-11-23 16:44:17
7 [报告]
发表于 2006-08-21 15:55 |只看该作者
要不先fmt一下

论坛徽章:
0
8 [报告]
发表于 2006-08-21 16:02 |只看该作者
烈火兄,怎么fmt,告之,谢谢:)

论坛徽章:
0
9 [报告]
发表于 2006-08-21 16:27 |只看该作者
awk '{print $1};END{print NR}' test >ip

tail -1 ip
28365714

test 5.2G

论坛徽章:
0
10 [报告]
发表于 2006-08-22 15:32 |只看该作者
原帖由 4Aiur 于 2006-8-21 16:27 发表
awk '{print $1};END{print NR}' test >ip

tail -1 ip
28365714

test 5.2G

请 4Aiur 解释一下你给的东西吧!
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP