论坛徽章:: 2

电梯直达

1楼 [收藏(0)] [报告]

发表于 2009-07-28 23:09 |只看该作者 |倒序浏览

有20多W行的文件，要每5W行保存到一个文件，如何实现？

文库|博客

kwokcn

大富大贵

论坛徽章:: 0

2楼 [报告]

发表于 2009-07-28 23:14 |只看该作者

split -l
详情man split

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

yyt030

白手起家

论坛徽章:: 2

3楼 [报告]

发表于 2009-07-28 23:21 |只看该作者

原帖由 kwokcn 于 2009/7/28 23:14 发表
split -l
详情man split

能不能用awk或者sed实现呀？

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

kwokcn

大富大贵

论坛徽章:: 0

4楼 [报告]

发表于 2009-07-28 23:45 |只看该作者

为什么一定要用sed或者awk呢？

awk 'FNR%50000==1{n++}{print > FILENAME"."n}' URFILE

复制代码

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

jamesr jamesr 当前离线禁止发言好友博客消息论坛徽章: 0	5楼 [报告] 发表于 2009-07-28 23:47 \|只看该作者提示: 作者被禁止或删除内容自动屏蔽
jamesr jamesr 当前离线禁止发言好友博客消息论坛徽章: 0	实战分享：从技术角度谈机器学习入门\| 【大话IT】RadonDB低门槛向MySQL集群下战书 \| ChinaUnix打赏功能已上线！ \| 新一代分布式关系型数据库RadonDB知多少？

wtuter

家境小康

论坛徽章:: 0

6楼 [报告]

发表于 2009-07-29 07:40 |只看该作者

回复 #3 yyt030 的帖子

可以用awk 或sed ,但大文件要考虑效率问题man split

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

晓骆驼

白手起家

论坛徽章:: 0

7楼 [报告]

发表于 2009-07-29 22:42 |只看该作者

split -50000 urfile

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

返回列表

Chinaunix › 论坛 › 程序设计 › Shell › 如何分割大文件

jamesr jamesr 当前离线禁止发言好友博客消息论坛徽章: 0	5楼 [报告] 发表于 2009-07-28 23:47 \|只看该作者提示: 作者被禁止或删除内容自动屏蔽
jamesr jamesr 当前离线禁止发言好友博客消息论坛徽章: 0	实战分享：从技术角度谈机器学习入门\| 【大话IT】RadonDB低门槛向MySQL集群下战书 \| ChinaUnix打赏功能已上线！ \| 新一代分布式关系型数据库RadonDB知多少？

如何分割大文件 [复制链接]

回复 #3 yyt030 的帖子