免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
› 论坛 › 程序设计 › Shell › LINUX下超大文件的分割与合并怎么办？
最近访问板块 发新帖
查看: 2447 | 回复: 8
打印 上一主题 下一主题

LINUX下超大文件的分割与合并怎么办？ [复制链接]

yueliangdao0608

论坛徽章:
0
跳转到指定楼层
1楼 [收藏(0)] [报告]
发表于 2008-06-06 11:34 |只看该作者 |倒序浏览
用SPLIT是可以分割。可是合并的时候就成了问题。
不会用cat ... > new来实现吧。
各位还有其他办法嘛？谢谢了。
ly5066113

论坛徽章:
23
15-16赛季CBA联赛之吉林 日期:2017-12-21 16:39:27白羊座 日期:2014-10-27 11:14:37申猴 日期:2014-10-23 08:36:23金牛座 日期:2014-09-30 08:26:49午马 日期:2014-09-29 09:40:16射手座 日期:2014-11-25 08:56:112015年辞旧岁徽章 日期:2015-03-03 16:54:152015年迎新春徽章 日期:2015-03-04 09:49:0315-16赛季CBA联赛之山东 日期:2017-12-21 16:39:1915-16赛季CBA联赛之广东 日期:2016-01-19 13:33:372015亚冠之山东鲁能 日期:2015-10-13 09:39:062015亚冠之西悉尼流浪者 日期:2015-09-21 08:27:57
2楼 [报告]
发表于 2008-06-06 11:41 |只看该作者
cat ... > new

这有什么不好么？
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
yueliangdao0608

论坛徽章:
0
3楼 [报告]
发表于 2008-06-06 11:45 |只看该作者
原帖由 ly5066113 于 2008-6-6 11:41 发表
cat ... > new

这有什么不好么？



如果我有200G呢。
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
ly5066113

论坛徽章:
23
15-16赛季CBA联赛之吉林 日期:2017-12-21 16:39:27白羊座 日期:2014-10-27 11:14:37申猴 日期:2014-10-23 08:36:23金牛座 日期:2014-09-30 08:26:49午马 日期:2014-09-29 09:40:16射手座 日期:2014-11-25 08:56:112015年辞旧岁徽章 日期:2015-03-03 16:54:152015年迎新春徽章 日期:2015-03-04 09:49:0315-16赛季CBA联赛之山东 日期:2017-12-21 16:39:1915-16赛季CBA联赛之广东 日期:2016-01-19 13:33:372015亚冠之山东鲁能 日期:2015-10-13 09:39:062015亚冠之西悉尼流浪者 日期:2015-09-21 08:27:57
4楼 [报告]
发表于 2008-06-06 11:54 |只看该作者
原帖由 yueliangdao0608 于 2008-6-6 11:45 发表



如果我有200G呢。


split分割文件，原文件是不变的，为什么会要再合并呢？
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
davistar

论坛徽章:
0
5楼 [报告]
发表于 2008-06-06 11:56 |只看该作者
既然已经split了，合并时候分组cat 效率可能会好些。200G怎么效率也不会高
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
yueliangdao0608

论坛徽章:
0
6楼 [报告]
发表于 2008-06-06 12:07 |只看该作者
原帖由 davistar 于 2008-6-6 11:56 发表
既然已经split了，合并时候分组cat 效率可能会好些。200G怎么效率也不会高



想问一下还有什么其他的分割工具没有？除了SPLIT？
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
davistar

论坛徽章:
0
7楼 [报告]
发表于 2008-06-06 12:09 |只看该作者
原帖由 yueliangdao0608 于 2008-6-6 12:07 发表



想问一下还有什么其他的分割工具没有？除了SPLIT？

dd
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
fortuneteller

论坛徽章:
0
8楼 [报告]
发表于 2008-06-06 14:07 |只看该作者
split 很好很强大呀用别的干嘛

[ 本帖最后由 fortuneteller 于 2008-6-6 14:15 编辑 ]
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
cxfcxf

论坛徽章:
0
9楼 [报告]
发表于 2008-06-06 20:15 |只看该作者
cat 写的很好的 读多少 马上清空 再读多少 所以cat效率是最高的
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们：huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP