免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
› 论坛 › 程序设计 › Shell › 请教文件分割的问题
12下一页
最近访问板块 发新帖
查看: 2872 | 回复: 15
打印 上一主题 下一主题

[文本处理] 请教文件分割的问题 [复制链接]

o枫叶o飘零

论坛徽章:
39
双子座 日期:2014-08-06 17:37:19极客徽章 日期:2016-12-07 14:03:402017金鸡报晓 日期:2017-01-10 15:13:292017金鸡报晓 日期:2017-02-08 10:39:4215-16赛季CBA联赛之新疆 日期:2017-03-24 16:36:1915-16赛季CBA联赛之江苏 日期:2017-04-26 17:19:08黑曼巴 日期:2018-03-07 18:56:5615-16赛季CBA联赛之八一 日期:2018-03-09 10:44:1015-16赛季CBA联赛之江苏 日期:2018-03-12 15:12:1915-16赛季CBA联赛之青岛 日期:2018-03-16 09:13:0515-16赛季CBA联赛之山东 日期:2018-04-27 18:23:0515-16赛季CBA联赛之新疆 日期:2018-05-04 11:29:30
跳转到指定楼层
1楼 [收藏(0)] [报告]
发表于 2014-07-08 20:24 |只看该作者 |倒序浏览
目前有一个文件aaa     行数未知
要求是每50W行进行分割   分割后的文件名为  a01.txt   a02.txt a03.txt...

貌似split只能自己定义分割的文件名
split -l 500000 aaa  a01.txt

这样结果就成了
a01.txtaa   a01.txtab  
达到不我想要的结果...
Herowinter

论坛徽章:
769
金牛座 日期:2014-02-26 17:49:58水瓶座 日期:2014-02-26 18:10:15白羊座 日期:2014-04-15 19:29:52寅虎 日期:2014-04-17 19:43:21酉鸡 日期:2014-04-19 21:24:10子鼠 日期:2014-04-22 13:55:24卯兔 日期:2014-04-22 14:20:58亥猪 日期:2014-04-22 16:13:09狮子座 日期:2014-05-05 22:31:17摩羯座 日期:2014-05-06 10:32:53处女座 日期:2014-05-12 09:23:11子鼠 日期:2014-05-21 18:21:27
2楼 [报告]
发表于 2014-07-08 20:26 |只看该作者
怎么又来了，没觉得50w和上午的20相比有什么本质区别。。。
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
o枫叶o飘零

论坛徽章:
39
双子座 日期:2014-08-06 17:37:19极客徽章 日期:2016-12-07 14:03:402017金鸡报晓 日期:2017-01-10 15:13:292017金鸡报晓 日期:2017-02-08 10:39:4215-16赛季CBA联赛之新疆 日期:2017-03-24 16:36:1915-16赛季CBA联赛之江苏 日期:2017-04-26 17:19:08黑曼巴 日期:2018-03-07 18:56:5615-16赛季CBA联赛之八一 日期:2018-03-09 10:44:1015-16赛季CBA联赛之江苏 日期:2018-03-12 15:12:1915-16赛季CBA联赛之青岛 日期:2018-03-16 09:13:0515-16赛季CBA联赛之山东 日期:2018-04-27 18:23:0515-16赛季CBA联赛之新疆 日期:2018-05-04 11:29:30
3楼 [报告]
发表于 2014-07-08 20:45 |只看该作者
中午出去有事了  没有看帖子



看了下上午的帖子    变更的代码如下
awk -v m=500000 '{if(NR%m==1)f++;print>"a"f".txt"}' aaa

生成的文件如下   
a1.txt  a2.txt  ......a10.txt
前10位能否补成a01.txt   a02.txt?
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
Kasiotao

论坛徽章:
1
处女座 日期:2014-09-18 16:18:00
4楼 [报告]
发表于 2014-07-09 00:20 |只看该作者
回复 3# o枫叶o飘零
楼主要不要这样。。。我觉得各位大大已经写的够清楚了，你好歹也学一点点把，awk的语法和c是类似的吧？
  1. awk -v m=2 '{if(NR%m==1)f++;n=f<10?"0"f:f;print>"a"n".txt"}
复制代码
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
yestreenstars

论坛徽章:
32
处女座 日期:2013-11-20 23:41:20双子座 日期:2014-06-11 17:20:43戌狗 日期:2014-06-16 11:05:00处女座 日期:2014-07-22 17:30:47狮子座 日期:2014-07-28 15:38:17金牛座 日期:2014-08-05 16:34:01亥猪 日期:2014-08-18 13:34:25白羊座 日期:2014-09-02 15:03:55金牛座 日期:2014-11-10 10:23:58处女座 日期:2014-12-02 09:17:52程序设计版块每日发帖之星 日期:2015-06-16 22:20:002015亚冠之塔什干火车头 日期:2015-06-20 23:28:22
5楼 [报告]
发表于 2014-07-09 09:10 |只看该作者
  1. awk -vm=50000 '{if(NR%m==1)f++;f=sprintf("%02d",f);print > "a"f".txt"}' aaa
复制代码
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
Herowinter

论坛徽章:
769
金牛座 日期:2014-02-26 17:49:58水瓶座 日期:2014-02-26 18:10:15白羊座 日期:2014-04-15 19:29:52寅虎 日期:2014-04-17 19:43:21酉鸡 日期:2014-04-19 21:24:10子鼠 日期:2014-04-22 13:55:24卯兔 日期:2014-04-22 14:20:58亥猪 日期:2014-04-22 16:13:09狮子座 日期:2014-05-05 22:31:17摩羯座 日期:2014-05-06 10:32:53处女座 日期:2014-05-12 09:23:11子鼠 日期:2014-05-21 18:21:27
6楼 [报告]
发表于 2014-07-09 09:12 |只看该作者
回复 5# yestreenstars

还是星辰大神好，不过50W好像还要1个零。
   
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
yestreenstars

论坛徽章:
32
处女座 日期:2013-11-20 23:41:20双子座 日期:2014-06-11 17:20:43戌狗 日期:2014-06-16 11:05:00处女座 日期:2014-07-22 17:30:47狮子座 日期:2014-07-28 15:38:17金牛座 日期:2014-08-05 16:34:01亥猪 日期:2014-08-18 13:34:25白羊座 日期:2014-09-02 15:03:55金牛座 日期:2014-11-10 10:23:58处女座 日期:2014-12-02 09:17:52程序设计版块每日发帖之星 日期:2015-06-16 22:20:002015亚冠之塔什干火车头 日期:2015-06-20 23:28:22
7楼 [报告]
发表于 2014-07-09 09:12 |只看该作者
回复 6# Herowinter

不要在意这些细节啦~
   
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
lklkxcxc

论坛徽章:
1
数据库技术版块每日发帖之星 日期:2016-06-23 06:20:00
8楼 [报告]
发表于 2014-07-24 14:42 |只看该作者
回复 5# yestreenstars
不好意思，请教你：
我理解的是
（NR%m==1）不是只代表1-50000行，那后面的50001-100000 。。。。是怎么分割的


   
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
yestreenstars

论坛徽章:
32
处女座 日期:2013-11-20 23:41:20双子座 日期:2014-06-11 17:20:43戌狗 日期:2014-06-16 11:05:00处女座 日期:2014-07-22 17:30:47狮子座 日期:2014-07-28 15:38:17金牛座 日期:2014-08-05 16:34:01亥猪 日期:2014-08-18 13:34:25白羊座 日期:2014-09-02 15:03:55金牛座 日期:2014-11-10 10:23:58处女座 日期:2014-12-02 09:17:52程序设计版块每日发帖之星 日期:2015-06-16 22:20:002015亚冠之塔什干火车头 日期:2015-06-20 23:28:22
9楼 [报告]
发表于 2014-07-24 14:48 |只看该作者
回复 8# lklkxcxc

1、500001、1000001、……

这些行和500000相余都等于1
   
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
li0924

论坛徽章:
7
亥猪 日期:2013-10-10 17:00:29辰龙 日期:2013-10-12 16:23:19卯兔 日期:2013-11-18 17:01:27金牛座 日期:2014-09-09 10:17:052015七夕节徽章 日期:2015-08-21 11:06:172015亚冠之柏太阳神 日期:2015-09-25 13:56:42数据库技术版块每日发帖之星 日期:2016-08-06 06:20:00
10楼 [报告]
发表于 2014-07-24 14:52 |只看该作者
split有个d的参数
  1. split -d -l 500000 aaa a
复制代码
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
12下一页
返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们：huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP