免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
› 论坛 › 程序设计 › Shell › 请教文本文件切分问题
12下一页
最近访问板块 发新帖
查看: 3120 | 回复: 11
打印 上一主题 下一主题

[文本处理] 请教文本文件切分问题 [复制链接]

wadeheat2

论坛徽章:
0
跳转到指定楼层
1楼 [收藏(0)] [报告]
发表于 2014-09-03 15:22 |只看该作者 |倒序浏览
我现在有一个10W行的txt文件，

我需要：

1、将他们按每1W行切分为一个文件；
2、切分后的文件，需要是xls、或 csv格式的，用excel可以打开的。

O(∩_∩)O谢谢
Shell_HAT

论坛徽章:
33
ChinaUnix元老 日期:2015-02-02 08:55:39CU十四周年纪念徽章 日期:2019-08-20 08:30:3720周年集字徽章-周 日期:2020-10-28 14:13:3020周年集字徽章-20 日期:2020-10-28 14:04:3019周年集字徽章-CU 日期:2019-09-08 23:26:2519周年集字徽章-19 日期:2019-08-27 13:31:262016科比退役纪念章 日期:2022-04-24 14:33:24
2楼 [报告]
发表于 2014-09-03 15:37 |只看该作者
试试 split 命令
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
yestreenstars

论坛徽章:
32
处女座 日期:2013-11-20 23:41:20双子座 日期:2014-06-11 17:20:43戌狗 日期:2014-06-16 11:05:00处女座 日期:2014-07-22 17:30:47狮子座 日期:2014-07-28 15:38:17金牛座 日期:2014-08-05 16:34:01亥猪 日期:2014-08-18 13:34:25白羊座 日期:2014-09-02 15:03:55金牛座 日期:2014-11-10 10:23:58处女座 日期:2014-12-02 09:17:52程序设计版块每日发帖之星 日期:2015-06-16 22:20:002015亚冠之塔什干火车头 日期:2015-06-20 23:28:22
3楼 [报告]
发表于 2014-09-03 15:38 |只看该作者
用split，骚年，学长只能帮你到这了。
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
wadeheat2

论坛徽章:
0
4楼 [报告]
发表于 2014-09-03 16:04 |只看该作者
回复 2# Shell_HAT

这样切割：split -l 10000 1.txt    ，也不是保存excel格式的？
   
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
wadeheat2

论坛徽章:
0
5楼 [报告]
发表于 2014-09-03 16:04 |只看该作者
回复 3# yestreenstars


    这样切割：split -l 10000 1.txt    ，也不是保存excel格式的？
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
prcardin

论坛徽章:
8
戌狗 日期:2013-10-12 11:37:19双子座 日期:2014-05-06 14:40:39巨蟹座 日期:2014-06-14 09:22:18戌狗 日期:2014-09-18 16:05:44巨蟹座 日期:2014-12-27 16:37:26酉鸡 日期:2015-01-20 18:39:022015年亚洲杯之沙特阿拉伯 日期:2015-04-20 22:38:242015亚冠之萨济拖拉机 日期:2015-06-19 16:01:03
6楼 [报告]
发表于 2014-09-03 16:07 |只看该作者
split

       -l, --lines=NUMBER
              put NUMBER lines per output file
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
reyleon

论坛徽章:
60
20周年集字徽章-20 日期:2020-10-28 14:04:3015-16赛季CBA联赛之北京 日期:2016-07-06 15:42:0715-16赛季CBA联赛之同曦 日期:2016-06-12 10:38:0915-16赛季CBA联赛之佛山 日期:2016-05-27 11:54:56黄金圣斗士 日期:2015-12-02 11:44:35白银圣斗士 日期:2015-11-25 14:32:43白银圣斗士 日期:2015-11-23 12:53:352015亚冠之布里斯班狮吼 日期:2015-10-21 16:55:482015亚冠之首尔 日期:2015-09-01 16:46:052015亚冠之德黑兰石油 日期:2015-08-31 11:39:192015亚冠之萨济拖拉机 日期:2015-08-28 21:06:5315-16赛季CBA联赛之广东 日期:2016-07-12 14:58:53
7楼 [报告]
发表于 2014-09-03 16:23 |只看该作者
贴点样式文本出来吧...要怎样在Excel中呈现

你这光说切割成10000行一个的文件需要Excel打开,这让别人怎么帮你撒.
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
yestreenstars

论坛徽章:
32
处女座 日期:2013-11-20 23:41:20双子座 日期:2014-06-11 17:20:43戌狗 日期:2014-06-16 11:05:00处女座 日期:2014-07-22 17:30:47狮子座 日期:2014-07-28 15:38:17金牛座 日期:2014-08-05 16:34:01亥猪 日期:2014-08-18 13:34:25白羊座 日期:2014-09-02 15:03:55金牛座 日期:2014-11-10 10:23:58处女座 日期:2014-12-02 09:17:52程序设计版块每日发帖之星 日期:2015-06-16 22:20:002015亚冠之塔什干火车头 日期:2015-06-20 23:28:22
8楼 [报告]
发表于 2014-09-03 16:27 |只看该作者
回复 5# wadeheat2

split只负责切割，不负责转格式~
   
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
bulletmarquis

论坛徽章:
2
摩羯座 日期:2014-11-03 15:28:56卯兔 日期:2015-01-04 17:20:51
9楼 [报告]
发表于 2014-09-03 16:38 |只看该作者
你切割和转格式是两件事情，没必要一次处理
用awk可以同时完成切割和转列间隔符，但是用awk把简单问题复杂化了

你先用OFS把列间隔转成tab或者逗号，然后再切割成若干个文件不就OK了
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
wadeheat2

论坛徽章:
0
10楼 [报告]
发表于 2014-09-03 16:48 |只看该作者
回复 7# reyleon


    像这样的：


实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
12下一页
返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们：huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP