免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 3508 | 回复: 4

如何实现多任务并行运行 [复制链接]

论坛徽章:
0
发表于 2015-01-16 21:52 |显示全部楼层
大家好:
我想在脚本里多任务并行运行, 举个例子如下。下面脚本运行得太慢了,因为一次运行一个文件(command那行),我有几千个后缀为.fa的文件, 如何一次运行10个或更多?  向高手请教,非常谢谢!!
  1. @files = glob "/home/data/*.fa";
  2. for $file (@files) {
  3.     open F, "command  -in $file | ";
  4.     while (<F>) {
  5.         if (/>/) {do something}
  6.         else {do something}
  7.     }
  8.     close F;
  9. }
复制代码

论坛徽章:
1
程序设计版块每日发帖之星
日期:2015-10-07 06:20:00
发表于 2015-01-17 02:06 |显示全部楼层
写个shell script.
  1. perl    script.pl  file_name  &
  2. perl    script.pl  file_name  &
  3. perl    script.pl  file_name  &

  4. wait
  5. perl    script.pl  file_name  &
  6. perl    script.pl  file_name  &
  7. perl    script.pl  file_name  &

复制代码
这个shell脚本是用command line生成的...例如:
ls *fa|sed 's/\(.*\)/perl script.pl \1 \&/' >run.sh

我会用vim修改下,每隔若干行加上 wait

论坛徽章:
0
发表于 2015-01-17 10:55 |显示全部楼层
谢谢chenhao392, 用command line生成shell脚本的主意非常好.

论坛徽章:
1
处女座
日期:2014-03-28 10:11:00
发表于 2015-01-19 11:53 |显示全部楼层
你看能不能用一个简单的的多线程模块:
Perl 多线程模块 Parallel::ForkManager
竟然不能发链接,好忧伤。

论坛徽章:
0
发表于 2015-01-21 14:09 |显示全部楼层
Thanks a lot!
回复 4# rongchaogao


   
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

DTCC2020中国数据库技术大会

【架构革新 高效可控】2020年12月21日-23日第十一届中国数据库技术大会将在北京隆重召开。

大会设置2大主会场,20+技术专场,将邀请超百位行业专家,重点围绕数据架构、AI与大数据、传统企业数据库实践和国产开源数据库等内容展开分享和探讨,为广大数据领域从业人士提供一场年度盛会和交流平台。

http://dtcc.it168.com


大会官网>>
  

北京盛拓优讯信息技术有限公司. 版权所有 16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122
中国互联网协会会员  联系我们:huangweiwei@it168.com
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP