免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 2602 | 回复: 2
打印 上一主题 下一主题

[文本处理] shell 多线程问题 [复制链接]

论坛徽章:
12
IT运维版块每日发帖之星
日期:2015-11-17 06:20:00程序设计版块每日发帖之星
日期:2016-01-19 06:20:0015-16赛季CBA联赛之江苏
日期:2016-01-17 15:31:3915-16赛季CBA联赛之上海
日期:2016-01-16 15:44:3015-16赛季CBA联赛之浙江
日期:2016-01-15 20:38:1815-16赛季CBA联赛之北京
日期:2016-01-09 14:30:15CU十四周年纪念徽章
日期:2016-01-07 12:31:5115-16赛季CBA联赛之四川
日期:2016-01-01 11:49:1515-16赛季CBA联赛之深圳
日期:2015-12-24 14:23:4115-16赛季CBA联赛之山西
日期:2015-12-15 16:22:31技术图书徽章
日期:2015-12-10 17:41:0015-16赛季CBA联赛之北控
日期:2016-02-03 10:03:24
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2015-06-04 10:48 |只看该作者 |倒序浏览
本帖最后由 sync_1521 于 2015-06-04 11:34 编辑

脚本如下: cat  /home/clouder/cbin/script/cron/iptable_save.sh
  1. #!/bin/bash
  2. ip_list="192.168.1.10..220,192.168.2.10..220"
  3. iptables_route_path=/home/clouder/temp
  4. day=`date +%Y%m%d`
  5. cat /dev/null >/tmp/iplist

  6. for line in $(echo ${ip_list}|awk -F "," 'BEGIN{OFS="\n"}{$1=$1;print $0}')
  7. do
  8.   ipPre=`echo $line | cut -d '.' -f -3`
  9.   ipStart=`echo $line | cut -d '.' -f 4`
  10.   
  11.   if [[ $line == *..* ]]; then
  12.       ipEnd=`echo $line | cut -d '.' -f 6`
  13.       for ((j=$ipStart; j<=$ipEnd; j++))
  14.       do  
  15.           echo $ipPre.$j >>/tmp/iplist
  16.       done
  17.   else
  18.       ipEnd="$ipStart"
  19.       echo $ipPre.$ipStart >>/tmp/iplist
  20.   fi  
  21. done

  22. record()
  23. {
  24.     osinfo=$(ssh $1 'cat /etc/issue' |tr '[A-Z]' '[a-z]'|grep -oP 'opensuse|centos|ubuntu')
  25.     case $osinfo  in
  26.      opensuse)
  27.          iptablessave="/usr/sbin/iptables-save"
  28.      ;;
  29.      centos|ubuntu)
  30.          iptablessave="/sbin/iptables-save"
  31.      ;;
  32.      *)
  33.          echo "os system is not support in this script"
  34.      ;;
  35.     esac

  36.     ssh $1 "netstat -rn" 2>&1>>$iptables_route_path/$1_${day}_iptable_route
  37.     echo "##################################################" >>$iptables_route_path/$1_${day}_iptable_route
  38.     ssh $1 "sudo $iptablessave" 2>&1>>$iptables_route_path/$1_${day}_iptable_route
  39. }

  40. MAX_THREAD_NUM=50
  41. tmp_fifo_file=/tmp/$.fifo
  42. mkfifo "$tmp_fifo_file"   
  43. exec 9<>"$tmp_fifo_file"
  44. rm "$tmp_fifo_file"  

  45. for ((i=0;i<$MAX_THREAD_NUM;i++))
  46. do
  47.   echo
  48. done >&9
  49. set -x
  50. while read line
  51. do
  52. {
  53.   read -u 9
  54.   {
  55.   destIp=$line
  56.   echo $line
  57.   record $destIp
  58.   echo >&9
  59.   }&
  60. }  
  61. done </tmp/iplist
  62. set +x

  63. wait
  64. exec 9>&-

  65. cd $iptables_route_path
  66. rm *${day}_iptable_route
复制代码
我发现每次执行只执行了51台机器,而我实际IP列表有400多台机器,求指点,多谢!
但我将record $destIp 注释后,又能全部执行,百思不得其解。。莫非这种多线程只支持本地命令,不支持远程命令(ssh)??

论坛徽章:
20
卯兔
日期:2015-01-26 22:05:142015亚冠之萨济拖拉机
日期:2015-09-10 15:15:282015亚冠之阿尔希拉尔
日期:2015-09-25 17:37:53程序设计版块每日发帖之星
日期:2015-10-03 06:20:00程序设计版块每日发帖之星
日期:2015-12-09 06:20:00CU十四周年纪念徽章
日期:2015-12-17 09:07:15程序设计版块每日发帖之星
日期:2015-12-25 06:20:34程序设计版块每日发帖之星
日期:2015-12-25 06:20:34程序设计版块每日发帖之星
日期:2015-12-25 06:20:342015亚冠之广州富力
日期:2015-08-27 19:29:56每日论坛发贴之星
日期:2015-08-26 06:20:002015亚冠之阿尔希拉尔
日期:2015-05-18 17:26:27
2 [报告]
发表于 2015-06-04 13:45 |只看该作者
ssh加上-n选项试试,估计是文件描述符的问题

论坛徽章:
12
IT运维版块每日发帖之星
日期:2015-11-17 06:20:00程序设计版块每日发帖之星
日期:2016-01-19 06:20:0015-16赛季CBA联赛之江苏
日期:2016-01-17 15:31:3915-16赛季CBA联赛之上海
日期:2016-01-16 15:44:3015-16赛季CBA联赛之浙江
日期:2016-01-15 20:38:1815-16赛季CBA联赛之北京
日期:2016-01-09 14:30:15CU十四周年纪念徽章
日期:2016-01-07 12:31:5115-16赛季CBA联赛之四川
日期:2016-01-01 11:49:1515-16赛季CBA联赛之深圳
日期:2015-12-24 14:23:4115-16赛季CBA联赛之山西
日期:2015-12-15 16:22:31技术图书徽章
日期:2015-12-10 17:41:0015-16赛季CBA联赛之北控
日期:2016-02-03 10:03:24
3 [报告]
发表于 2015-06-04 14:05 |只看该作者
回复 2# songyc_2015

大神,你完美的解决了我的问题,非常感谢!!


   
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP