Linux下终端http代理地址搜索器

doctorjxd

原帖由 cugb_cat 于 2007-11-12 21:40 发表
发在我的博客中的，现在发到论坛上，
使用方法如下：
环境：
要求操作系统中含有：Linux 2.6内核(最好2.6.8以上的内核版本)，gcc，glibc等软件
运行：
打开一个终端，将下载的压缩包解压：tar xzvf http_p ...

不错的工作。

同时，确实是Shell脚本实现起来简单。我写了一个同样功能的脚本。

1. 
   
2. #/bin/sh
   
3. 
   
4. #名称： searchproxy.sh
   
5. #使用方法： searchproxy.sh [测试地址（默认是ibm网站）]  [timeout（默认10s）]
   
6. testhost=${1:-"www.ibm.com"}
   
7. timeout=${2:-10}
   
8. 
   
9. echo "Download proxy address list from www.cnproxy.com..."
   
10. wget --timeout=$timeout --tries=2 -O tmp.htm -q http://www.cnproxy.com/proxy1.html
    
11. if [ $? -ne 0 ]
    
12. then
    
13.   echo "www.cnproxy.com not connected"
    
14.   return 2
    
15. fi
    
16. 
    
17. echo "Extracting list ....."
    
18. sed -n '/^[^0-9]*\(\([0-9][0-9]*\.\)\{3\}[0-9][0-9]*\).*write(":"\([^)]*\)).*$/{s//\1:\3/; '$(sed -n '/^.*\(\([a-z]="[0-9]"\;\)\{10\}\).*$/{s//\1/;s/[a-z]/s,+&/g;s/="/,/g;s/"/,g/g;p;q;}' tmp.htm)' p;}' tmp.htm > tmpproxy.txt
    
19. 
    
20. echo "try to connect $testhost and timeout is $timeout s"
    
21. echo "Testing proxy addresses..."
    
22. >proxy.txt
    
23. total=$(cat tmpproxy.txt | wc -l)
    
24. index=1
    
25. while [ $index -le $total ]
    
26. do
    
27.   proxyaddr=$(sed -n ${index}"{p;q;}" tmpproxy.txt)
    
28.   export "http_proxy=http://$proxyaddr/"
    
29.   wget -q -O tmp.htm --timeout=$timeout --tries=1 $testhost
    
30.   if [ $? -eq 0 ]
    
31.   then
    
32.     echo -e "success  $proxyaddr\t($index of $total)"
    
33.     echo $proxyaddr >> proxy.txt
    
34.   else
    
35.     echo -e "failed   $proxyaddr\t($index of $total)"
    
36.   fi  
    
37. 
    
38.   index=$(($index + 1))
    
39. done
    
40. 
    
41. echo
    
42. echo "list of good proxy addresses saved to proxy.txt"
    
43. echo done
    
44. 
    
45. 
    

复制代码

[ 本帖最后由 doctorjxd 于 2008-6-12 20:20 编辑 ]

cugb_cat

原帖由 doctorjxd 于 2008-6-12 20:11 发表


不错的工作。

同时，确实是Shell脚本实现起来简单。我写了一个同样功能的脚本。


#/bin/sh

#名称： searchproxy.sh
#使用方法： searchproxy.sh [测试地址（默认是ibm网站）]  [timeout（默认10 ...

shell不怎么会，呵呵，遇到什么问题，都是想用C来做。

netmwd

顶一下

CUDev

这种工作俺都是用shell或者是python解决，用C处理字符串简直是痛苦啊

cugb_cat

原帖由 CUDev 于 2008-6-18 12:23 发表
这种工作俺都是用shell或者是python解决，用C处理字符串简直是痛苦啊

确实非常痛苦啊，html页面经常不一样，一不注意就core了。

smalloc

lz原创？

cugb_cat

原帖由 smalloc 于 2008-6-23 10:20 发表
lz原创？

恩，是我自己写的程序。

smalloc

原帖由 cugb_cat 于 2008-6-23 10:25 发表

恩，是我自己写的程序。

不明白开源程序那些源文件头的注释有什么规定。