curl 出现Failed writing body 问题

tahaomei

想用以下shell代码将股票代码和名称 挖掘出来

#!/bin/sh

stocklist=http://quote.eastmoney.com/stocklist.html
curl $stocklist | grep s[hz][0-9][0-9][0-9][0-9][0-9][0-9].html | iconv -f gb2312 -t utf-8 | cut -d">" -f 3

执行了一部分，出现如下错误，请问该如何处理？

1. 方大炭素(600516)</a
   
2. 置信电气(600517)</a
   
3. 康美药业(600518)</a
   
4. 贵州茅台(600519)</a
   
5. 中发科技(600520)</a
   
6. 华海药业(600521)</a
   
7. 中天科技(600522)</a
   
8. 贵航股份(600523)</a
   
9. 长园集团(600525)</a
   
10. 菲达环保(600526)</a
    
11. 江南高纤(600527)</a
    
12. 中铁二局(600528)</a
    
13. 
    
14. iconv: 山东药玻(600529)</a
    
15. (stdin):598:83: cannot convert
    
16. 交大昂立(600530)</a
    
17. 豫光金铅(600531)</a
    
18. 宏达矿业(600532)</a
    
19. 栖霞建设(600533)</a
    
20. 天士力(600535)</a
    
21. 中国软件(600536)</a
    
22. 亿晶光电(600537)</a
    
23. 国发股份(600538)</a
    
24. 狮头股份(600539)</a
    
25. 新赛股份(600540)</a
    
26. 莫高股份(600543)</a
    
27. 新疆城建(600545)</a
    
28. 山煤国际(600546)</a
    
29. 山东黄金(600547)</a
    
30. 深高速(600548)</a
    
31. 厦门钨业(600549)</a
    
32. 
    
33. 35  405k   35  145k    0     0   129k      0  0:00:03  0:00:01  0:00:02  129k
    
34. curl: (23) Failed writing body (0 != 1440)

复制代码

zxy877298415

回复 1# tahaomei
上文本，和想要得到的结果，论坛里的大神们会帮助你！

   

tahaomei

回复 2# zxy877298415


上啥文本？已经给出shell代码了啊，也说了，我想弄出股票代码和股票名称。


   

tahaomei

没人回答啊？

reb00t

1. 练习。。路过。
   
2. 
   
3. <?php
   
4. $url= "http://quote.eastmoney.com/stocklist.html";
   
5. $file = file_get_contents($url);
   
6. $str = mb_convert_encoding($file,"UTF-8","GBK");
   
7. $pa = '/<li><a target="_blank" href="(.*)">(.*)<\/a><\/li>/';
   
8. preg_match_all($pa,$str,$matches);
   
9. foreach ($matches[2] as $k => $v) {
   
10.         echo $v."\n";
    
11. }
    
12. 
    
13. ?>
    
14. 
    
15. 结果：
    
16. 基金金泰(500001)
    
17. 基金泰和(500002)
    
18. 基金安信(500003)
    
19. 基金汉盛(500005)
    
20. 基金裕阳(500006)
    
21. 基金景阳(500007)

复制代码

bulletmarquis

回复 4# tahaomei


    公司这unix连的是内网，不知道curl $stocklist 取下来是啥样子

tahaomei

回复 5# reb00t



谢谢，不过能否写成shell脚本呢？我刚才测试了您的php脚本，采用php -q yourphpfile.php ，结果屏幕没有任何输出。

   

tahaomei

回复 6# bulletmarquis


那我把这个stocklist.html文件弄下来吧。见附件！


    stocklist.zip (43.36 KB, 下载次数: 10)

2014-09-25 17:01 上传

点击文件名下载附件

bulletmarquis

回复 8# tahaomei


    gb2312改成gb18030试试

bulletmarquis

回复 8# tahaomei


    目测问题是因为有的字符不在gb2312中，导致iconv找不到

从GB2312、GBK 到 GB18030，这些编码方法是向下兼容的，即同一个字符在这些方案中总是有相同的编码，后面的标准支持更多的字符

    再检查iconv，支持GB18030

1. iconv -l|grep -i gb
   
2. CN-GB//
   
3. CSGB2312//
   
4. CSISO58GB1988//
   
5. EBCDIC-CP-GB//
   
6. GB//
   
7. GB2312//
   
8. GB13000//
   
9. GB18030//
   
10. GBK//
    
11. GB_1988-80//
    
12. GB_198880//
    
13. ISO646-GB//

复制代码