为什么subprocess.Popen.poll()=0，但是pipe里面还有没读完的数据

spyman1802

可能标题写的有点不清楚，具体情况如下：
写一个程序，能获得程序输出，并且在程序执行完毕之后，能获知。程序如下

1. import subprocess
   
2. 
   
3. pp = subprocess.Popen('ping -c4 www.google.cn', shell=True, stdout=subprocess.PIPE, stderr=subprocess.STDOUT)
   
4. while 1:
   
5.         line = pp.stdout.readline()
   
6.         print('out-->'+line+'<')
   
7.         if subprocess.Popen.poll(pp)==0:
   
8.                 break
   
9. 
   
10. print('DONE')

复制代码

实际执行的效果有2种情况
第一种
out-->PING www.google.cn (203.208.45.212) 56(84) bytes of data.<
out-->64 bytes from 203.208.45.212: icmp_seq=1 ttl=55 time=4.03 ms<
out-->64 bytes from 203.208.45.212: icmp_seq=2 ttl=55 time=3.18 ms<
out-->64 bytes from 203.208.45.212: icmp_seq=3 ttl=55 time=3.90 ms<
out-->64 bytes from 203.208.45.212: icmp_seq=4 ttl=55 time=4.47 ms<
DONE

---------------------------
第二种

out-->PING www.google.cn (203.208.46.212) 56(84) bytes of data.<
out-->64 bytes from 203.208.46.212: icmp_seq=1 ttl=54 time=26.3 ms<
out-->64 bytes from 203.208.46.212: icmp_seq=2 ttl=54 time=3.22 ms<
out-->64 bytes from 203.208.46.212: icmp_seq=3 ttl=54 time=6.95 ms<
out-->64 bytes from 203.208.46.212: icmp_seq=4 ttl=54 time=4.59 ms<
out--><
out-->--- www.google.cn ping statistics ---<
out-->4 packets transmitted, 4 received, 0% packet loss, time 3009ms<
out-->rtt min/avg/max/mdev = 3.225/10.282/26.363/9.380 ms<
out--><
out--><
out--><
out--><
DONE

第一种执行结果占多数，第二种执行结果，有时候会出现。

按照实际执行ping -c4 www.google.cn的情况看，第一种情况少了最后的三行，所以说是不正确的。但是为什么常常是这种情况哪？求版主和各位大大帮忙看看那问题。

linux_c_py_php

poll就别用了, 有延迟, 直接根据readline返回EOF做判定, 最后记得wait回收子进程, 否则有僵尸.

1. [root@vps616 python]# python main.py
   
2. out-->PING www.google.cn (203.208.46.212) 56(84) bytes of data.<
   
3. out-->64 bytes from 203.208.46.212: icmp_seq=1 ttl=54 time=2.41 ms<
   
4. out-->64 bytes from 203.208.46.212: icmp_seq=2 ttl=54 time=2.06 ms<
   
5. out-->64 bytes from 203.208.46.212: icmp_seq=3 ttl=54 time=2.14 ms<
   
6. out-->64 bytes from 203.208.46.212: icmp_seq=4 ttl=54 time=2.65 ms<
   
7. out--><
   
8. out-->--- www.google.cn ping statistics ---<
   
9. out-->4 packets transmitted, 4 received, 0% packet loss, time 3007ms<
   
10. out-->rtt min/avg/max/mdev = 2.064/2.318/2.658/0.237 ms<
    
11. DONE
    
12. [root@vps616 python]# cat main.py
    
13. #python2.7.3
    
14. #coding=utf-8
    
15. 
    
16. import subprocess
    
17. 
    
18. pp = subprocess.Popen('ping -c4 www.google.cn', shell = True, stdout = subprocess.PIPE, stderr = subprocess.STDOUT)
    
19. 
    
20. while True:
    
21.     line = pp.stdout.readline()
    
22.     if not line:
    
23.                 break
    
24.     print('out-->' + line.strip() + '<')
    
25. 
    
26. pp.wait()
    
27. print('DONE')

复制代码

106033177

回复 1# spyman1802

if subprocess.Popen.poll(pp) !=None:
  break

poll的返回： A None value indicates that the process hasn’t terminated yet.A negative value -N indicates that the child was terminated by signal N (Unix only).


   

spyman1802

回复 2# linux_c_py_php

多谢。 顺带也拜访了一下个人主页，做的非常好，可以直接去百度。？？ 为什么不是google？？

我想问一下延迟是什么意思？
   

linux_c_py_php

可能是进程退出前关闭描述符距离进程完全结束有一定的时间间隔, 导致Poll的实现(kill -0 child_pid, 猜测 )和readline返回EOF之间有差距, 所以导致多打印了很多空行, 也就是readline()一直读EOF, 而poll依旧检测到子进程存在.

spyman1802 发表于 2012-10-18 15:36
回复 2# linux_c_py_php

多谢。 顺带也拜访了一下个人主页，做的非常好，可以直接去百度。？？ 为什么不 ...

linux_c_py_php

汗, 站点没放出来, 推倒好几版了, 找不到太好的主题.

spyman1802 发表于 2012-10-18 15:36
回复 2# linux_c_py_php

多谢。 顺带也拜访了一下个人主页，做的非常好，可以直接去百度。？？ 为什么不 ...

spyman1802

回复 3# 106033177


   
谢谢回复。 我看过这段官方回应，不过实际执行效果确实不好，我发按照你的描述改过的代码，你可以自己在linux上面执行试试看。

1. import subprocess
   
2. 
   
3. pp = subprocess.Popen('ping -c4 www.google.cn', shell=True, stdout=subprocess.PIPE, stderr=subprocess.STDOUT)
   
4. while 1:
   
5.         line = pp.stdout.readline()
   
6.         print('out-->'+line.strip()+'<')
   
7.         if subprocess.Popen.poll(pp) is not None:
   
8.                 break
   
9. 
   
10. print('DONE')

复制代码

linux_c_py_php

spyman1802 发表于 2012-10-18 16:12
回复 3# 106033177

是一样的, 我之前已经试过了, 多打印很多空行, 原因应该是我分析的那样, 所以你不要用pull了.

106033177

回复 1# spyman1802
回复 2# linux_c_py_php

spyman1802 发表于 2012-10-18 14:58
out-->64 bytes from 203.208.46.212: icmp_seq=3 ttl=54 time=6.95 ms<
out-->64 bytes from 203.208.46.212: icmp_seq=4 ttl=54 time=4.59 ms<
out--><
out-->--- www.google.cn ping statistics ---<
out-->4 packets transmitted, 4 received, 0% packet loss, time 3009ms<

这个应该是缓冲导致的，实际上第一种输出是不完整的。
子进程退出了并不表示管道里没有数据了，所以
if subprocess.Popen.poll(pp)==0:
  break
这样判断会有部分数据没有读取就退出循环了。


   

linux_c_py_php

这个分析是对的, 没想到读管道这一点.

106033177 发表于 2012-10-19 14:48
回复 1# spyman1802
回复 2# linux_c_py_php