pycurl的CurlMulti还是出现混乱

advancejar

我用pycurl的CurlMulti把一批网页数据采集到数据库，这个问题我问了多次了，嘿嘿

_s = pycurl.CurlShare()
_s.setopt(pycurl.SH_SHARE, pycurl.LOCK_DATA_COOKIE)
_s.setopt(pycurl.SH_SHARE, pycurl.LOCK_DATA_DNS)

使用的时候
c.setopt(pycurl.SHARE, _s)
然后采集的网页数据暂存在

class _Buf:
    def __init__(self):
        self.contents = []

    def body_callback(self, buf):
        self.contents.append(buf)

c.buf = _Buf()
c.setopt(pycurl.WRITEFUNCTION, c.buf.body_callback)


采集了2000页，共14xxx条数据，发现至少271条重复，c.buf.body_callback是单独的类，应该不会重复吧？