请问如何让scrapy动态改变代理

Zhc1993

1. 
   
2. from taobao.proxy_list import PROXY_LIST
   
3. 
   
4. class ProxyMiddleware(object):
   
5.     def process_request(self, request, spider):
   
6.         try:
   
7.             proxy = random.choice(PROXY_LIST)
   
8.             if proxy:
   
9.                 request.meta['proxy'] = 'http://%s' % (proxy)
   
10.         except Exception,e:
    
11.             print 'proxy', e
    
12.             log.msg(e,level=log.ERROR)
    

复制代码

PROXY_LIST是个列表，包含了 代理的ip地址，
但是这个ProxyMiddleware应该是在爬虫开启后只加载一次，如何让爬虫能动态的加载不同的代理IP（每次请求用不同的）？求解，感激不尽！！

Zhc1993

我自己搞错了，本来就是每次request，都随机一个代理IP的