使用带有scrapy-splash的代理

您应该在SplashRequest对象中添加’proxy’参数。

def start_requests(self):    for url in self.start_urls:        print url        yield SplashRequest(url, self.parse, endpoint='execute', args={'wait': 5,       'lua_source': PROXY,       'js_source': 'document.body',       'proxy': 'http://proxy_ip:proxy_port'}