Scrapy是否可以与HTTP代理一起使用？
是。（从Scrapy 0.8开始）通过HTTP代理下载器中间件提供对HTTP代理的支持。请参阅
HttpProxyMiddleware。
使用代理的最简单方法是设置环境变量
http_proxy。如何完成取决于你的外壳。
C:>set http_proxy=http://proxy:portcsh% setenv http_proxy http://proxy:portsh$ export http_proxy=http://proxy:port
如果你想使用https代理并访问https web，要设置环境变量，
http_proxy请遵循以下步骤：
C:>set https_proxy=https://proxy:portcsh% setenv https_proxy https://proxy:portsh$ export https_proxy=https://proxy:port
