Scrapy的301、302重定向问题原因及解决办法

根据 HTTP标准 ,返回值为200-300之间的值为成功的response。

Scrapy运行爬虫过程中,目标网站返回301或302,而没有获取到想要的网页内容,表示请求失败。eg:

2019-02-13 17:18:32 [scrapy.extensions.telnet] DEBUG: Telnet console listening on 127.0.0.1:6023