使用 scrapy访问豆瓣的搜索接口时，莫名会出现response json数据为空的情况。 加上回调重新请求 (要设置dont_filter=True 防止被过滤)， 还是会出现异常。 最后发现是请求速度过快导致的。 降速： 将其中的访问速度与下载速度调整一下，具体设置： #并发请求个数（越小越慢） 默认是16个 CONCURRENT_REQUESTS = 5 #下载延迟时间（越大请求越慢） D...

特别声明： 版权声明：本文内容由网络用户投稿，版权归原作者所有，本站不拥有其著作权，亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容，请联系我们jiasou666@gmail.com 处理，核实后本网站将在24小时内删除侵权内容。