FoxZhao

FoxZhao

广东省 深圳市 计算机软、硬件/互联网/IT

威望 : 1 积分 : 1050 赞同 : 2 感谢 : 0

更多 »回复

0

自己解决了...发现接口报错,提示'操作太频繁了'...用了HTTP代理,每次请求都会换IP,不知道为什么还是会出现这个问题... 然后重写了retry中间件,出现这个报错的时候,sleep10秒再重试就好了...

1

我在win10上直接用的scrapy + requests库,写了好几个爬虫了,很顺畅

1

sys.path是一个数组啊,报错已经很明显了,如果你是想要把后面的路径加到环境变量里面的话用append就好了

发问

回复

文章

最新动态

详细资料

个人成就:

威望: 1 积分: 1050 赞同: 2 感谢: 0

最后活跃:
2018-04-27 18:42
更多 » 关注 3

杨真 Dong 邹博

更多 » 0 人关注
关注 1 话题
主页访问量 : 209 次访问