延时爬取解决503错误

1. 503错误

今天爬了一个代理网站,请求状态的状态码是503,且具体如下图,可以看到第一次请求的状态码是200,正常;可第二次就是503错误码:
在这里插入图片描述
然后上网搜了503错误码的意义,如下:
在这里插入图片描述
在这里插入图片描述
经过分析,确定是自己爬取太快,因此设置了每隔2s进行一次爬取,更改如下:
在这里插入图片描述

猜你喜欢

转载自blog.csdn.net/qq_34405401/article/details/105622221