pyspider -- 禁止请求非200响应码抛异常

python学习网 2019-04-12 00:00:02

在pyspider中若crawl()网址时出现非200的异常信息,会抛出一个异常。

可以在对应的回调函数上面通过@catch_status_code_error 进行修饰,这样就能不抛出异常正常进入回调函数中。

暂时还没遇到什么应用场景使用。

阅读(2554) 评论(0)