在pyspider中若crawl()网址时出现非200的异常信息,会抛出一个异常。

可以在对应的回调函数上面通过@catch_status_code_error 进行修饰,这样就能不抛出异常正常进入回调函数中。

SRE实战 互联网时代守护先锋,助力企业售后服务体系运筹帷幄!一键直达领取阿里云限量特价优惠。

暂时还没遇到什么应用场景使用。

扫码关注我们
微信号:SRE实战
拒绝背锅 运筹帷幄