from  scrapy.exporters  import  JsonLinesItemExporter

class  BossPipleline(object):
    def __init__(self):
        self.fp=open('jobs.json','wb')
        self.exporter=JsonLinesItemExporter(self.fp,ensure_ascii=False)

    def process_item(self,item,spider):
        self.exporter.export_item(item)
        return item

    def  close_spider(self,spider):
        self.fp.close()
        

 #注意:最后要在settings文件里面开起piplines数据管道

扫码关注我们
微信号:SRE实战
拒绝背锅 运筹帷幄

SRE实战 互联网时代守护先锋,助力企业售后服务体系运筹帷幄!一键直达领取阿里云限量特价优惠。