当前位置:   article > 正文

scrapy 怎么设置时间间隔?_scrapyrequest发送url地址隔一段时间发送一次

scrapyrequest发送url地址隔一段时间发送一次
在 spiders 文件中写如下:
custom_settings = { ‘DOWNLOAD_DELAY’: 0.2, ‘CONCURRENT_REQUESTS_PER_IP’: 4, ‘DOWNLOADER_MIDDLEWARES’: {},}
本文内容由网友自发贡献,转载请注明出处:https://www.wpsshop.cn/article/detail/41904
推荐阅读
相关标签
  

闽ICP备14008679号