scrapy 向爬虫服务发送请求

Posted 2020-12-14 qianxunman

curl http://localhost:6800/schedule.json -d project=default -d spider=somespider

shell 命令请求转换为python 请求:

request.post(‘http://localhost:6800/schedule.json‘,data={‘project‘:‘default‘,‘spider‘:‘somespider‘}