如何在scrapy解析中传递元信息?

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了如何在scrapy解析中传递元信息?相关的知识,希望对你有一定的参考价值。

我正在尝试使用scrapy parse中描述的official documentation来调试我的蜘蛛

但是,我想要调试的解析方法期望请求包含一些元信息(Request(url, meta={.....}))。

使用scrapy parse命令时,如何指定我的请求应该包含此信息?

答案

在查看了parse命令的源代码之后,我发现它不可能并提交了一个增强请求:

https://github.com/scrapy/scrapy/issues/1046

UPDATE

现在可以,请看这个pull request

以上是关于如何在scrapy解析中传递元信息?的主要内容,如果未能解决你的问题,请参考以下文章

如何将选定的微调器 id 传递给片段

如何在活动和片段之间传递对象

Cpp:将字符串片段解析为元组

如果几何着色器处于活动状态,如何将信息从顶点着色器传递到片段着色器?

scrapy主动退出爬虫的代码片段(python3)

scrapy按顺序启动多个爬虫代码片段(python3)