阅读(2487) (0)

scrapy 2.3 Shell可用对象

2021-06-08 13:36:06 更新

Scrapy Shell自动从下载的页面创建一些方便的对象,例如 Response 对象与 Selector 对象(用于HTML和XML内容)。

这些对象是:

crawler -电流 Crawler 对象。spider -已知用于处理URL的蜘蛛,或 Spider 如果没有为当前URL找到spider,则为。request -A Request 上次提取的页的对象。您可以使用修改此请求 replace() 或者使用 fetch 捷径。response -A Response 包含上次提取的页的对象settings - the current Scrapy settings