Scrapy教程

Scrapy 网络服务

说明

可以通过 JSON-RPC 控制正在运行的 Scrapy 网络爬虫。它由 JSONRPC_ENABLED 设置启用。此服务通过 JSON-RPC 2.0 协议提供对主要爬虫对象的访问。访问爬虫对象的端点是-
http://localhost:6080/crawler
下表包含一些显示网络服务行为的设置-
设置和描述 默认值
JSONRPC_ENABLED
这指的是 to 布尔值,它决定是否启用 Web 服务及其扩展。
true
JSONRPC_LOGFILE
这是指用于记录对 Web 服务发出的 HTTP 请求的文件。如果未设置,将使用标准 Scrapy 日志。
none
JSONRPC_PORT
这是指网络服务的端口范围。如果设置为none,则端口将被动态分配。
[6080, 7030]
JSONRPC_HOST
这是指 Web 服务应该监听的接口。
'127.0.0.1'
昵称: 邮箱:
Copyright © 2022 立地货 All Rights Reserved.
备案号:京ICP备14037608号-4