跳到主要内容

依赖设置

信息

此功能仅在 Crawlab 专业版 中可用。

依赖设置 是系统级控制项,用于管理 Crawlab 在整个集群中处理语言和运行时依赖的方式。它管控的是 依赖管理 的平台级行为——即语言环境(Python、Node.js、Go、Java)及爬虫所依赖的软件包的安装——而非任何单个爬虫的依赖。

在哪里找到

导航至 系统设置 → 依赖。该页面集中管理适用于每个节点和爬虫的全局选项,因此您可以一次性为整个平台配置依赖行为。

可配置项

这些设置控制爬虫运行时使用的系统级依赖管理,包括:

  • 自动依赖安装 —— 启用或禁用在任务执行前自动安装项目清单文件(例如 requirements.txtpackage.jsongo.modpom.xml)中声明的依赖。
  • 语言/运行时依赖管理 —— 跨节点解析和安装爬虫所需软件包依赖的默认行为。

由于这些是平台级的默认设置,此处的更改会影响所有爬虫的依赖处理,而不仅仅是单个项目。

相关内容

  • 依赖管理 —— 管理语言环境和软件包,包括安装、搜索和配置软件包源。