Web 索引器概述

上次更新日期: 2026年10月12日

抓取网站内容,测试结果,并将索引页面添加到合集中。

知识库索引器是一个用于抓取网站内容的桌面应用程序。将其与 Acrobat 中的知识库配合使用,以检查抓取过程中发现的内容或将索引页面上传到收藏集中。

选择操作模式

索引器提供两种操作模式:

模式 适用场景
发现模式 抓取并处理网站内容,但不将其上载到合集中。
上载模式 抓取网站内容并将索引页面上载到您具有写入访问权限的合集中。

默认情况下会选中发现模式。

当您准备好向 知识库 进行身份验证、选择目标收藏集并上传内容时,请清除发现模式。

了解主要控件

该应用程序包含用于配置和运行抓取的控件:

控制 目的
目标 URL 定义抓取开始的位置。
抓取深度 控制索引器关注链接的层级数量。
页面限制 限制处理页面的最大数量。
工作线程数量 控制并行处理页面的抓取器数量。
身份验证 URL 为访问受保护的网站内容提供可选 URL。
发现模式 在发现模式和上传模式之间切换。
集合选择器 标识在上传模式下接收索引内容的集合。
日志 显示进度、发现和处理的页面、警告、错误和完成状态。
开始和停止 启动或停止抓取。
注销 使当前的知识库会话令牌失效。

索引工作流程的工作原理

典型的索引工作流程包括:

  1. 安装与您的计算机匹配的知识库索引器包。
  2. 输入一个或多个 HTTPS 起始 URL。
  3. 配置抓取深度、页面限制和工作线程数。
  4. 当网站包含受保护内容时,添加身份验证 URL。
  5. 在发现模式下运行抓取以检查其范围并识别错误。
  6. 切换到上传模式,进行身份验证,并选择一个可写集合。
  7. 运行抓取并监测日志,直到处理完成。

最佳实践

  • 从较浅的抓取深度和较小的页面限制开始。
  • 使用特定网站部分的起始 URL,而不是整个域。
  • 在上传内容之前,先在发现模式下测试抓取。
  • 审阅日志中的警告和错误。
  • 仅在计算机资源充足时才增加工作线程数量。
  • 避免在短时间内对同一网站进行过度抓取。

需要了解的事项

  • 仅支持 HTTPS URL。
  • 本地网络地址、环回地址和某些受限制的 IP 地址会被阻止。
  • 上传模式需要知识库帐户,但发现模式不需要。
  • 上传模式仅列出您拥有写入访问权限的集合。
  • 更高的抓取深度可能包含超出预期的更多内容。
  • 较大的页面限制可能会增加处理时间。
  • 更高的工作进程数量可以提高速度,但会使用更多系统资源。
  • 身份验证令牌得到安全处理,不会永久存储。