Öffne den Knowledgebase-Indexer.
Definiere die Ausgangspunkte, den Umfang und die Verarbeitungsgrenzwerte für einen Website-Crawl.
Der Knowledgebase Indexer beginnt mit einer oder mehreren Ziel-URLs und folgt Links gemäß den Einstellungen, die du definierst. Konfiguriere zuerst den Crawl und verwende dann den Discovery-Modus, um ihn zu testen, ohne Inhalte hochzuladen, oder den Upload-Modus, um indizierte Inhalte zu einer Sammlung einer Knowledgebase in Acrobat hinzuzufügen.
Vorbereitungsmaßnahmen
- Knowledgebase-Indexer installieren
- Stelle sicher, dass der Computer eine Internetverbindung hat.
- Identifiziere eine oder mehrere HTTPS-URLs zum Crawlen.
Website-Crawl konfigurieren
Gib unter Ziel-URLs eine oder mehrere Start-URLs ein.
Gib jede URL in einer separaten Zeile ein. URLs müssen mit https:// beginnen.
Lege die Crawl-Tiefe fest.
Die Crawl-Tiefe bestimmt, wie vielen Ebenen von Links die Indizierung von den Start-URLs aus folgt.
- Ein Wert von 1 verarbeitet Seiten, die direkt von den Start-URLs verlinkt sind.
- Höhere Werte folgen zusätzlichen Ebenen von Links.
Lege das Seitenlimit fest.
Das Seitenlimit beschränkt die maximale Anzahl von Seiten, die während des Crawls verarbeitet werden.
- Standard: 5
- Maximal 5.000
Lege die Anzahl der Worker fest.
Worker steuern, wie viele Crawler Seiten parallel verarbeiten.
- Standard: 4
- Empfohlen für die meisten Systeme: 4–8, abhängig von der Anzahl der Prozessorkerne.
Gib eine Authentifizierungs-URL ein, wenn die Indizierung sich authentifizieren muss, bevor geschützte Inhalte gecrawlt werden.
Öffentliche Websites erfordern diesen Wert nicht.
Wie die Crawl-Einstellungen funktionieren
Ziel-URLs |
Definiert, wo der Crawl beginnt. |
Gib eine HTTPS-URL pro Zeile ein. |
Crawl-Tiefe |
Bestimmt, wie vielen Ebenen von Verknüpfungen der Indexer folgt. |
Ein Wert von 1 folgt Verknüpfungen direkt von den Start-URLs. |
Seitenbegrenzung |
Beschränkt die maximale Anzahl der verarbeiteten Seiten. |
Standard: 5; Maximum: 5.000. |
Anzahl der Worker |
Steuert, wie viele Crawler Seiten parallel verarbeiten. |
Standard: 4; empfohlen: 4–8 für die meisten Systeme. |
Authentifizierungs-URL |
Stellt eine URL bereit, die der Indexer zur Authentifizierung verwenden kann, bevor er geschützte Inhalte crawlt. |
Optional für öffentliche Websites. |
Best Practices
- Beginne mit einer geringen Crawl-Tiefe und einem kleinen Seitenlimit.
- Ziele auf einen bestimmten Website-Bereich statt auf eine ganze Domain ab.
- Erhöhe die Anzahl der Worker nur, wenn der Computer über ausreichende Ressourcen verfügt.
- Teste das konfigurierte Crawlen im Discovery-Modus, bevor du Inhalte hochlädst.
Wissenswertes
- Nur HTTPS-URLs werden unterstützt.
- Lokale Netzwerkadressen sind als Sicherheitsmaßnahme blockiert.
- Loopback-Adressen und bestimmte eingeschränkte IP-Adressen werden ebenfalls abgelehnt.
- Ungültige URLs generieren Fehler in den Protokollen, wenn der Crawl läuft.
- Höhere Crawltiefen können mehr Seiten einschließen als beabsichtigt.
- Große Seitenlimits können die Verarbeitungszeit erhöhen.
- Höhere Anzahlen von Workern können die Geschwindigkeit verbessern, verwenden aber mehr Systemressourcen.
- Die Konfiguration des Crawls startet keine Verarbeitung und lädt keine Inhalte hoch.
Nächste Schritte
- Um das konfigurierte Crawlen zu testen, ohne Inhalte hochzuladen, siehe [Website-Content entdecken].
- Um das Crawlen auszuführen und indizierten Content hochzuladen, siehe [Website-Content in eine Sammlung hochladen].