Löse häufige URL-, Authentifizierungs-, Crawl-Umfang- und Leistungsherausforderungen.
Die Anwendungsprotokolle sind die primäre Diagnosequelle im Indexer der Knowledgebase. Verwende sie zusammen mit den Crawl-Steuerungen, um ungültige URLs, Authentifizierungsfehler, übermäßigen Crawl-Umfang, lange Verarbeitungszeiten und hohe Ressourcennutzung zu identifizieren.
Protokolle überprüfen
Die Logs zeigen:
- URLs, die durchsucht werden
- entdeckte und verarbeitete Seiten
- Fortschrittsinformationen
- Fehler und Warnungen
- Abschlussstatus
Überprüfe die Logs zuerst, wenn ein Crawl einen Fehler meldet oder sich nicht wie erwartet verhält.
Authentifizierungsprobleme bei geschützten Websites beheben
Geschützter Website-Content kann eine Authentifizierungs-URL erfordern.
- Bestätige, dass eine Authentifizierungs-URL konfiguriert ist.
- Führe den Crawl im Discovery-Modus aus.
- Überprüfe die Logs auf Authentifizierungsfehler oder Warnungen.
Öffentliche Websites benötigen keine Authentifizierungs-URL.
Authentifizierungsprobleme bei geschützten Websites beheben
Geschützter Website-Content kann eine Authentifizierungs-URL erfordern.
- Bestätige, dass eine Authentifizierungs-URL konfiguriert ist.
- Führe den Crawl im Discovery-Modus aus.
- Überprüfe die Logs auf Authentifizierungsfehler oder Warnungen.
Öffentliche Websites benötigen keine Authentifizierungs-URL.
Löse Fehler aufgrund ungültiger URLs
Der Indexer akzeptiert nur HTTPS-URLs.
Überprüfe Folgendes:
- Jede URL beginnt mit https://.
- Jede URL wird in einer separaten Zeile angezeigt.
- Die URL ist keine lokale Netzwerkadresse.
- Die URL ist keine Loopback-Adresse.
- Die URL verwendet keine eingeschränkte IP-Adresse.
Lokale Netzwerkadressen werden aus Sicherheitsgründen blockiert. Jede ungültige URL generiert einen Fehler in den Logs.
Korrigiere die URL und starte den Crawl erneut.
Authentifizierungsprobleme bei der Knowledgebase beheben
Der Upload-Modus erfordert eine Authentifizierung bei der Knowledgebase in Acrobat.
Falls die Authentifizierung fehlschlägt:
- Bestätige, dass deine Anmeldedaten für die Knowledgebase gültig sind.
- Lösche den Discovery-Modus.
- Wähle das Aktualisierungssymbol neben der Sammlungsauswahl aus.
- Schließe den Authentifizierungsprozess im Browser-Fenster ab.
Falls das Session-Token während eines Vorgangs abläuft, versucht der Indexer, es zu aktualisieren. Authentifizierungs-Token werden sicher verwaltet und nicht dauerhaft gespeichert.
Wähle Abmelden aus, um das aktuelle Session-Token für ungültig zu erklären.
Authentifizierungsprobleme bei geschützten Websites beheben
Geschützter Website-Content kann eine Authentifizierungs-URL erfordern.
- Bestätige, dass eine Authentifizierungs-URL konfiguriert ist.
- Führe den Crawl im Discovery-Modus aus.
- Überprüfe die Logs auf Authentifizierungsfehler oder Warnungen.
Öffentliche Websites benötigen keine Authentifizierungs-URL.
Die Zielsammlung ist nicht aufgeführt
Die Sammlungsliste enthält nur Sammlungen, für die du Schreibzugriff hast.
- Deaktiviere den Discovery-Modus, um den Upload-Modus zu aktivieren.
- Wähle das Aktualisierungssymbol neben der Sammlungsauswahl aus.
- Führe die Authentifizierung durch, wenn du dazu aufgefordert wirst.
- Bestätige, dass du Schreibzugriff auf die Zielsammlung hast.
- Aktualisiere die Sammlungsliste bei Bedarf.
Der Crawl umfasst zu viele Seiten
Deep-Crawl-Einstellungen können dazu führen, dass der Indexer mehr Links verfolgt als beabsichtigt.
So reduzierst du den Crawl-Umfang:
- Reduziere die Crawl-Tiefe.
- Reduziere das Seitenlimit.
- Verwende eine Start-URL für einen bestimmten Website-Bereich anstelle einer ganzen Domain.
- Teste die überarbeitete Konfiguration im Discovery-Modus.
Crawling dauert zu lange
Hohe Seitenlimits und tiefe Crawltiefen können die Verarbeitungszeit erhöhen.
Versuche die folgenden Schritte:
- Reduziere das Seitenlimit.
- Verringere die Crawltiefe.
- Wähle einen kleineren Website-Bereich als Ziel.
- Überprüfe die Fortschrittsinformationen in den Logs.
Der Computer verwendet zu viele Ressourcen
Höhere Worker-Anzahlen erhöhen die parallele Verarbeitung und Ressourcennutzung.
- Wähle Anhalten aus, um den aktuellen Vorgang zu beenden.
- Reduziere die Anzahl der Worker.
- Starte den Crawling-Vorgang erneut.
Die Standard-Worker-Anzahl ist 4. Der empfohlene Bereich für die meisten Systeme liegt bei 4–8, abhängig von der Anzahl der Prozessorkerne.
Best Practices
- Beginne mit einer geringen Crawl-Tiefe und einem kleinen Seitenlimit.
- Teste die Konfiguration im Discovery-Modus, bevor du Inhalt hochlädst.
- Überprüfe Warnungen und Fehler in den Logs.
- Reduziere die Crawl-Tiefe oder das Seitenlimit, wenn der Crawl-Umfang zu weit gefasst ist.
- Reduziere die Anzahl der Worker, wenn die Ressourcennutzung hoch ist.
- Vermeide übermäßiges Crawlen derselben Website innerhalb kurzer Zeit.
Wissenswertes
- Wähle Anhalten aus, um den aktuellen Vorgang zu beenden.
- Ungültige URLs generieren Fehler in den Protokollen.
- Höhere Anzahlen von Workern können die Verarbeitungsgeschwindigkeit verbessern, verbrauchen aber mehr Systemressourcen.
- Hohe Seitenlimits können die Verarbeitungszeit verlängern.
- Eine große Crawl-Tiefe kann mehr Seiten als beabsichtigt einschließen.
