Eine robots.txt-Datei hinzufügen oder aktualisieren
In diesem Artikel wird beschrieben, wie Sie die robots.txt-Datei für jede Domain erstellen, bearbeiten, hochladen und validieren, die in Microsoft Dynamics 365 Commerce gehostet wird.
Unerwartetes oder ungesteuertes Crawlen Ihrer Website durch Suchmaschinen kann zu einer hohen Anzahl von 404-Seite nicht gefunden-Fehlern führen. Diese Fehler können zu Leistungsproblemen führen, wenn die Website auf die vielen Anforderungen nach Seiten reagiert, die nicht vorhanden sind. Um dieses Problem zu beheben, sollten Sie sicherstellen, dass Ihre Domain immer über eine aktuelle und gültige robots.txt-Datei verfügt, um Webcrawler anzuweisen, nur nach relevanten Seiten auf Ihrer Website zu suchen.
Gilt für
Dieser Artikel gilt für die folgenden Konfigurationen angewendet werden:
- Version: Commerce 10.0.16 oder höher
- Komponente: Business-to-Consumer (B2C) oder Business-to-Business (B2B)
- Funktionsbereich: Leistung der Commerce-Website
Voraussetzungen
Sie sind ein Systemadministrator in Ihrer Commerce-Instanz.
Abhängig von Ihrer Situation haben Sie entweder eine robots.txt-Datei auf Ihrem Computer erstellt oder eine Kopie heruntergeladen:
- Wenn Sie noch keine robots.txt-Datei für Ihre Domain hochgeladen haben, erstellen Sie eine neue Datei auf Ihrem Computer, indem Sie den folgenden Schritten folgen Ausschlussstandard für Roboter. Benutzen Sie die Beispieldatei robots.txt später in diesem Artikel als Ausgangspunkt.
- Wenn Sie zuvor eine robots.txt-Datei für Ihre Domain hochgeladen haben, laden Sie Sie laden Sie die vorhandene Datei herunter.
Schritte abgeschlossen
Gehen Sie folgendermaßen vor, um eine robots.txt-Datei in Commerce hochzuladen und zu bearbeiten.
- Öffnen Sie Ihre lokale Kopie der robots.txt-Datei.
- Bearbeiten Sie die Datei so, dass sie alle Einträge Nicht zulassen in der Beispieldatei robots.txt entählt.
- Vergewissern Sie sich, dass die Datei entsprechend Ausschlussstandard für Roboter entsprechend formatiert ist.
- Laden Sie die Datei auf Ihre Website hoch, indem Sie den Anweisungen in Laden Sie eine robots.txt-Datei hoch folgen.
Beispielinhalt der robots.txt-Datei
User-agent: *
Disallow: /signin
Disallow: /cart
Disallow: /*refiners=
Disallow: /*sorting=
Disallow: /*search?
Disallow: /*search=
Disallow: /*.woff
Disallow: /*.woff2
Disallow: /*skip=
Prüfen
Verwenden Sie die folgende Methode, um zu überprüfen, ob die Datei hinzugefügt wurde.
- Beschreibung oder Zweck: Überprüfen Sie, ob Ihre robots.txt-Datei für Ihre Domain verfügbar ist.
- Auszuführende Schritte: Öffnen Sie in einem Webbrowser die Seite unter <Ihre_Domäne>/robots.txt.
- Bestandenes Ergebnis: Sie können Ihre robots.txt-Datei erfolgreich anzeigen.