Wenn Google (und andere Suchmaschinen) beginnen, Ihre Website zu indexieren, ist es üblich, dass sie viele unerwünschte URLs aufnehmen, die von Ihren RSS-Feeds stammen.
Google betrachtet diese URLs als eindeutig und versucht, sie separat zu indexieren. Dies schadet zwar nicht Ihrem Ranking (Google ist schlau genug, um diese Dinge herauszufinden), aber es verbraucht die für Ihre Website zugewiesene Crawl-Quota und kann wiederum zu Verzögerungen bei der Indexierung führen.
HINWEIS:
Die Crawl-Quota betrifft hauptsächlich Websites mit vielen URLs. Benutzer mit kleinen Websites sollten keine Crawl-Quota haben.
Um dem entgegenzuwirken, haben wir eine neue Funktion Crawl Cleanup in unseren Einstellungen für Erweitertes Suchmaschinen-Ergebnis-Schema eingeführt, mit der unsere Benutzer feinabstimmen können, was Google aufnehmen kann.
WICHTIG:
Diese Einstellungen sind für fortgeschrittene Benutzer gedacht, die die möglichen Auswirkungen dieser Änderungen verstehen. Wenn Sie sich bei diesen Einstellungen nicht sicher sind, wenden Sie sich bitte an unser Support-Team.
In diesem Artikel
Tutorial-Video zum Deaktivieren von RSS-Feeds
Sehen Sie sich unten unser Video an, wie Sie RSS-Feeds in WordPress deaktivieren:
Crawl Cleanup aktivieren
Um die Einstellungen für Crawl Cleanup zu aktivieren, klicken Sie im All in One SEO-Menü auf Suchmaschinen-Ergebnis-Schema und dann auf den Tab Erweitert.
Scrollen Sie zum Ende der Seite und aktivieren Sie den Schalter für Crawl Cleanup.

Nach der Aktivierung werden Ihnen im Tab RSS-Feeds Optionen zur Verwaltung Ihrer RSS-Feeds angezeigt.
Einstellungen für RSS-Feeds
WordPress enthält viele RSS-Feeds auf Ihrer Website, darunter auch Feeds, die überhaupt nicht notwendig sind. Wenn Sie Crawl Cleanup aktivieren, deaktivieren wir automatisch die meisten Feeds und behalten Ihren Haupt-Website-Feed und einige zusätzliche wichtige Feeds bei.
Globaler RSS-Feed
Der globale RSS-Feed ist die Methode, mit der Benutzer neue Inhalte abonnieren, die auf Ihrer Website erstellt wurden. Dies ist standardmäßig mit Crawl Cleanup aktiviert und wir empfehlen NICHT, ihn zu deaktivieren.

WICHTIG:
Das Deaktivieren des globalen RSS-Feeds wird NICHT empfohlen. Dies verhindert, dass Benutzer Ihre Inhalte abonnieren, und kann Ihre SEO-Rankings beeinträchtigen.
Globaler RSS-Feed für Kommentare
Der globale Kommentar-Feed ermöglicht es Benutzern, neue Kommentare zu abonnieren, die zu Ihrer Website hinzugefügt wurden. Dies ist standardmäßig mit Crawl Cleanup deaktiviert.

Feed für statische Beitragsseite
Wenn Sie eine statische Seite für Ihre Beiträge verwenden (z. B. https://ihre-seite.de/blog/), dann wird diese Option angezeigt. Dies ist standardmäßig mit Crawl Cleanup aktiviert und wir empfehlen NICHT, sie zu deaktivieren.

WICHTIG:
Das Deaktivieren des Feeds für statische Beitragsseiten wird NICHT empfohlen. Dies verhindert, dass Benutzer Ihre Inhalte abonnieren, und kann Ihre SEO-Rankings beeinträchtigen.
Autoren-Feeds
Der Autoren-Feed ermöglicht es Ihren Benutzern, neue Inhalte von einem bestimmten Autor zu abonnieren. Dies ist standardmäßig mit Crawl Cleanup aktiviert.

Feed für Beitrags-Kommentare
Der Feed für Beitrags-Kommentare ermöglicht es Ihren Benutzern, neue Kommentare zu einer bestimmten Seite oder einem bestimmten Beitrag zu abonnieren. Dies ist standardmäßig mit Crawl Cleanup deaktiviert.

Such-Feed
Der Such-Feed ermöglicht es Besuchern, Ihre Inhalte basierend auf einem bestimmten Suchbegriff zu abonnieren. Dies ist standardmäßig mit Crawl Cleanup deaktiviert.

Feed für Anhänge
Der Feed für Anhänge ermöglicht es Benutzern, Änderungen an Ihrer Website zu abonnieren, die an Medienkategorien vorgenommen wurden. Dies ist standardmäßig mit Crawl Cleanup deaktiviert.

RSS-Feeds mit Paginierung
Die paginierten RSS-Feeds sind für Beiträge oder Seiten, die paginiert sind. Dies ist standardmäßig mit Crawl Cleanup deaktiviert.

Feeds für Beitragstyp-Archive
Dies steuert, welche Beitragsart-Archiv-Feeds aktiviert sind. Standardmäßig sind mit Crawl Cleanup keine Beitragsart-Archiv-Feeds aktiviert.

Taxonomie-Feeds
Dies steuert, welche Taxonomie-Feeds aktiviert sind. Standardmäßig ist mit Crawl Cleanup nur der Kategorie-Feed aktiviert.

Atom-Feed
Dies ist ein globaler Feed Ihrer Website, der im Atom-Format ausgegeben wird. Dies ist standardmäßig mit Crawl Cleanup deaktiviert.

RDF/RSS 1.0 Feed
Dies ist ein globaler Feed Ihrer Website, der im RDF/RSS 1.0 Format ausgegeben wird. Dies ist standardmäßig mit Crawl Cleanup deaktiviert.

HINWEIS:
Wenn Sie für einen der oben genannten Feeds Deaktiviert auswählen, wird der Feed vollständig deaktiviert und jeder, der die URL des Feeds aufruft, wird zur Homepage oder zum relevantesten Archiv weitergeleitet, z. B. zum Autorenarchiv für Autoren-Feeds.
Einstellungen für unerwünschte Bots
Auf der Registerkarte Unerwünschte Bots können Sie steuern, welche Bots am Crawlen Ihrer Website gehindert werden.

Sie können jeden der Crawler auswählen, um sie zu blockieren, oder Sie können Alle KI-Crawler auswählen, um alle aufgeführten zu blockieren.
HINWEIS:
Diese Funktion verwendet die von WordPress erstellte robots.txt, um diese Crawler zu blockieren. Wenn Sie eines der Kontrollkästchen unter KI-Crawler blockieren auswählen, fügt All in One SEO automatisch Regeln zur dynamischen robots.txt hinzu, die WordPress erstellt.
Wenn Sie eine statische robots.txt-Datei haben, schreibt All in One SEO nicht in diese Datei. Wir empfehlen, jede statische Datei zu löschen und die dynamische robots.txt zu verwenden, die von WordPress bereitgestellt wird.
Einstellungen zur Bereinigung der internen Seitensuche
Auf der Registerkarte Bereinigung der internen Seitensuche können Sie die URLs steuern, die für die Suchseiten auf Ihrer Website verwendet werden. Dies kann helfen, das Crawling zu reduzieren und SEO-Spammer zu bekämpfen, die bekannte Spam-Angriffe verwenden.

Einstellungen für Suchfilter
Die erste Einstellung ist Suche filtern, die, wenn aktiviert, die Einstellungen zum Filtern der Such-URLs anzeigt.

Die Einstellungen für Suche filtern sind:
- Max. Anzahl Zeichen – Diese Einstellung begrenzt die Länge von internen Seitensuchanfragen, um die Auswirkungen von Spam-Angriffen und verwirrenden URLs zu reduzieren. Wir empfehlen die Eingabe einer Zahl zwischen 1 und 50 Zeichen. Der Standardwert ist auf 50 Zeichen eingestellt.
- Emojis und andere Sonderzeichen – Diese Einstellung blockiert interne Seitensuchen, die komplexe und nicht-alphanumerische Zeichen wie Emojis enthalten.
- Häufige Spam-Muster – Diese Einstellung blockiert interne Seitensuchen, die den Mustern bekannter Spam-Angriffe entsprechen.
Einstellung: Pretty-URLs in „RAW“-URLs umleiten
Die nächste Einstellung nach Suche filtern ist Pretty-URLs in „RAW“-URLs umleiten. Dies leitet Pretty-Such-URLs wie /search/ zur WordPress-Standardeinstellung /?s= um. Dies kann Such-URLs konsolidieren und das Crawling dieser URLs reduzieren.
Einstellung zum Blockieren des Crawlens von internen Website-Such-URLs
Die letzte Einstellung ist Crawling von internen Seitensuch-URLs blockieren. Dies fügt der von WordPress erstellten robots.txt eine Disallow-Regel hinzu, um das Crawling von URLs für Suchseiten zu verhindern. Dies reduziert unnötiges Crawling Ihrer Website.
HINWEIS:
Diese Einstellung verwendet die von WordPress erstellte robots.txt, um Crawler am Crawling dieser URLs zu hindern. Wenn Sie die Einstellung Crawling von internen Seitensuch-URLs blockieren aktivieren, fügt All in One SEO automatisch Regeln zur dynamischen robots.txt hinzu, die WordPress erstellt.
Wenn Sie eine statische robots.txt-Datei haben, schreibt All in One SEO nicht in diese Datei. Wir empfehlen, jede statische Datei zu löschen und die dynamische robots.txt zu verwenden, die von WordPress bereitgestellt wird.