Bingbot ist der Crawler von Microsoft Bing. Sein Index versorgt neben Bing auch Yahoo, DuckDuckGo und Ecosia sowie mehrere Dienste, die Antworten aus dem Web zusammenstellen.
- Bingbot
Der Crawler von Microsoft Bing, dessen Index auch mehrere KI-Dienste beliefert.
Beispiel: „Bingbot rief die Sitemap täglich ab, Googlebot nur jeden dritten Tag.“Kennung in der robots.txt ist
bingbot. Microsoft bietet zusätzlich eine Schnittstelle an, über die sich neue Adressen melden lassen, statt auf den Abruf zu warten.Der Vorgänger hieß msnbot und wurde 2010 abgelöst.
Was Bingbot von Googlebot unterscheidet
Vor allem die Reihenfolge. Bing legt mehr Gewicht auf die Meldung neuer Adressen durch den Betreiber und bietet dafür eine eigene Schnittstelle an; Google verlässt sich stärker auf das eigene Abrufen.
Zweiter Unterschied ist die Ausführung von JavaScript: Bing verarbeitet sie, weist in der eigenen Dokumentation aber darauf hin, dass serverseitig ausgelieferte Inhalte zuverlässiger aufgenommen werden; siehe JavaScript-SEO.
Warum der Index von Bingbot weiter reicht als Bing
Weil er weitergereicht wird. Suchmaschinen wie DuckDuckGo und Ecosia beziehen ihre Treffer daraus, und mehrere Antwortsysteme haben ihre Websuche zeitweise oder dauerhaft darauf gestützt.
Für Websites heißt das: Wer dort nicht steht, fehlt in mehr Anwendungen als nur in Bing. Die Prüfung dauert eine Minute, weil sich der eigene Bestand in den Bing Webmaster Tools genauso ansehen lässt wie in der Search Console.
Was Bingbot auf dem Server anrichten kann
Mehr Last als erwartet. In Bestandsaufnahmen fällt er regelmäßig durch hohe Abrufzahlen auf, besonders bei Shops mit vielen Filteradressen.
Steuern lässt sich das über die Einstellung zur Abrufgeschwindigkeit in den Bing Webmaster Tools und über das Aussperren von Filteradressen in der robots.txt. Was dabei zu beachten ist, steht beim Crawl-Budget.