Der robots.txt-Tester ist jetzt im Bing Webmaster Tool enthalten. Wenn man die URL der robots.txt seiner Seite eingibt, wird sie mit dem BingBot und Bing’s Ad-Bot getestet. Man sieht unter anderem, wie sich die robots.txt-Datei von HTTP zu HTTPS unterscheidet. Im Bing-Hilfedokument steht, dass der “Robots.txt-Tester Webmastern hilft, ihre robots.txt-Datei zu analysieren und Probleme anzeigt, die verhindern dass sie von Bing und anderen Robotern optimal gecrawlt werden”.
Jetzt ist ersichtlich, wie der BingBot Inhalte sieht. Bei Indizierungs- oder Ranking-Problemen mit Bing liefert das Tool wichtige Erkenntnisse zur Behebung.
Anbei ein Screenshot des Tools von searchengineland.com:
