Tool für die Robots.txt

Johannes Beus
Veröffentlicht: 08.02.2006
Johannes Beus
Johannes Beus ist Gründer und Geschäftsführer von SISTRIX.
0 Kommentare 0

Über Google Sitemaps stellt Google jetzt ein Tool zur Überprüfung der eigenen robots.txt bereit. Das Tool zeigt einem nach Auslesen der Datei die erlaubten sowie verbotenen Verzeichnisse an.

Ähnliche Beiträge
Jetzt neu: die Influencer Suchmaschine von SISTRIX
SISTRIX sorgt ab heute für Transparenz in den großen Influencer-Netzwerken. Mit unserer neuen Influencer-Suche kannst du...
Johannes Beus
23. September 2020
Der Googlebot lernt HTTP/2
Google hat heute angekündigt, dass der Googlecrawler Webseiten künftig auch über das HTTP/2-Protokoll crawlen kann. HTTP/2...
Johannes Beus
17. September 2020
Google Core Update Recovery so nebenbei?
Google bemüht sich mal wieder, Verwirrung zu schaffen. Bislang war die Aussage zur möglichen Recovery nach einem Google...
Johannes Beus
15. September 2020
Kommentare
Die Kommentarfunktion wird 30 Tage nach der Veröffentlichung des Beitrags deaktiviert.