Lexikon · Technik
robots.txt
Steuert, welche Bereiche Google crawlen darf.
Die Datei robots.txt im Wurzelverzeichnis einer Webseite teilt Suchmaschinen mit, welche Bereiche sie indexieren dürfen und welche nicht.
Eine falsche robots.txt kann ganze Webseiten unsichtbar machen – deshalb prüfen wir diese Datei bei jedem Projekt sorgfältig.
Webseite vom Profi – Festpreis 399 €
Brauchen Sie robots.txt für Ihre eigene Webseite? Wir kümmern uns um Design, Technik und SEO – komplette Webseite zum Festpreis, in maximal 7 Werktagen online.