Robots.TXT

Textdatei im Hauptverzeichnis der Website. Listet die Dateien und Ordner auf, die von den Spidern der Suchmaschinen im Rahmen des Suchmaschinen Marketing indexiert werden dürfen.