Erstellen Sie nun die Datei 'robots.txt' in Ihrem Stammverzeichnis. Kopieren Sie den obigen Text und fuegen Sie ihn in die Textdatei ein.
Generieren Sie effektive robots.txt-Dateien, die dazu beitragen, dass Google und andere Suchmaschinen Ihre Website richtig crawlen und indexieren.