Unter "SEO" [a] findest Du den Menüpunkt "Robots" [b].
Eine robots.txt-Datei teilt Suchmaschinen mit, ob sie auf bestimmte Teile einer Website zugreifen und sie in der Folge crawlen dürfen. Diese Datei muss den Namen “robots.txt” tragen und sich im Hauptverzeichnis Deiner Website befinden.
Per Mausklick auf "Robots" öffnet sich das Fenster Robots.
Du hast hier die Möglichkeit, eine robots.txt-Datei hochzuladen [c], herunterzuladen [e] oder zu entfernen [d]. Der Inhalt [f] der hochgeladenen robots.txt-Datei wird im unteren Bereich des Robots-Fensters dargestellt.