Aus unserem WordPress Lexikon:

Robots.txt

Eine Datei, die Suchmaschinen-Crawlern Anweisungen gibt, welche Verzeichnisse oder Dateien auf einem Server gecrawlt werden können oder sollen.


Hinterlassen Sie einen Kommentar