Zurück zum Glossar
Webhosting-Glossar
robots.txt
Datei, die Crawlern mitteilt, welche Seiten indexiert werden dürfen.
Verwandte Begriffe
Entdecken Sie verbundene Anleitungen und Tools
Datei, die Crawlern mitteilt, welche Seiten indexiert werden dürfen.
Entdecken Sie verbundene Anleitungen und Tools