robots.txt

il nome di un file che, conservato nella directory radice ( root ) di un sito, permette di comunicare delle informazioni e istruzioni ai motori di ricerca, come l’esclusione di una o più cartelle o file dal processo di indicizzazione