Tag: robots.txt

Gestione file robots da WMT

File Robots

Il robots.txt è un particolare file che è posizionato nella root di un dominio e permette di gestire l’accesso, e quindi l’indicizzazione, dei contenuti da parte dei crawler.

Il file robots è formato da una serie di istruzioni che vengono eseguite dagli spider dei motori di ricerca.

Ad esempio utilizzando il comando  “Disallow: /privato/”   è possibile evitare che gli spider indicizzino il contenuto della cartella “privato” del mio sito.

file robots, ROBOTS, robots.txt

Cookie Policy - Privacy Policy

Esperto SEO Srl - Viale Cesare Battisti, 179, 05100 Terni TR - C/F P.Iva 01512540558 - Tel.: +39 0744.409703 - Fax: +39 0744.429985