02/09/2017
Il modo in cui viene scansionato il tuo sito web è in parte "istruito" da un file chiamato robots.txt, innanzitutto verifica che esista sul tuo sito web scrivendo www.tuodominio.it/robots.txt
In alcuni casi questo file potrebbe contenere informazioni preziose riguardo problemi di visibilità ed del tuo sito web, se ti va puoi approfondire l'argomento in questo post del mio blog https://goo.gl/X9x1LP
Come indicare ai crawler quali risorse bloccare, la posizione della sitemap e molto altro. File fondamentale per completare un progetto seo