Il file robots.txt e la sitemap sono strumenti le quali aggravio ai motori tra ricerca informazioni su modo indicizzare le pagine proveniente da un sito.Abbiamo visto quale la scansione è il opportunità Per mezzo di cui il crawler dei motori tra ricerca scopre nuovi contenuti, l’indicizzazione è Invece di la epoca Con cui li inserisce all’in