Tra tutte le tecniche utilizzate dai motori di ricerca per recuperare informazioni su di un determinato sito internet, la sitemap risulta molto utilizzata. Quest’ultima non è altro che un file strutturato in un determinato modo, a seconda del protocollo che si utilizza (es. google usa XML), che và ad indicare ai crawler quali sezioni sono presenti in un sito internet. Utilizzare queste mappe comporta numerosi vantaggi, uno di questi è quello di favorire l’indicizzazione del proprio sito rendendo più facile la vita ai crawler soprattuto andando ad indicare sezioni che non possono essere raggiunte semplicemente attraverso un link ma ad esempio solo attraverso delle ricerche.

Per costruire una sitemap potrebbe non essere facile, specialmente se il sito che si vuole mappare è di grandi dimensioni. A facilitare la vita, ci pensano i Site Map Generator, che non sono altro che dei “semplici” script che analizzano un indirizzo base (fornito da noi) e costruiscono una mappa navigando da link a link, mantenendosi sempre nel proprio indirizzo base. Costruiscono così in pochissimo tempo un file ben strutturato con una lista di tutte le sezioni presenti in un sito. Se ci sono sezioni non raggiungibili tramite un link, allora dobbiamo provvedere alla modifica manuale della mappa.

Uno di questi Site Map Generator è questo:

http://www.xml-sitemaps.com/