Strumenti SEO

Generatore di robots.txt online

Crea un robots.txt corretto: scegli la modalità, aggiungi i blocchi dai preset o i tuoi, e indica la sitemap e le direttive extra: il file si compone all'istante.

Funziona nel browser: i dati non vengono inviati a nessun server
Modalità
Preset rapidi (aggiungono blocchi)

Il file va nella radice del sito: sito.it/robots.txt. Una direttiva Disallow vuota significa «tutto permesso». Clean-param è supportata solo da Yandex, perciò finisce in una sezione separata User-agent: Yandex.

Non ti servono utility, ma dati su misura?

Raccogliamo e mettiamo in ordine i dati dai siti: prezzi, prodotti, contatti, recensioni — nel formato e con la frequenza che ti servono.