Ciao Utente e benvenuto nel Forix Forum!
Al fine di garantire una corretta navigazione, con la possibilità di usufruire di tutte le fantastiche funzioni che il forum ti offre, ti invitiamo a registrarti. La procedura di registrazione dura meno di 1 minuto, e fatto ciò, potrai subito navigare tra i migliaia di topic presenti nel sito, chiedendo aiuto inerente a qualsiasi cosa, oppure potrai arricchire la community pubblicando nuovi argomenti oppure commentando con riflessioni, risposte e critiche su argomenti già presenti.
Diventa parte attiva di questo sito. Ti aspettiamo!

Condividi
Andare in basso
avatar
Lover Member
<B>Posts</B> Posts : 2239
<B>Età</B> Età : 21
<B>Registrato Dal</B> Registrato Dal : 03.06.10
Visualizza il profilo

Il File Robots.txt

il Mar Lug 12 2011, 11:46
- Il file robots.txt, cos’è e a cosa serve ?
Il file Robots.txt (www.robotstxt.org) serve ad indicare agli spider quali directory NON visionare ed eventualmente bloccare user agent indesiderati. Il file Robots.txt è un semplice file txt che va creato nella root (directory iniziale) del sito (www.sito.it/robots.txt) e contiene 2 campi: User-agent che indica il nome dello spider e Disallow l’istruzione riferite allo spider .

Nel caso non vogliamo porre limiti agli spider è consigliato creare un file robots.txt vuoto per evitare che venga restituito ai motori l’ errore 404 (file non trovato).

- Esempi di istruzioni da inserire nel Robots.txt

Googlebot non deve visionare la directory ‘cartella_personale’

Codice:

User-agent: googlebot
Disallow: /cartella_personale/

_______________________________

Googlebot non deve visionare nulla

Codice:

User-agent: googlebot
Disallow: /

________________________________
Tutti gli spider non devono visionare la directory ‘cartella_personale’

Codice:

User-agent: *
Disallow: /cartella_personale/

____________________________

Non ci sono limitazioni per gli spider

Codice:

User-agent: *
Disallow:

______________________________

Fonte: giorgiotave.it
avatar
Lover Member
<B>Posts</B> Posts : 3300
<B>Età</B> Età : 21
<B>Registrato Dal</B> Registrato Dal : 31.07.10
Visualizza il profilo

Re: Il File Robots.txt

il Mar Lug 12 2011, 13:48
Non ne avevo mai sentito parlare di questo file robots... complimenti, bravo ;)
avatar

<B>Posts</B> Posts : 18
<B>Età</B> Età : 21
<B>Registrato Dal</B> Registrato Dal : 10.07.11
Visualizza il profilo

Re: Il File Robots.txt

il Mer Lug 13 2011, 08:26
Qualche mese fà realizzai una guida su come usare questo file robots.txt. E' veramente utile ma ormai tutti i CMS dal pannello di controllo hanno una funzione dedicata al file robots.txt
Contenuto sponsorizzato

Re: Il File Robots.txt

Torna in alto
Permessi di questa sezione del forum:
Non puoi rispondere agli argomenti in questo forum