Forum Rank Seo

Forum SEO pour webmasters et blogueurs !

 


  • Publicités

Comment créer un fichier robots.txt

Posez vos questions pour l'amélioration de votre positionnement.

Comment créer un fichier robots.txt

Message par MrJim » 19 Jan 2014, 20:50

J'aimerai avoir quelques infos voir des liens utiles pour créer un fichier Bot.
J'ai lu plusieurs sites et topic déjà mais je n'arrive pas trop à suivre certains sites.
J'aimerai savoir ce qui doit se trouver concrètement dans un fichier robot.tkt

Merci :pc:
Avatar de l’utilisateur
MrJim
Membre Certifié
Membre Certifié
 
Message(s) : 557
Enregistré le: 21 Août 2013, 08:32
A remercié: 23 fois
Remercié: 32 fois

Publicités

Re: Comment créer un Bot

Message par Jimcail » 19 Jan 2014, 21:47

Tu peux t'aider de ce site http://www.robotstxt.org/robotstxt.html

J'ai un mp a t'envoyer là...
En grève de signature :)
Avatar de l’utilisateur
Jimcail
Administrateur
Administrateur
 
Message(s) : 4100
Enregistré le: 08 Juin 2013, 16:38
Localisation : Angers
A remercié: 552 fois
Remercié: 261 fois

Re: Comment créer un Bot

Message par BrunoT » 19 Jan 2014, 22:05

Bonsoir,

Je vais éditer le titre de ton topic, car ça n'a rien à voir avec ta demande.
Avatar de l’utilisateur
BrunoT
V.I.P
V.I.P
 
Message(s) : 3750
Enregistré le: 08 Juin 2013, 18:43
Localisation : Rethel
A remercié: 490 fois
Remercié: 360 fois

Re: Comment créer un fichier robot.txt

Message par gorchfock » 20 Jan 2014, 02:02

Alors déjà :
robot.txt
robot.tkt
robots.tkt
....

Ça ne marchera pas.

Par contre écrit : robots.txt (avec un pluriel à robot) là ça marchera. ;)
Avatar de l’utilisateur
gorchfock
Membre Certifié
Membre Certifié
 
Message(s) : 577
Enregistré le: 08 Juin 2013, 23:11
Localisation : quelque part dans l'univers
A remercié: 10 fois
Remercié: 8 fois

Re: Comment créer un fichier robot.txt

Message par MrJim » 20 Jan 2014, 07:46

gorchfock a écrit:Alors déjà :
robot.txt
robot.tkt
robots.tkt
....

Ça ne marchera pas.

Par contre écrit : robots.txt (avec un pluriel à robot) là ça marchera. ;)


LOOL :boulet:

Effectivement, je ne sais pas ce que j'avais bu hier soir.. LOL

Jimcail a écrit:Tu peux t'aider de ce site http://www.robotstxt.org/robotstxt.html

J'ai un mp a t'envoyer là...


Donc si j'ai bien compris, 3 lignes sont suffisantes pour un fichier robots.txt de base ?
Code : Tout sélectionner
User-agent: *
Disallow: /cgi-bin/
Disallow: /tmp/
Pour gagner des cadeaux, visitez Le guide de jeux en ligne
Avatar de l’utilisateur
MrJim
Membre Certifié
Membre Certifié
 
Message(s) : 557
Enregistré le: 21 Août 2013, 08:32
A remercié: 23 fois
Remercié: 32 fois

Re: Comment créer un fichier robots.txt

Message par Cyd » 20 Jan 2014, 11:16

Alors déjà, ne pas confondre le robots.txt et le bot. Rien à voir (je pense qu'il vaudrait mieux supprimer le lien dans le post initial).

Pour résumer, le fichier robots.txt te sert à donner des indications aux spiders (les robots des différents moteurs de recherche qui vont venir crawler ton site). En gros, tu vas leur dire là où ils peuvent aller (mais souvent ce n'est pas utile car par défaut ils vont partout) et surtout leur indiquer ce qu'ils ne doivent pas aller voir et donc indexer.

Mais attention, le robots.txt n'est pas lu à chaque passage du robot.

Je te conseille deux très bons articles sur le sujet :
http://seinoseo.blogspot.fr/2013/10/le- ... txt_7.html
http://noviseo.fr/2013/01/larticle-ulti ... obots-txt/
SEO Junky et accro Excel !
Retrouvez-moi en détail ici.
Avatar de l’utilisateur
Cyd
V.I.P
V.I.P
 
Message(s) : 1669
Enregistré le: 14 Juin 2013, 16:20
Localisation : Rennes
A remercié: 106 fois
Remercié: 150 fois

Re: Comment créer un fichier robots.txt

Message par MrJim » 20 Jan 2014, 11:39

merci.
je lirais ca et modofierai mon poste ce soir tard qnd je rentre.
Hebergeur d'images sans inscription
Avatar de l’utilisateur
MrJim
Membre Certifié
Membre Certifié
 
Message(s) : 557
Enregistré le: 21 Août 2013, 08:32
A remercié: 23 fois
Remercié: 32 fois


Retour vers Demande d'aide



 


  • Articles en relation
    Réponses
    Consultation(s)
    Dernier message

Qui est en ligne

Utilisateurs parcourant ce forum : Aucun utilisateur inscrit et 1 invité

  • Publicités

Webmaster Jimcail.fr

Propulsé par phpBB® Forum Software © phpBB Group • Traduit par phpBB-fr.com
phpBB SEO
Theme created by StylerBB.net
cron