Archives
Salut Erwan,
N'empêche que c'est bien que chaque webmaster puisse choisir s'il veut ou non être archivé grâce au tag meta robots.
Salut Jesus. Ben non justement, moi même j'ai développé un "petit" moteur de recherche qui n'a rien à faire du paramètre "cache" ou du parametre "index follow" etc donc en théorie il aspire tout... seul problème : je suis loin d'avoir les capacités de navigation de Google...
Ciaoooo
Salut Erwan.
Normalement, tu devrais lire le fichier robots.txt d'un site avant de suivre tous les liens et de l'indexer.
Sans quoi, tu auras peut être des mécontents qui considèrerons que ce moteur de recherche constitue une atteinte au caractère privé de certaines de leurs pages (dûment renseignées dans le robots.txt).
Même si ton moteur de recherche est basé sur l'inscription volontaire. Quelqu'un peut inscrire le site de quelqu'un d'autre sans lui demander son avis.
à+ Tristan
Ici pas de langage SMS du style eh mé c tro for t tou puiçan toa !
. Si je suis de bonne humeur et que j'ai le temps je traduis, mais j'ai maintenant plutôt tendance à supprimer.
Ajouter un commentaire ← PAS DE SMS !
oui oui sauf que si ta page n'est pas "CACHE" tu ne la verras quand même pas !!! Donc google reste THE KING