Le premier fichier que va consulter un robot d’exploration (crawler) quand il va venir visiter votre site. Découvrez nos articles autour du robots.txt
Temps de lecture : 3 minutes Ah, les bots ! Ces programmes automatisés qui parcourent le Web 24h/24, 7j/7. Certains sont inoffensifs, voire utiles, mais d’autres… pas tellement. Selon une récente étude d’Akamai, ces derniers risquent de devenir…
Temps de lecture : 3 minutes Moins de trafic inutile sur vos serveurs Sur LinkedIn, Gary Illyes, analyste chez Google, a rappelé les conseils de longue date pour les propriétaires de sites web : utiliser le fichier robots.txt…
Temps de lecture : 4 minutes Dans l’univers de la robotique, la course à la performance est sans fin. Et Mitsubishi vient de franchir une étape majeure avec son TOKUFASTbot, un robot capable de résoudre un puzzle de…
Temps de lecture : 6 minutes Introduction : les enfants et leur confiance envers les robots Eh bien, qui l’aurait cru ? Une récente étude publiée dans la revue Computers in Human Behaviors nous révèle que nos chères…
Temps de lecture : 3 minutes Eh bien, commençons par une question fondamentale : pourquoi diable devriez-vous vous soucier des liens internes de votre site web ? En bref, parce que c’est l’un des piliers du référencement naturel….
Temps de lecture : 4 minutes Ouf, ce n’est pas une nouvelle techno à la mode dont on ne comprend que le nom ! Voici l’incontournable fichier robots.txt, ce vieil ami des webmasters qui gère l’accès de votre…