Twitter a soif de visibilité et fait appel à Google, Bing, Yahoo!, Yandex

Twitter a soif de visibilité et fait appel à Google, Bing, Yahoo!, Yandex

Twitter modifie son fichier robots.txt. Les webmasters peuvent voir que Twitter autorise l’indexation de ses propres résultats de recherche – tweets et hashtags – dans les résultats de recherche de Google, Bing, Yahoo et Yandex.

Le changement du fichier robots.txt de Twitter a eu lieu ce mardi. Les webmasters attentifs peuvent voir dans le fichier que Twitter cite explicitement 4 robots de moteurs de recherche : GoogleBot, Slurp, Yandex et msnbot ( ?). Théoriquement le nom msnbot a été remplacé par bingbot dès octobre 2010. Chez Yahoo ! deux noms du robot de moteur de recherche sont acceptés : Slurp et Yahoo ! Slurp. Yandexbot est le robot du moteur de recherche Yandex, un moteur de recherche et portail spécifiquement russe.

En autorisant l’indexation de ses propres résultats de recherche Twitter montre son souhait d’attirer plus de monde sur son site de réseau social. Ca devrait être facile pour ce site de micro-blogging qui  a acquis une certaine autorité auprès des utilisateurs. En termes de référencement naturel  les résultats de recherche de Twitter pourraient s’afficher en tête des 1ères pages des moteurs de recherche pour des requêtes clés – surtout pendant les évènements. D’après Search Engine Land il en est autrement…

/Consignes de Google

Il est vrai que Google puisse ne pas accepter cela même si actuellement les résultats du moteur de recherche interne de Twitter sont déjà présents chez Google.fr. Dans ses consignes aux webmasters Google est clair :

« Utilisez le fichier robots.txt pour empêcher l’exploration des pages de résultats de recherche ou d’autres pages générées automatiquement par les moteurs de recherche et qui n’offrent aucun intérêt particulier pour les internautes. »

Ce que ne dit pas Search Engine Land, c’est que beaucoup de sites Internet sont pénalisés par Google justement parce qu’ils proposent ce type de contenus. Le lancement de Google Panda n’a pas facilité les choses. Toutefois, par rapport aux autres sites de piètre qualité, les contenus proposés par les résultats du moteur de recherche interne de Twitter sont uniques, autrement dit originaux.

/Google aime-t-il la concurrence ?

L’autre raison que Search Engine Land ne cite pas, c’est que Google possède son propre réseau social Google+, un réseau social qui peine encore à égaler son rival Facebook. L’arrivée d’un concurrent dans ses propres résultats de recherche pourrait bien être interprétée comme un bâton dans les roues.

Puisqu’il existe une forte concurrence entre les réseaux sociaux et puisque le contrat entre Twitter et Google n’a pas été renouvelé, les chances que Twitter atteigne ses objectifs de visibilité sont faibles. Pour Twitter ça serait l’occasion de préparer le terrain pour rejoindre les plaignants…

Source : sociable.co