Google : utilisation des flux RSS/Atom pour découvrir de nouvelles URL

Dans un article datant du 29 octobre 2009, Google nous apporte une information intéressante sur sa façon de découvrir de nouvelles url. Que ce soit par les liens parcourus par le robot ou les url soumises, le moteur a de nombreuses possibilité pour indexer de nouvelles pages. Depuis peu, Google utilise également les flux RSS/Atom pour découvrir de nouvelles url. Les flux RSS ont été très employés ses dernières années comme mécanisme de publication de contenu, ils permettent aux internautes d'accéder directement aux nouvelles pages mises à disposition par les éditeurs. Ces nouveaux contenus sont ainsi indexés plus rapidement par Google qu'avec les méthodes traditionnelles. Il est donc important de vous assurer de ne pas avoir bloqué l'accès à vos flux dans le fichier robots.txt, pour cela, vous pouvez utiliser Google Webmaster Tools et vérifier que les pages du flux sont accessibles par Googlebot.