Aujourd’hui, trouver une information en ligne paraît si simple qu’on en oublie qu’il a fallu tout inventer. Au milieu des années 1990, il n’existait ni moteur de recherche aussi performant qu’aujourd’hui ni réflexe de taper une question dans une barre de recherche. Pour s’orienter, les internautes comptaient sur des listes de sites patiemment tenues à la main. De ces premiers inventaires sont nés des géants comme Yahoo!, des projets collaboratifs comme DMOZ, puis toute une génération d’annuaires francophones. Leur histoire éclaire la manière dont le web s’est organisé, et explique aussi pourquoi les annuaires ont aujourd’hui une place bien différente de celle qu’ils occupaient hier.
Le web des années 1990 : trouver un site relevait de l’aventure
Lorsque le World Wide Web, imaginé au CERN par Tim Berners-Lee, s’ouvre au grand public au début des années 1990, il ne compte encore que quelques centaines puis quelques milliers de sites. On les découvre en suivant des liens, en recopiant des adresses lues dans des magazines ou en consultant des pages de liste. La WWW Virtual Library, lancée dès 1991, est souvent citée comme l’un des tout premiers catalogues du web, organisé par sujets et entretenu par des spécialistes de chaque domaine. Les premiers moteurs de recherche apparaissent rapidement, mais leurs résultats restent rudimentaires : ils repèrent des mots dans les pages sans vraiment savoir lesquelles sont utiles. Pour un internaute de l’époque, une liste de sites choisie par un humain et rangée par thèmes est donc bien plus fiable. C’est dans ce contexte que l’annuaire devient la porte d’entrée naturelle du web. Pour une chronologie résumée, cette page consacrée à l’histoire des annuaires web reprend les grandes dates en un coup d’œil ; voici le récit plus détaillé.
1994 : Yahoo!, le guide de deux étudiants devenu géant
Au début de l’année 1994, deux doctorants de l’université Stanford, Jerry Yang et David Filo, commencent à classer leurs sites favoris dans une page intitulée « Jerry and David’s Guide to the World Wide Web ». La liste grossit vite, les catégories se multiplient et le guide est rebaptisé Yahoo! quelques mois plus tard. L’entreprise est créée en 1995 et connaît une croissance fulgurante. Le principe de Yahoo! Directory est simple : une arborescence de rubriques et de sous-rubriques, alimentée par des éditeurs salariés qui examinent les sites proposés et rédigent ou corrigent leurs descriptions. Être accepté dans Yahoo! devient un enjeu majeur pour toute entreprise présente sur internet, car une grande partie du trafic de l’époque passe par ses pages. Avec le temps, une procédure d’examen payante est mise en place pour les sites commerciaux. Pourtant, à mesure que le web grandit, l’annuaire peine à suivre. Yahoo! mise de plus en plus sur la recherche par mots-clés, s’appuie un temps sur des technologies de moteurs externes, puis développe les siennes. L’annuaire passe au second plan, jusqu’à sa fermeture définitive fin 2014, vingt ans après sa naissance.
1998 : DMOZ, l’annuaire ouvert construit par des bénévoles
En 1998, un petit projet baptisé GnuHoo, rapidement renommé NewHoo, propose une idée audacieuse : construire un annuaire géant grâce à des éditeurs bénévoles, chacun responsable d’une catégorie qu’il connaît bien. Le projet est racheté la même année par Netscape et devient l’Open Directory Project, plus connu sous le nom de DMOZ, abréviation de son adresse d’origine, directory.mozilla.org. Sa grande originalité tient à ses données, publiées sous licence libre. N’importe quel site peut réutiliser l’annuaire, et de nombreux portails et moteurs ne s’en privent pas. DMOZ devient ainsi une référence mondiale, décliné en de nombreuses langues, dont le français. Pour les webmasters, y être inscrit est considéré comme un véritable sésame, d’autant que l’annuaire est réputé pour son exigence. La licence libre a un autre effet, plus inattendu : de nombreux sites recopient les données de DMOZ pour se constituer un annuaire à peu de frais. Une fiche acceptée dans l’annuaire ouvert se retrouve ainsi dupliquée sur une multitude de clones, ce qui renforce encore l’attrait d’une inscription aux yeux des référenceurs de l’époque. L’exigence de DMOZ a toutefois son revers. Les délais de validation peuvent être très longs, certaines catégories restent sans éditeur actif et des soupçons de favoritisme circulent régulièrement sur les forums. Au fil des années 2010, l’activité décline. AOL, propriétaire du projet depuis le rachat de Netscape, annonce sa fermeture, effective en mars 2017. Une partie des anciens éditeurs poursuit l’aventure sous un nouveau nom, Curlie.
Google Directory : quand le moteur s’appuyait sur l’annuaire
Le lien entre moteurs et annuaires était à l’époque beaucoup plus étroit qu’on ne l’imagine. Au tout début des années 2000, Google propose son propre annuaire, Google Directory, construit à partir des données de DMOZ. Sa particularité : dans chaque catégorie, les sites sont présentés en tenant compte du PageRank, l’indicateur de popularité par les liens mis au point par les fondateurs de Google. Cette alliance illustre bien la période. Le moteur a besoin de la sélection humaine pour structurer le web, tandis que l’annuaire gagne une visibilité énorme grâce au moteur. Mais Google améliore sans cesse ses algorithmes, et les internautes prennent l’habitude de taper directement leur recherche. Google Directory, de moins en moins utilisé, ferme ses portes en 2011. L’influence de DMOZ sur Google ne s’arrête pas là. Pendant des années, le moteur utilise parfois les descriptions de l’annuaire ouvert pour composer l’extrait affiché sous un résultat. Les webmasters qui préfèrent leur propre texte disposent même d’une balise meta dédiée, « noodp », pour l’en empêcher.
Les années 2000 : l’âge d’or des annuaires SEO francophones
Dans le monde francophone, la fin des années 1990 voit naître des portails et annuaires nationaux, comme Nomade, qui accompagnent les débuts du grand public sur internet. Mais c’est au cours des années 2000 que les annuaires changent vraiment de nature. À cette époque, la barre d’outils de Google affiche une note de PageRank de 0 à 10 pour chaque page visitée. Les webmasters comprennent vite que les liens entrants font grimper cette note et, avec elle, leurs positions. Les annuaires deviennent alors un moyen commode d’obtenir des liens. Grâce à des scripts prêts à l’emploi, n’importe qui peut en créer un en quelques heures, et une multitude d’annuaires francophones voient le jour, souvent tenus par des passionnés de référencement. C’est l’époque des listes d’annuaires échangées sur les forums spécialisés, des soumissions en série, des liens retour exigés en contrepartie de l’inscription et des annuaires classés selon leur PageRank. Certains sont de véritables guides soigneusement modérés, d’autres de simples pages de liens sans aucune valeur pour l’internaute. Cette abondance attire l’attention de Google, qui finira par citer explicitement les liens issus d’annuaires de faible qualité parmi les pratiques de manipulation à éviter.
2012 : Penguin change la donne
En avril 2012, Google déploie une mise à jour baptisée Penguin, destinée à lutter contre les profils de liens artificiels. Les sites qui avaient accumulé des liens de mauvaise qualité, notamment depuis des annuaires sans modération, voient leur visibilité chuter. D’autres versions suivent, jusqu’à l’intégration de Penguin dans l’algorithme principal de Google en 2016. L’effet sur l’écosystème est brutal. De nombreux annuaires perdent leur intérêt, ferment ou sont laissés à l’abandon. Les webmasters deviennent prudents, parfois à l’excès, et le mot « annuaire » prend une connotation négative dans le milieu du référencement. Parallèlement, Google cesse en 2016 d’afficher publiquement le PageRank, ce qui met fin à une course aux chiffres qui avait largement alimenté la multiplication des annuaires.
Les grandes dates à retenir
Voici une chronologie simplifiée des principaux jalons :
- 1991 : lancement de la WWW Virtual Library, l’un des premiers catalogues du web.
- 1994 : naissance du guide de Jerry Yang et David Filo, qui prend vite le nom de Yahoo!
- 1998 : création de GnuHoo, qui devient l’Open Directory Project, alias DMOZ.
- Début des années 2000 : lancement de Google Directory, fondé sur DMOZ.
- 2011 : fermeture de Google Directory.
- 2012 : première version de Penguin.
- 2014 : fermeture de Yahoo! Directory.
- 2016 : Penguin intégré à l’algorithme principal et fin de l’affichage public du PageRank.
- 2017 : fermeture de DMOZ, dont Curlie prend ensuite le relais.
Ce qu’il reste des annuaires aujourd’hui
Les pionniers ont disparu : Yahoo! Directory, Google Directory et DMOZ n’existent plus sous leur forme d’origine. Pourtant, l’idée d’un répertoire sélectionné par des humains n’a pas disparu. Curlie maintient l’héritage de DMOZ, quelques annuaires généralistes historiques restent actifs, et surtout, les annuaires se sont spécialisés : annuaires locaux, répertoires sectoriels, plateformes professionnelles, sites d’avis ou listes de ressources soigneusement tenues par des communautés. Leur rôle a changé. Ils ne sont plus la porte d’entrée du web ni un raccourci pour grimper dans les résultats, mais des sources de visibilité ciblée et de confiance, à condition d’être sérieux et utiles à leurs visiteurs. En un sens, les annuaires qui survivent aujourd’hui sont revenus à leur vocation première : aider des internautes à trouver des sites de qualité.
Conclusion
En trente ans, les annuaires web sont passés du statut de boussole indispensable à celui d’outil de niche. Yahoo! a montré qu’un classement humain pouvait organiser le web naissant, DMOZ a prouvé la force d’une communauté de bénévoles, Google Directory a symbolisé l’alliance entre annuaire et moteur, puis l’âge d’or des annuaires SEO et le coup d’arrêt de Penguin ont profondément transformé leur image. Connaître cette histoire aide à regarder les annuaires actuels avec lucidité : ni vestiges à oublier ni solutions miracles, ils ont de la valeur lorsqu’ils reprennent l’esprit des pionniers, celui d’une sélection exigeante au service des internautes.
