L’ensemble des Liste de tous les sites web, avec classement
La liste complète de tous les sites web enregistrés sur le web public, 308 264 876 au total, chacun noté selon PageRank et Harmonic Centrality. Le pays par IP et la date d’enregistrement figurent sur chaque ligne, et vous faites l’économie du graphe de liens à mille milliards d’arêtes, puisque les rangs arrivent déjà précalculés.
✓ Inclut les colonnes de All active domains · ✓ Export frais chaque jour · ✓ Échantillon gratuit (10 000 lignes)
Dans le dataset Websites + Ranking : un échantillon de données en direct
Cinq lignes réelles issues de la base de données en direct, exactement le schéma à 9 colonnes que vous téléchargez, rien de simulé.
| Domain | TLD suffix | TLD | Domain type | Country by IP | PR value | Harmonic value | Domain creation date | Domain expiration date |
|---|---|---|---|---|---|---|---|---|
| facebook.com | com | com | ICANN | DE | 0.00936215 | 29,201,472 | 1997-03-29 | 2034-03-30 |
| instagram.com | com | com | ICANN | DE | 0.00638845 | 26,482,124 | 2004-06-04 | 2034-06-04 |
| youtube.com | com | com | ICANN | US | 0.00485125 | 25,314,270 | 2005-02-15 | 2027-02-15 |
| linkedin.com | com | com | ICANN | US | 0.00387337 | 23,915,728 | 2002-11-02 | 2026-11-02 |
| wordpress.org | org | org | ICANN | US | 0.00194836 | 21,093,110 | 2003-03-28 | 2035-03-28 |
Valeurs réelles directement issues du dataset, pas des espaces réservés. ↓ Aperçu 10K gratuit
Deux signaux d’importance pour chaque site web
Chaque ligne de la liste de tous les sites web porte deux mesures indépendantes de l’attention que lui porte le reste du web. Utilisez l’une ou les deux pour un contrôle croisé.
PageRank
Autorité du graphe de liens. Un site vers lequel pointent de nombreuses pages importantes obtient un score plus élevé, si bien qu’un filtre d’une seule ligne ne garde que les noms au-dessus du seuil que vous fixez. Exemple : instagram.com se situe presque en tête, avec un PR de 0.0063.
Harmonic Centrality
Une seconde mesure de centralité qui indique à quel point un site est central dans l’ensemble du graphe. Elle résiste mieux au link spam que PageRank seul, c’est pourquoi disposer des deux vous permet de classer et de vérifier en un seul passage.
Bien lire les deux classements
Les deux valeurs sont livrées brutes, à vous de fixer le seuil adapté à votre usage. Voici, en gros, comment chacune évolue et comment en faire un filtre.
L’échelle PageRank
PageRank part de fractions minuscules et augmente à partir de là. Les sites les plus fréquentés du web se situent autour de 0,006, un site solide de milieu de gamme se trouve quelques ordres de grandeur en dessous, et la longue traîne tend vers zéro. Choisissez un plancher qui correspond au niveau de qualité que vous visez, et la liste se filtre d’elle-même pour ne garder que les sites qui méritent votre attention.
L’échelle harmonique
Harmonic Centrality est un grand nombre entier qui augmente avec le nombre de chemins courts du graphe menant à un site. Au sommet du web, elle atteint plusieurs dizaines de millions, alors que les sites ordinaires se situent bien plus bas. Elle évolue plus régulièrement que PageRank, ce qui en fait un meilleur critère de départage quand plusieurs sites se regroupent autour d’un PageRank similaire.
Neuf colonnes pour chaque site classé
Le socle de domaine à quatre colonnes issu de All active domains, plus cinq champs de ranking et de cycle de vie.
Comment chaque site est classé, chaque jour
Le calcul lourd du graphe tourne de notre côté, si bien que les rangs arrivent déjà calculés dans votre copie.
Crawl
Nous parcourons le web à la recherche de sites actifs.
Vérification
Nous confirmons via DNS, HTTP, WHOIS et RDAP que chaque site est actif.
Graphe de liens
Nous reconstruisons le graphe de liens à l’échelle du web.
Score
Nous calculons le PageRank et le Harmonic par site.
Export
Nous ajoutons le pays et les dates, et livrons un seul fichier JSONL.
Qui travaille à partir de la liste de tous les sites web
Un fichier classé et actualisé chaque jour, pour de nombreuses équipes. Voici comment différents acheteurs en tirent un avantage.
Suivez les évolutions de classement dans le temps
Les exports quotidiens peuvent être comparés d’un jour à l’autre, ce qui vous permet de suivre l’évolution de PageRank et Harmonic Centrality sur l’ensemble du web, et pas seulement sur les sites qu’un outil échantillonne par hasard.
Filtrez votre marché par autorité
Extrayez les sites actifs d’un pays au-dessus d’un PageRank minimum, et vous obtenez instantanément une liste de marché adressable, débarrassée d’emblée du superflu.
Notez en masse chaque cible de lien
Évitez les limites d’API par requête et notez chaque prospect en un seul passage sur le fichier, classé selon la valeur qu’apporterait un lien depuis ce site.
Pondérer l’inventaire selon l’autorité réelle
Croisez les requêtes d’enchères avec la liste de tous les sites web enregistrés pour pondérer ou exclure des domaines par PageRank et par pays d’hébergement.
Un recensement classé du web
Étudiez la forme et la distribution d’autorité du web entier sur un dataset qui se met à jour chaque jour, pas sur un crawl vieux d’un an.
Repérez les noms sous-évalués
Croisez PageRank avec les dates d’expiration pour repérer des sites à forte autorité proches du renouvellement dans 238 pays.
Classez le web vous-même, ou achetez-le déjà calculé
Le construire soi-même
- Un graphe de liens à l’échelle du web signifie stocker et traiter des milliers de milliards d’arêtes.
- Calculer le PageRank sur ce graphe est une lourde tâche de calcul distribué à exécuter et réexécuter.
- Les API SEO facturées par requête vous plafonnent à quelques milliers de requêtes et comptent chaque appel.
- Il vous faut quand même géolocaliser chaque IP et récupérer les dates d’enregistrement séparément.
Un fichier de webatla
- PageRank et Harmonic Centrality arrivent précalculés sur chaque ligne.
- 308.3M sites web classés dans 238 pays, dans un seul fichier.
- Réexporté chaque jour, pour que les rangs et les dates de cycle de vie restent à jour.
- Aucun comptage par requête, aucune limite de débit.
Intégrez la liste classée dans votre stack
JSON Lines et zstandard, un objet par ligne. Le fichier se charge dans Postgres, ClickHouse, BigQuery ou DuckDB sans prétraitement.
SELECT domain, pr FROM 'websites-ranking.jsonl.zst'
WHERE country = 'DE' ORDER BY pr DESC LIMIT 100
Recettes en une ligne
Comme chaque rang et chaque date se trouve dans une simple colonne, les requêtes que vous voulez vraiment tiennent chacune en une ligne. Voici quelques listes que les équipes extraient le plus souvent.
Meilleurs sites sur un marché
Une liste classée des sites les plus forts dans n’importe quel pays.
Prospects outreach
Chaque site .io qui mérite un e-mail, déjà noté pour vous.
Forte autorité proche de l’expiration
Une liste de surveillance des domaines de valeur arrivant à échéance de renouvellement.
Où se trouve le web classé
Une répartition du web par pays d’hébergement en une seule requête.
Noms récents avec une traction naissante
Une liste de jeunes sites qui accumulent déjà des liens.
Comparer deux TLD par autorité
PageRank moyen par TLD, côte à côte, pour voir où se concentrent les sites forts.
Des rangs qui tiennent la route
Calculé sur notre propre graphe
PageRank et Harmonic Centrality proviennent du crawl web à grande échelle propre à webatla, pas d’une revente par un tiers.
Sites actifs uniquement
Chaque site est vérifié via DNS, HTTP, WHOIS et RDAP avant d’obtenir une ligne, afin que vous classiez des sites réels.
Reconstruit chaque jour
La liste entière est régénérée chaque jour, les rangs et les dates d’expiration ne dérivent donc jamais vers un cache obsolète.
Couvre 1 431 TLDs et 238 pays
webatla suit les domaines dans chaque TLD et chaque pays. Voici les plus importants par nombre de domaines, chacun avec un lien vers son profil complet.
Top TLD
Abonnement, fraîcheur, licences & remboursements
Quelle est la taille de la liste de tous les sites web ?
L’export actuel contient 308 264 876 sites web actifs classés dans 238 pays et 1 431 TLD. Il est mis à jour chaque jour.
D’où viennent les classements ?
webatla calcule le PageRank et la Harmonic Centrality sur son propre graphe de liens à l’échelle du web, reconstruit à chaque export quotidien. Les deux valeurs brutes figurent dans chaque ligne.
Quelle est la différence entre PageRank et Harmonic Centrality ?
PageRank mesure l’autorité qui circule via les liens. Un site vers lequel pointent de nombreuses pages importantes obtient ainsi une valeur plus élevée. Harmonic Centrality mesure à quel point un site est central dans l’ensemble du graphe, et résiste mieux au linkspam. Avec les deux valeurs, vous pouvez classer et vérifier par recoupement.
Puis-je filtrer la liste par pays ou par rang minimum ?
Oui. Chaque ligne contient le pays par IP et les deux valeurs de rank, un simple WHERE en une ligne suffit donc à ne garder que les sites au-dessus d’un seuil de PageRank dans les pays qui vous intéressent.
En quoi cela diffère-t-il de All active domains ?
All active domains est la liste à quatre colonnes de tous les domaines enregistrés. Websites and Ranking en conserve les sites actifs et ajoute le pays par IP, PageRank, Harmonic Centrality et les dates d’enregistrement.
À quelle fréquence les rangs changent-ils ?
Le graphe de liens est reconstruit à chaque export quotidien, le PageRank et la Harmonic Centrality peuvent donc évoluer d’un jour à l’autre. Comparez deux snapshots pour mesurer l’évolution d’un site donné ou de n’importe quel sous-ensemble de la liste.
Puis-je suivre l’historique du classement dans le temps ?
Oui, en conservant les exports quotidiens. Chaque fichier est un snapshot daté, et mis bout à bout, ils forment une série temporelle de PageRank et de Harmonic Centrality pour chaque site web.
Couvrez-vous les ccTLD et les sites non anglophones ?
Oui. La liste couvre tous les TLDs et ccTLDs, et le pays est déterminé via l’IP. Vous pouvez ainsi répartir le web classé selon le marché depuis lequel un site est livré, plutôt que selon la langue.
Quels noms sont considérés comme un site ici ?
Un domaine enregistrable qui résout et sert un site web fonctionnel. Les noms qui répondent seulement au DNS mais n’ont pas de site web fonctionnel ne sont pas classés et figurent à la place dans All active domains.
Le classement est-il mondial ou spécifique à un pays ?
Les rangs sont mondiaux et calculés sur un seul graphe de liens à l’échelle du web, un PageRank au Japon est donc comparable à un PageRank au Brésil. Le pays déterminé par IP est une colonne à part, vous pouvez donc toujours restreindre la liste globale à un marché précis.
Puis-je rapprocher la liste de mes propres domaines ?
Oui. Chaque ligne est indexée sur le domaine enregistrable, un hash-join avec votre CRM ou une liste de concurrents associe PageRank, Harmonic Centrality, pays et dates à chaque nom en un seul passage.
Dans quel format le dataset est-il livré ?
JSON Lines, compressé en zstandard (6,1 GB), un schéma documenté. Le fichier se charge sans prétraitement dans Postgres, ClickHouse, BigQuery ou DuckDB.
Comment fonctionne l’accès ?
Vous obtenez un mois d’accès, ou un an pour €990. Pendant cette période, vous pouvez retélécharger l’export quotidien le plus récent à tout moment.
Comment recevoir les données après le paiement ?
Dès que votre paiement est confirmé, le dataset apparaît dans les téléchargements de votre compte. Vous pouvez retélécharger l’export quotidien le plus récent autant de fois que vous le souhaitez pendant toute la durée de votre accès d’un mois.
Puis-je utiliser les données à des fins commerciales ?
Oui. L’utilisation commerciale au sein de votre organisation est couverte par la licence de données webatla (voir les conditions d’utilisation). Pour la redistribution, la revente ou une licence pluriannuelle, contactez-nous d’abord.
Proposez-vous des remboursements ?
Les datasets sont des produits numériques, donc toutes les ventes sont définitives. C’est justement pour cela que chaque dataset propose un aperçu gratuit de 10 000 lignes, pour vérifier le schéma avant l’achat. La seule exception est un défaut substantiel comme un fichier corrompu, un schéma incorrect ou plus de 5 % de lignes manquantes. Écrivez au support dans les 72 heures, nous vous fournirons de nouveau le fichier ou nous vous rembourserons le prix d’achat.
Obtenez la liste classée de tous les sites web
308.3M sites web classés avec PageRank et Harmonic · export frais chaque jour · €99 pour un mois.