A completa Lista de todos os sites, com ranking
A lista completa de todos os sites registados na web pública, 308 341 084 ao todo, cada um avaliado segundo o PageRank e a Harmonic Centrality. O país por IP e a data de registo figuram em cada linha, e poupa o grafo de ligações com um bilião de arestas, porque os rankings chegam já pré-calculados.
✓ Inclui as colunas de All active domains · ✓ Exportação atualizada todos os dias · ✓ Amostra gratuita (10 000 linhas)
Dentro do dataset Websites + Ranking: uma amostra de dados em direto
Cinco linhas reais da base de dados em direto, exatamente o esquema de 9 colunas que descarrega, nada simulado.
| Domain | TLD suffix | TLD | Domain type | Country by IP | PR value | Harmonic value | Domain creation date | Domain expiration date |
|---|---|---|---|---|---|---|---|---|
| facebook.com | com | com | ICANN | DE | 0.00936215 | 29,201,472 | 1997-03-29 | 2034-03-30 |
| instagram.com | com | com | ICANN | DE | 0.00638845 | 26,482,124 | 2004-06-04 | 2034-06-04 |
| youtube.com | com | com | ICANN | US | 0.00485125 | 25,314,270 | 2005-02-15 | 2027-02-15 |
| linkedin.com | com | com | ICANN | US | 0.00387337 | 23,915,728 | 2002-11-02 | 2026-11-02 |
| wordpress.org | org | org | ICANN | US | 0.00194836 | 21,093,110 | 2003-03-28 | 2035-03-28 |
Valores reais diretamente do dataset, não são marcadores de posição. ↓ Pré-visualização gratuita de 10K
Dois sinais de importância em cada site
Cada linha na lista de todos os sites contém duas medidas independentes de quanto o resto da web aponta para ela. Use uma, ou use ambas para verificação cruzada.
PageRank
Autoridade no grafo de ligações. Um site apontado por muitas páginas importantes obtém uma pontuação mais alta, por isso um filtro de uma única linha mantém apenas os nomes acima do limiar definido pelo utilizador. Por exemplo, instagram.com situa-se quase no topo, com um PR de 0,0063.
Harmonic Centrality
Uma segunda medida de centralidade que indica quão central um site é no grafo completo. É mais resistente a link spam do que o PageRank isoladamente, por isso disponibilizar ambos permite-lhe classificar e verificar num único passo.
Como ler as duas posições
Ambos os valores são entregues em bruto, pelo que define o limiar que se adapta à sua utilização. Eis, de forma aproximada, como cada um escala e como transformá-lo num filtro.
A escala do PageRank
O PageRank começa em frações minúsculas e sobe a partir daí. Os sites mais movimentados da web situam-se perto de 0,006, um site sólido de nível intermédio fica algumas ordens de grandeza abaixo disso, e a cauda longa tende para zero. Escolha um limiar mínimo que corresponda ao nível de qualidade que pretende, e a lista filtra-se sozinha até restarem os sites que merecem a sua atenção.
A escala harmónica
A Harmonic Centrality é um número inteiro elevado que aumenta com o número de caminhos curtos no grafo que levam a um site. No topo da web, atinge dezenas de milhões, enquanto os sites comuns ficam bastante abaixo. Evolui de forma mais gradual do que o PageRank, por isso é o melhor critério de desempate quando vários sites se agrupam em torno de um PageRank semelhante.
Nove colunas em cada site classificado
O esqueleto de domínio de quatro colunas de All active domains, mais cinco campos de classificação e ciclo de vida.
Como cada site é classificado, diariamente
O cálculo pesado do grafo é executado do nosso lado, pelo que as posições chegam já calculadas na sua cópia.
Crawl
Percorremos a web à procura de sites ativos.
Verificação
Confirmamos que cada site está ativo através de DNS, HTTP, WHOIS e RDAP.
Grafo de ligações
Reconstruímos o grafo de ligações à escala da web.
Pontuação
Calculamos o PageRank e o Harmonic por site.
Export
Adicionamos o país e as datas, e entregamos um único ficheiro JSONL.
Quem trabalha a partir da lista de todos os sites
Um ficheiro classificado e atualizado diariamente, muitas equipas. Veja como diferentes compradores o transformam numa vantagem.
Acompanhe as variações de classificação ao longo do tempo
As exportações diárias são comparáveis entre si, pelo que pode observar como o PageRank e o Harmonic Centrality se movem em toda a web, não apenas nos sites que uma ferramenta amostra por acaso.
Filtre o seu mercado por autoridade
Extraia os sites ativos de um país acima de um PageRank mínimo e obterá de imediato uma lista de mercado endereçável, com o lixo já filtrado.
Pontue cada alvo de ligação em lote
Evite os limites de API por consulta e pontue cada potencial contacto num único passo pelo ficheiro, classificado pelo valor que uma ligação a partir dele teria.
Pondere o inventário pela autoridade real
Cruze os pedidos de licitação com a lista de todos os sites registados para ponderar ou excluir domínios por PageRank e por país de alojamento.
Um censo classificado da web
Estude a forma e a distribuição de autoridade de toda a web num dataset que se atualiza todos os dias, não num rastreio com um ano de idade.
Identifique nomes subvalorizados
Cruze o PageRank com as datas de expiração para encontrar sites de elevada autoridade próximos da renovação em 238 países.
Classifique a web você mesmo, ou compre-a já calculada
Construí-lo você mesmo
- Um grafo de ligações à escala da web significa armazenar e processar biliões de arestas.
- O PageRank sobre esse grafo é uma tarefa pesada de computação distribuída, para executar e voltar a executar.
- As API de SEO faturadas por consulta limitam o utilizador a alguns milhares de consultas e contabilizam cada chamada.
- Ainda assim, tem de geolocalizar cada IP e obter as datas de registo separadamente.
Um ficheiro da webatla
- O PageRank e a Harmonic Centrality chegam já calculados em cada linha.
- 308.3M sites classificados em 238 países, num único ficheiro.
- Reexportado diariamente, para que as classificações e as datas de ciclo de vida se mantenham atualizadas.
- Sem contabilização por consulta, sem limites de taxa.
Integre a lista classificada na sua stack
JSON Lines e zstandard, um objeto por linha. O ficheiro carrega em Postgres, ClickHouse, BigQuery ou DuckDB sem pré-processamento.
SELECT domain, pr FROM 'websites-ranking.jsonl.zst'
WHERE country = 'DE' ORDER BY pr DESC LIMIT 100
Receitas de uma linha
Como cada posição e cada data está numa coluna simples, as consultas que realmente quer fazer cabem cada uma numa única linha. Algumas das listas que as equipas mais extraem.
Os melhores sites de um mercado
Uma lista classificada dos sites mais fortes de qualquer país.
Candidatos de outreach
Todos os sites .io que merecem um e-mail, já pontuados para si.
Alta autoridade próxima da caducidade
Uma lista de vigilância de domínios valiosos que se aproximam da renovação.
Onde vive a web classificada
Uma repartição da web por país de alojamento numa única consulta.
Nomes recentes com tração inicial
Uma lista de sites recentes que já estão a conquistar ligações.
Compare dois TLD por autoridade
PageRank médio por TLD, lado a lado, para ver onde se concentram os sites fortes.
Posições em que pode confiar
Calculado no nosso próprio grafo
O PageRank e o Harmonic Centrality vêm do próprio crawl à escala da web da webatla, não de uma revenda de terceiros.
Apenas sites ativos
Cada site é verificado através de DNS, HTTP, WHOIS e RDAP antes de obter uma linha, para que classifique sites reais.
Reconstruído diariamente
A lista inteira é regenerada todos os dias, pelo que as posições e as datas de caducidade nunca derivam para uma cache desatualizada.
Abrange 1432 TLD e 238 países
webatla monitoriza domínios em todas as extensões de domínio e em todos os países. Os maiores por número de domínios, cada um com uma ligação para o seu perfil completo.
Principais TLD
Subscrição, atualidade, licenças & reembolsos
Qual é o tamanho da lista de todos os sites?
A exportação atual contém 308 341 084 sites ativos com ranking, de 238 países e 1432 TLD. É atualizada diariamente.
De onde vêm os rankings?
webatla calcula o PageRank e a Harmonic Centrality sobre o seu próprio grafo de ligações à escala da web, que é reconstruído a cada exportação diária. Ambos os valores em bruto constam em cada linha.
Qual é a diferença entre PageRank e Harmonic Centrality?
O PageRank mede a autoridade que circula através das ligações. Um site para o qual apontam muitas páginas importantes atinge assim um valor mais alto. A Harmonic Centrality mede o quão central um site é dentro do grafo completo, e resiste melhor ao linkspam. Com ambos os valores pode classificar e verificar por comparação.
Posso filtrar a lista por país ou por rank mínimo?
Sim. Cada linha contém o país por IP e ambos os valores de rank, um simples WHERE numa linha basta assim para manter apenas os sites acima de um limiar de PageRank nos países que lhe interessam.
Em que é que isto difere de All active domains?
All active domains é a lista de quatro colunas de todos os domínios registados. Websites Ranking conserva dela os sites ativos e acrescenta o país por IP, PageRank, Harmonic Centrality e as datas de registo.
Com que frequência mudam os ranks?
O grafo de ligações é reconstruído a cada exportação diária, o PageRank e a Harmonic Centrality podem por isso variar de um dia para o outro. Compare dois snapshots para medir a evolução de um site específico ou de qualquer subconjunto da lista.
Posso acompanhar o histórico de ranking ao longo do tempo?
Sim, conservando as exportações diárias. Cada ficheiro é um snapshot datado, e unidos entre si formam uma série temporal de PageRank e Harmonic Centrality para cada site.
Cobrem os ccTLD e os sites não anglófonos?
Sim. A lista abrange todos os TLD e ccTLD, e o país é determinado através do IP. Assim pode dividir a web classificada segundo o mercado a partir do qual um site é servido, em vez de segundo o idioma.
Que nomes são considerados um site aqui?
Um domínio registável que resolve e serve um site funcional. Os nomes que respondem apenas em DNS mas não têm um site funcional não são classificados e constam em vez disso em All active domains.
O ranking é global ou específico de um país?
Os rankings são globais e calculados num único grafo de ligações à escala mundial, pelo que um PageRank no Japão é comparável a um PageRank no Brasil. O país por IP é uma coluna à parte, portanto pode sempre limitar a lista global a um mercado específico.
Posso cruzar a lista com os meus próprios domínios?
Sim. Cada linha está indexada pelo domínio registável, um hash-join com o seu CRM ou uma lista de concorrentes associa PageRank, Harmonic Centrality, país e datas a cada nome numa única passagem.
Em que formato é entregue o dataset?
JSON Lines, comprimido com zstandard (6,1 GB), com um esquema documentado. O ficheiro carrega sem pré-processamento em Postgres, ClickHouse, BigQuery ou DuckDB.
Como funciona o acesso?
Obtém um mês de acesso, ou um ano por €990. Durante esse período, pode voltar a descarregar a exportação diária mais recente a qualquer momento.
Como recebo os dados depois do pagamento?
Assim que o seu pagamento for confirmado, o dataset aparece nos descarregamentos da sua conta. Pode voltar a descarregar a exportação diária mais recente tantas vezes quantas quiser durante todo o seu período de acesso de um mês.
Posso usar os dados para fins comerciais?
Sim. A utilização comercial dentro da sua organização está coberta pela licença de dados da webatla (consulte os termos de utilização). Para redistribuição, revenda ou licenciamento plurianual, contacte-nos primeiro.
Oferecem reembolsos?
Os datasets são produtos digitais, pelo que todas as vendas são finais. É precisamente por isso que cada dataset tem uma pré-visualização gratuita com 10 000 linhas, para poder verificar o esquema antes da compra. A única exceção é um defeito substancial, como um ficheiro danificado, um esquema incorreto ou mais de 5 % de linhas em falta. Escreva ao suporte dentro de 72 horas e nós voltamos a disponibilizar o ficheiro ou reembolsamos o preço de compra.
Obtenha a lista classificada de todos os sites
308.3M sites classificados com PageRank e Harmonic · exportação atualizada todos os dias · €99 por um mês.