Descarregar sites que utilizam Nginx

Sobre Nginx

O Nginx existe por causa de um estrangulamento que entretanto deixou de ser interessante. Os servidores da sua era tratavam cada ligação com um processo ou um fio de execução, e assim que a concorrência subia acima de certo ponto, a máquina gastava mais esforço a escalonar do que a servir. O Nginx respondeu com um ciclo de eventos, e a resposta acabou por ser geral o suficiente para sobreviver ao problema.

Em outubro de 2026 detetamo-lo em 26 318 404 sites, o que o coloca entre os softwares que se pode assumir estarem presentes algures em quase qualquer conversa sobre infraestrutura. Software com esse nível de omnipresença compensa uma leitura atenta e não uma contagem em destaque.

A estrutura interessante está por baixo. Nesses sites vemos atualmente 347 cadeias de versão distintas em produção, sendo a 1.28.3 a mais comum de todas. Uma dispersão ampla de versões é a condição normal para software que as pessoas instalam elas próprias e depois deixam de pensar nele, porque nada no ciclo operacional obriga a atualizar até algo se avariar. Um servidor web que funciona não anuncia que está três anos atrasado.

Isso tem consequências que vão além da arrumação. Todos os avisos de segurança publicados aplicam-se a um intervalo de versões, e a população de sites dentro desse intervalo não é um erro de arredondamento a esta escala. Quem faz investigação de vulnerabilidades, subscrição de seguros ou avaliação de cadeia de fornecimento precisa da distribuição e não da moda, porque o risco reside na cauda e é na cauda que os resumos públicos deixam de reportar.

A geografia acrescenta um segundo eixo. A maior concentração fica nos Estados Unidos, onde o detetamos em 7 081 331 sites, e a zona .com carrega mais do que qualquer outra. A concentração de alojamento não é uma afirmação sobre quota de mercado. Números desse tipo refletem onde a capacidade de alojamento é densa, o que é útil saber precisamente porque não coincide com o sítio onde estão as empresas por trás desses sites.

A razão para querer uma lista em vez de um gráfico torna-se óbvia assim que se tenta responder a uma pergunta real. Que sites de um país correm uma versão abaixo de um dado limiar. Quais desses correm também uma determinada camada de aplicação por cima. Quais apareceram desde a reconstrução anterior e antes não estavam lá. Nada disso é uma consulta. É um filtro sobre uma população, e precisa da população.

É isso a exportação da webatla. Todos os domínios onde o detetamos a correr, com a cadeia de versão que observámos, o país de alojamento, o TLD e o resto da pilha que identificámos no mesmo site, num único ficheiro reconstruído diariamente. Corra a consulta na sua própria máquina, com a cardinalidade que quiser, sem um limite de pedidos entre si e a resposta.

Há uma subtileza adicional que só aparece quando se tem a população inteira. Uma cadeia de versão é autodeclarada, e uma parte significativa das instalações suprime-a ou reescreve-a deliberadamente como medida de robustecimento. Isso significa que a distribuição observável está enviesada para o extremo menos cuidadosamente administrado do parque, o que vale a pena dizer com clareza em vez de corrigir em silêncio. Os sites que escondem a versão são, em média, aqueles com que menos se preocupava.

A mesma população permite também responder a perguntas sobre coexistência em vez de software. Como a exportação leva juntas todas as deteções de um domínio, pode perguntar que sites põem este servidor à frente de uma pilha de aplicação e outro à frente de outra, ou que combinações aparecem quase exclusivamente dentro das gamas de um único fornecedor de alojamento. Esses padrões são invisíveis em qualquer vista por tecnologia e óbvios numa tabela completa.

A F5 Networks mantém-no com licença BSD, e está publicamente disponível desde 2004. A licença importa menos do que o modelo de distribuição: como qualquer pessoa o pode instalar sem se registar em lado nenhum, nenhum fornecedor tem uma lista de clientes, e a única forma de conhecer a população é ir medi-la.