Найпопулярніший датасет

Повний список сайтів та їхніх технологій

Повний список сайтів та їхніх технологій: 294 226 053 сайтів, для кожного з яких визначено CMS, платформу електронної комерції, аналітику, фреймворк, CDN і платіжний стек. Один файл, свіжий експорт щодня, без лімітів API і без оплати за кожен запит. Те, що інструменти на кшталт BuiltWith здають в оренду помісячно, ви купуєте за €159.

✓ Свіжий експорт щодня  ·  ✓ Без лімітів API  ·  ✓ Безкоштовний зразок 10K

294.2M Домени з виявленим стеком
3 034 Відстежуваних технологій
238 Країни (за IP)
14 Колонки

Що всередині датасету Technologies: живий зразок даних

П'ять справжніх рядків із живої бази. Та сама схема з 14 колонок, яку ви завантажуєте, нічого вигаданого.

webatla-technologies.jsonl.zst · 294.2M рядків · 9,9 GB · 14 колонок Свіжий експорт щодня · Експортовано 18 серп. 2026 р.
DomainTLD suffixTLDDomain typeHTTP statusIP addressCountry by IPSocial networksTechnologies last data checkedTechnologiesPR valueHarmonic valueDomain creation dateDomain expiration date
facebook.comcomcomICANNHTTP 200157.240.253.35DE{"facebook":["https://facebook.com/recover/initiate?ars=facebook_login&privacy_mutation_token=eyJ0eXBlIjo1LCJjcmVhdGlvbl90aW1lIjoxNzg1NzQyMDIwfQ%3D%3D","https://facebook.com/reg?entry_point=login&next=","https://facebook.com/reg"]}2026-08-03HSTS, HTTP/3, Favicon, DigiCert, Google Site Verification, Facebook Domain Verification0.0093621529,201,4721997-03-292034-03-30
instagram.comcomcomICANNHTTP 200157.240.0.174DE{"facebook":["https://developers.facebook.com/docs/instagram","https://facebook.com/help/instagram/261704639352628","https://facebook.com/help/cancelcontracts?source=instagram.com"],"instagram":["https://instagram.com/data/manifest.json","https://instagram.com/accounts/password/reset","https://instagram.com/accounts/emailsignup?next="]}2026-08-06PWA, HSTS, HTTP/3, Favicon, DigiCert, hreflang, Open Graph, Google Site Verification, Facebook Domain Verification0.0063884526,482,1242004-06-042034-06-04
youtube.comcomcomICANNHTTP 200192.178.183.136US{"youtube":["https://youtube.com/static/favicon.ico","https://youtube.com/s/_/ytmweb/_/ss/k=ytmweb.c3_base_cow_tracing.Osf9qbBmtjs.L.X.O/am=AAAAAIABQQBsGA/d=0/rs=ABnK5FLnOCL0J6Hr-MypqOa20PTL6dTSDQ"]}2026-07-18HSTS, HTTP/3, Favicon, YouTube, Open Graph, Priority Hints, Google Site Verification, Facebook Domain Verification0.0048512525,314,2702005-02-152027-02-15
linkedin.comcomcomICANNHTTP 200130.211.32.14US{"linkedin":["https://linkedin.com/legal/cookie-policy","https://linkedin.com/mypreferences/g/guest-cookies","https://linkedin.com/legal/user-agreement"]}2026-08-08HSTS, Java, Miro, Azure, HTTP/3, Favicon, DigiCert, DocuSign, hreflang, Atlassian0.0038733723,915,7282002-11-022026-11-02
wordpress.orgorgorgICANNHTTP 20066.6.42.252US{"tiktok":["https://tiktok.com/@wordpress"],"bluesky":["https://bsky.app/profile/wordpress.org"],"threads":["https://threads.net/@wordpress"],"youtube":["https://youtube.com/wordpress"],"facebook":["https://facebook.com/WordPress"],"linkedin":["https://linkedin.com/company/wordpress"],"instagram":["https://instagram.com/wordpress"],"x-twitter":["https://x.com/WordPress"]}2026-07-08PHP, RSS, HSTS, MySQL, Nginx, HTTP/2, Favicon, hreflang, Gutenberg 23.5.0, WordPress 7.10.0019483621,093,1102003-03-282035-03-28

Живі значення безпосередньо з датасету, а не заглушки. ↓ Безкоштовний зразок на 10K рядків

Сайт і весь його технологічний стек в одному рядку

cloudflare.com
CloudflareNginxHTTP/3HSTSStripeSalesforceZendeskOpen Graph

Кожен рядок у списку сайтів та їхніх технологій поєднує сайт із повним набором технологій, які ми на ньому виявили, від CMS і фреймворку до CDN, аналітики та платіжного провайдера.

Що ми визначаємо на кожному сайті

3 034 технологій, згрупованих у категорії, за якими команди фільтрують найчастіше. Нижче кілька прикладів з кожної.

CMS і конструктори сайтів

WordPressDrupalWixSquarespace

Електронна комерція

ShopifyWooCommerceMagento

Фреймворки та бібліотеки

ReactVue.jsAngularNext.jsjQuery

CDN, хостинг і сервери

CloudflareAkamaiFastlyNginxGoDaddy

Аналітика та маркетинг

Google AnalyticsSegmentHubSpotKlaviyo

Платежі та безпека

StripePayPalHSTS

Найпоширеніші технології в інтернеті

Актуальні підрахунки з останнього експорту. Кожна технологія має власну сторінку з повним списком сайтів, які її використовують.

Чотирнадцять стовпців про кожен сайт

Базові доменні стовпці та стовпці рейтингу, а також дані про виявлені технології.

domain
Реєстрована адреса сайту, ваш ключ для зʼєднання даних.
cloudflare.com
suffix
Публічний суфікс, тобто реєстр, до якого належить назва.
com · co.uk
tld
Лише мітка верхнього рівня.
com
type
Тип суфікса: ICANN чи PRIVATE.
ICANN · PRIVATE
techs
Виявлений набір технологій у вигляді масиву назв.
["Shopify", ...]
techsAt
Дата останньої перевірки технологій.
2026-05-03
httpStatus
HTTP-статус, який повернув сайт.
HTTP 200
ip
Адреса, на яку резолвиться сайт.
104.16.132.229
country
Країна, з якої віддається сайт, визначена за IP.
DE · US
social
Посилання на профілі в соцмережах, знайдені на сайті.
x · linkedin
pr
PageRank, авторитетність за графом посилань.
0.0059
harmonic
Harmonic Centrality, оцінка важливості, стійка до спаму.
22,443,220
created
Дата створення домену.
2009-02-17
expires
Дата завершення терміну реєстрації домену.
2033-02-17

Як ми щодня визначаємо технології кожного сайту

Визначення технологій відбувається на нашому боці, тому у вашу копію стек потрапляє вже зіставленим.

1

Обхід

Проходимо інтернет у пошуках живих сайтів.

2

Отримання

Отримуємо кожну сторінку, її заголовки та скрипти.

3

Розпізнавання

Зіставляємо 3 034 сигнатур технологій.

4

Збагачення

Додаємо рейтинг, країну, IP, соцмережі та дати.

5

Експорт

Віддаємо один файл JSONL.

Хто працює зі списком сайтів та їхніх технологій

Один файл, що оновлюється щодня, і багато команд. Ось як різні покупці перетворюють його на перевагу.

Аутбаунд-продажі та зростання

Складайте списки ідеальних клієнтів

Відфільтруйте магазини на Shopify у Німеччині або застосунки на React у США, а потім вивантажте список одразу у свою CRM.

Дослідження ринку

Вимірюйте частку ринку платформ

Порахуйте сайти за технологіями в межах усього інтернету та порівнюйте щоденні експорти, щоб побачити, як платформа набирає чи втрачає частку.

Конкурентна розвідка

Побачте весь стек конкурента

Перевірте будь-який домен і побачте, яку CMS, аналітику, платежі та хостинг він використовує, причому в масштабі всього інтернету, а не по одному запиту.

Безпека та аналіз загроз

Знаходьте вразливе програмне забезпечення

Того ж дня виявляйте всі сайти в інтернеті, які працюють на CMS чи бібліотеці без підтримки, просто за полем з технологіями.

Ad-tech і партнерства

Оцінюйте інвентар за технологічним стеком

Зважуйте або відсівайте сайти за інструментами, які вони використовують, від платіжних провайдерів до тег-менеджерів, зіставивши дані з власним списком.

Інвестори та аналітики

Відстежуйте криві впровадження

Стежте, скільки сайтів використовують певну технологію з плином часу, щоб оцінити обсяг ринку або перевірити гіпотезу в 238 країнах.

Інструменти з оплатою за кожен запит чи один файл

Звичні сервіси з оплатою за запит

  • Потрібна підписка, часто від кількох сотень до кількох тисяч на місяць.
  • Кількість запитів обмежена на місяць, а масовий експорт коштує окремо.
  • Продуктом є вебінтерфейс, тому автоматизація поверх нього лишається ненадійною.
  • Дані оновлюються раз на тиждень або на місяць, а покриття за країнами слабке.

Датасет Technologies

  • €159, без обмеження на кількість запитів.
  • Повний файл на 294.2M рядків, готовий до запитів офлайн.
  • Завантажується напряму в Postgres, BigQuery, Snowflake або DuckDB.
  • Щоденний свіжий експорт з 238 країн і 1 431 TLD.

Додайте список у свій стек

Поле з технологіями — це звичайний масив, тому кожен потрібний запит вміщується в один рядок. Файл завантажується в Postgres, BigQuery, Snowflake або DuckDB без попередньої обробки.

Postgres BigQuery Snowflake DuckDB
усі магазини на Shopify у Німеччині
SELECT domain FROM 'technologies.jsonl.zst'
WHERE list_contains(techs, 'Shopify') AND country = 'DE'

Сайти на певній платформі

WHERE list_contains(techs, 'Magento')

Миттєвий список усіх сайтів на інструменті, який ви підтримуєте або на який націлені.

Два інструменти разом

WHERE list_contains(techs, 'Stripe') AND list_contains(techs, 'React')

Сайти, які поєднують дві технології, для інтеграцій чи партнерств.

Частка платформи за країнами

SELECT country, count(*) WHERE list_contains(techs, 'WordPress') GROUP BY country

Де платформа найсильніша, одним запитом.

Частка всього ринку

SELECT tech, count(*) FROM t, unnest(techs) tech GROUP BY tech

Упорядкуйте всі технології за кількістю сайтів, які їх використовують.

Визначення технологій, якому можна довіряти

Дані з реальної сторінки

Кожен стек визначено з власного HTML, заголовків і скриптів живого сайту, а не вгадано і не перекуплено в посередників.

Лише живі сайти

Сайт отримують і перевіряють, перш ніж він отримає рядок, тому ви працюєте з реальними, доступними ресурсами.

Перебудовується щодня

Технології перевіряють повторно постійно, а весь список експортують заново щодня, тому стек ніколи не застаріває.

Охоплює 1 431 TLD і 238 країн

webatla відстежує домени в кожному TLD і кожній країні. Нижче наведено найбільші за кількістю доменів, кожен веде на власний профіль.

Доступ, свіжість, ліцензія та повернення

Наскільки великий список сайтів та їхніх технологій?

Поточний експорт містить 294 226 053 активних сайтів разом із технологіями, виявленими на кожному з них, у 238 країнах і 1 431 TLD. Він оновлюється щодня.

Скільки технологій ви виявляєте?

3 034 технологій: CMS, електронна комерція, аналітика, фреймворки, CDN, платежі, безпека та інше. Кожну з них можна переглянути на webatla.com/technology.

Як ви визначаєте технології сайту?

Ми завантажуємо кожен живий сайт і знімаємо відбиток з його HTML, заголовків, скриптів і кукі, тобто з тих самих сигналів, які читає браузерне розширення, а потім додаємо збіги до відповідного рядка.

У якому вигляді зберігається поле технологій?

Як масив назв технологій у кожному рядку, тож один unnest або умова array-contains звужує список до будь-якого потрібного вам стека без попередньої обробки.

Чим це відрізняється від Websites and Ranking?

Websites and Ranking дає всі сайти з країною та рангом. Technologies залишає ті сайти, для яких вдалося зняти відбиток, і додає до них виявлений стек, HTTP-статус, IP та соціальні посилання.

Наскільки свіжі ці дані?

Технологічні відбитки перевіряються повторно постійно, а повний датасет експортується заново щодня. У межах вашого періоду доступу ви можете завантажувати файл повторно скільки завгодно.

У якому форматі постачаються дані?

JSON Lines зі стисненням zstandard (9,9 GB), одна задокументована схема. Файл завантажується в Postgres, BigQuery, Snowflake чи DuckDB без попередньої обробки.

Чи відповідає це вимогам GDPR?

Так. Використовуються лише публічні сигнали HTTP-відбитків, DNS і WHOIS, без персональних контактних даних.

Як отримати дані після оплати?

Щойно платіж підтверджено, датасет з'являється в завантаженнях вашого акаунта. Ви можете повторно завантажувати найсвіжіший щоденний експорт скільки завгодно разів протягом усього місячного періоду доступу.

Чи можна використовувати дані комерційно?

Так. Комерційне використання всередині вашої організації охоплює ліцензія на дані webatla (див. Умови). Щодо розповсюдження, перепродажу чи багаторічного ліцензування спершу зв'яжіться з нами.

Чи можливе повернення коштів?

Датасети — цифрові продукти, тому всі продажі остаточні. Саме тому кожен датасет має безкоштовний зразок на 10 000 рядків, щоб перевірити схему до купівлі. Єдиний виняток — істотний дефект, як-от пошкоджений файл, неправильна схема або понад 5% пропущених рядків. Напишіть у підтримку протягом 72 годин, і ми повторно видамо файл або повернемо кошти.

Отримайте повний список сайтів та їхніх технологій

294.2M сайтів · 3 034 технологій · свіжий експорт щодня · €159 за місяць.