Найпопулярніший датасет

Повний список сайтів та їхніх технологій

Повний список сайтів та їхніх технологій: 313 947 451 сайтів, для кожного з яких визначено CMS, платформу електронної комерції, аналітику, фреймворк, CDN і платіжний стек. Один файл, свіжий експорт щодня, без лімітів API і без оплати за кожен запит. Те, що інструменти на кшталт BuiltWith здають в оренду помісячно, ви купуєте за €159.

✓ Свіжий експорт щодня  ·  ✓ Без лімітів API  ·  ✓ Безкоштовний зразок 10K

313.9M Домени з виявленим стеком
3 030 Відстежуваних технологій
240 Країни (за IP)
14 Колонки

Що всередині датасету Technologies: живий зразок даних

П'ять справжніх рядків із живої бази. Та сама схема з 14 колонок, яку ви завантажуєте, нічого вигаданого.

webatla-technologies-2026-11-16.jsonl.zst · 313 947 451 рядок · 14 колонок
DomainTLD suffixTLDDomain typeHTTP statusIP addressCountry by IPSocial networksTechnologies last data checkedTechnologiesPR valueHarmonic valueDomain creation dateDomain expiration date
facebook.comcomcomICANNHTTP 20057.144.244.1DE{"facebook":["https://facebook.com/recover/initiate?ars=facebook_login&privacy_mutation_token=eyJ0eXBlIjo1LCJjcmVhdGlvbl90aW1lIjoxNzkyMDc4NjQ3fQ%3D%3D","https://facebook.com/reg?entry_point=login","https://facebook.com/reg"]}2026-10-15HSTS, HTTP/3, Favicon, DigiCert, Google Site Verification, Facebook Domain Verification0.0086845130,198,3801997-03-292034-03-30
instagram.comcomcomICANNHTTP 20031.13.71.174US{"facebook":["https://developers.facebook.com/docs/instagram","https://facebook.com/help/instagram/261704639352628","https://facebook.com/help/cancelcontracts?source=instagram.com"],"instagram":["https://instagram.com/data/manifest.json","https://instagram.com/accounts/password/reset","https://instagram.com/accounts/emailsignup"]}2026-11-07PWA, HSTS, Slack, HTTP/3, Favicon, DigiCert, hreflang, Open Graph, Google Site Verification, Facebook Domain Verification0.0068070827,747,3802004-06-042034-06-04
youtube.comcomcomICANNHTTP 200142.251.20.136US{"youtube":["https://youtube.com/static/favicon.ico","https://youtube.com/s/_/ytmweb/_/ss/k=ytmweb.c3_base.UfpmcVqjzvk.L.X.O/am=AAAAAIABAQQAewY/d=1/rs=ABnK5FKWovyaXcyOEzUpGME4BPbJHkb_EA/m=root,c3_base,Raq4cb,PzUdZb,DlvF1d,Tu3MB,SFvGjc,HDmU1e,cDTHu,uhlLGb,JoU6vf,OM7xob,UAM5m,XRfeAc,Di4hBc,dpUCFd,oPp5Le,a66Lfe,Nr0kfe"]}2026-11-01HSTS, HTTP/3, Favicon, YouTube, Open Graph, Priority Hints, Google Font API, Google Site Verification, Facebook Domain Verification0.0047075326,246,0262005-02-152027-02-15
linkedin.comcomcomICANNHTTP 200130.211.32.14US{"linkedin":["https://linkedin.com/legal/cookie-policy","https://linkedin.com/mypreferences/g/guest-cookies","https://linkedin.com/legal/user-agreement"]}2026-10-22HSTS, Java, Miro, Azure, HTTP/3, Favicon, DigiCert, DocuSign, hreflang, Atlassian0.0039841524,984,8642002-11-022027-11-02
twitter.comcomcomICANNHTTP 520162.159.140.229US{"x-twitter":["http://twitter.com/cdn-cgi/styles/main.css"]}2026-10-28Miro, Canva, Slack, Notion, Stripe, Mixpanel, Atlassian, Cloudflare, Google Workspace, Apple iCloud Mail0.0036328524,994,6742000-01-212027-01-21

Ще 313 947 446 рядків у повному файлі

Technologies · 14 колонок Свіжий експорт щодня

Сайт і весь його технологічний стек в одному рядку

cloudflare.com
CloudflareNginxHTTP/3HSTSStripeSalesforceZendeskOpen Graph

Кожен рядок у списку сайтів та їхніх технологій поєднує сайт із повним набором технологій, які ми на ньому виявили, від CMS і фреймворку до CDN, аналітики та платіжного провайдера.

Що ми визначаємо на кожному сайті

3 030 технологій, згрупованих у категорії, за якими команди фільтрують найчастіше. Нижче кілька прикладів з кожної.

CMS і конструктори сайтів

WordPressDrupalWixSquarespace

Електронна комерція

ShopifyWooCommerceMagento

Фреймворки та бібліотеки

ReactVue.jsAngularNext.jsjQuery

CDN, хостинг і сервери

CloudflareAkamaiFastlyNginxGoDaddy

Аналітика та маркетинг

Google AnalyticsSegmentHubSpotKlaviyo

Платежі та безпека

StripePayPalHSTS

Найпоширеніші технології в інтернеті

Актуальні підрахунки з останнього експорту. Кожна технологія має власну сторінку з повним списком сайтів, які її використовують.

Чотирнадцять стовпців про кожен сайт

Базові доменні стовпці та стовпці рейтингу, а також дані про виявлені технології.

domain
Реєстрована адреса сайту, ваш ключ для зʼєднання даних.
cloudflare.com
suffix
Публічний суфікс, тобто реєстр, до якого належить назва.
com · co.uk
tld
Лише мітка верхнього рівня.
com
type
Тип суфікса: ICANN чи PRIVATE.
ICANN · PRIVATE
techs
Виявлений набір технологій у вигляді масиву назв.
["Shopify", ...]
techsAt
Дата останньої перевірки технологій.
2026-05-03
httpStatus
HTTP-статус, який повернув сайт.
HTTP 200
ip
Адреса, на яку резолвиться сайт.
104.16.132.229
country
Країна, з якої віддається сайт, визначена за IP.
DE · US
social
Посилання на профілі в соцмережах, знайдені на сайті.
x · linkedin
pr
PageRank, авторитетність за графом посилань.
0.0059
harmonic
Harmonic Centrality, оцінка важливості, стійка до спаму.
22,443,220
created
Дата створення домену.
2009-02-17
expires
Дата завершення терміну реєстрації домену.
2033-02-17

Як ми щодня визначаємо технології кожного сайту

Визначення технологій відбувається на нашому боці, тому у вашу копію стек потрапляє вже зіставленим.

1

Обхід

Проходимо інтернет у пошуках живих сайтів.

2

Отримання

Отримуємо кожну сторінку, її заголовки та скрипти.

3

Розпізнавання

Зіставляємо 3 030 сигнатур технологій.

4

Збагачення

Додаємо рейтинг, країну, IP, соцмережі та дати.

5

Експорт

Віддаємо один файл JSONL.

Хто працює зі списком сайтів та їхніх технологій

Один файл, що оновлюється щодня, і багато команд. Ось як різні покупці перетворюють його на перевагу.

Аутбаунд-продажі та зростання

Складайте списки ідеальних клієнтів

Відфільтруйте магазини на Shopify у Німеччині або застосунки на React у США, а потім вивантажте список одразу у свою CRM.

Дослідження ринку

Вимірюйте частку ринку платформ

Порахуйте сайти за технологіями в межах усього інтернету та порівнюйте щоденні експорти, щоб побачити, як платформа набирає чи втрачає частку.

Конкурентна розвідка

Побачте весь стек конкурента

Перевірте будь-який домен і побачте, яку CMS, аналітику, платежі та хостинг він використовує, причому в масштабі всього інтернету, а не по одному запиту.

Безпека та аналіз загроз

Знаходьте вразливе програмне забезпечення

Того ж дня виявляйте всі сайти в інтернеті, які працюють на CMS чи бібліотеці без підтримки, просто за полем з технологіями.

Ad-tech і партнерства

Оцінюйте інвентар за технологічним стеком

Зважуйте або відсівайте сайти за інструментами, які вони використовують, від платіжних провайдерів до тег-менеджерів, зіставивши дані з власним списком.

Інвестори та аналітики

Відстежуйте криві впровадження

Стежте, скільки сайтів використовують певну технологію з плином часу, щоб оцінити обсяг ринку або перевірити гіпотезу в 240 країнах.

Інструменти з оплатою за кожен запит чи один файл

Звичні сервіси з оплатою за запит

  • Потрібна підписка, часто від кількох сотень до кількох тисяч на місяць.
  • Кількість запитів обмежена на місяць, а масовий експорт коштує окремо.
  • Продуктом є вебінтерфейс, тому автоматизація поверх нього лишається ненадійною.
  • Дані оновлюються раз на тиждень або на місяць, а покриття за країнами слабке.

Датасет Technologies

  • €159, без обмеження на кількість запитів.
  • Повний файл на 313.9M рядків, готовий до запитів офлайн.
  • Завантажується напряму в Postgres, BigQuery, Snowflake або DuckDB.
  • Щоденний свіжий експорт з 240 країн і 1 429 TLD.

Додайте список у свій стек

Поле з технологіями — це звичайний масив, тому кожен потрібний запит вміщується в один рядок. Файл завантажується в Postgres, BigQuery, Snowflake або DuckDB без попередньої обробки.

Postgres BigQuery Snowflake DuckDB
усі магазини на Shopify у Німеччині
SELECT domain FROM 'technologies.jsonl.zst'
WHERE list_contains(techs, 'Shopify') AND country = 'DE'

Сайти на певній платформі

WHERE list_contains(techs, 'Magento')

Миттєвий список усіх сайтів на інструменті, який ви підтримуєте або на який націлені.

Два інструменти разом

WHERE list_contains(techs, 'Stripe') AND list_contains(techs, 'React')

Сайти, які поєднують дві технології, для інтеграцій чи партнерств.

Частка платформи за країнами

SELECT country, count(*) WHERE list_contains(techs, 'WordPress') GROUP BY country

Де платформа найсильніша, одним запитом.

Частка всього ринку

SELECT tech, count(*) FROM t, unnest(techs) tech GROUP BY tech

Упорядкуйте всі технології за кількістю сайтів, які їх використовують.

Визначення технологій, якому можна довіряти

Дані з реальної сторінки

Кожен стек визначено з власного HTML, заголовків і скриптів живого сайту, а не вгадано і не перекуплено в посередників.

Лише живі сайти

Сайт отримують і перевіряють, перш ніж він отримає рядок, тому ви працюєте з реальними, доступними ресурсами.

Перебудовується щодня

Технології перевіряють повторно постійно, а весь список експортують заново щодня, тому стек ніколи не застаріває.

Охоплює 1 429 TLD і 240 країн

webatla відстежує домени в кожному TLD і кожній країні. Нижче наведено найбільші за кількістю доменів, кожен веде на власний профіль.

Доступ, свіжість, ліцензія та повернення

Наскільки великий список сайтів та їхніх технологій?

Поточний експорт містить 313 947 451 активних сайтів разом із технологіями, виявленими на кожному з них, у 240 країнах і 1 429 TLD. Він оновлюється щодня.

Скільки технологій ви виявляєте?

3 030 технологій: CMS, електронна комерція, аналітика, фреймворки, CDN, платежі, безпека та інше. Кожну з них можна переглянути на webatla.com/technology.

Як ви визначаєте технології сайту?

Ми завантажуємо кожен живий сайт і знімаємо відбиток з його HTML, заголовків, скриптів і кукі, тобто з тих самих сигналів, які читає браузерне розширення, а потім додаємо збіги до відповідного рядка.

У якому вигляді зберігається поле технологій?

Як масив назв технологій у кожному рядку, тож один unnest або умова array-contains звужує список до будь-якого потрібного вам стека без попередньої обробки.

Чим це відрізняється від Websites and Ranking?

Websites and Ranking дає всі сайти з країною та рангом. Technologies залишає ті сайти, для яких вдалося зняти відбиток, і додає до них виявлений стек, HTTP-статус, IP та соціальні посилання.

Наскільки свіжі ці дані?

Технологічні відбитки перевіряються повторно постійно, а повний датасет експортується заново щодня. У межах вашого періоду доступу ви можете завантажувати файл повторно скільки завгодно.

У якому форматі постачаються дані?

JSON Lines зі стисненням zstandard (11,1 GB), одна задокументована схема. Файл завантажується в Postgres, BigQuery, Snowflake чи DuckDB без попередньої обробки.

Чи відповідає це вимогам GDPR?

Так. Використовуються лише публічні сигнали HTTP-відбитків, DNS і WHOIS. Датасет не призначений містити персональні контактні дані, і ми вживаємо заходів, щоб їх виключити.

Як отримати дані після оплати?

Щойно платіж підтверджено, датасет з'являється в завантаженнях вашого акаунта. Ви можете повторно завантажувати найсвіжіший щоденний експорт скільки завгодно разів протягом усього місячного періоду доступу.

Чи можна використовувати дані комерційно?

Так. Ви можете використовувати дані з будь-якою законною метою, комерційною чи ні. Це включає створення та продаж продуктів на їх основі, а також перепродаж чи перерозповсюдження самих даних без окремої угоди та доплати. Ваш єдиний обов'язок полягає в тому, щоб дотримуватися законодавства, яке застосовується до вашого використання, зокрема антиспамового законодавства і законодавства про захист даних. Повне формулювання наведено в Умовах.

Чи можливе повернення коштів?

Датасети є цифровими продуктами, тому всі продажі остаточні. Кожен датасет має зразок на 10 000 рядків із точною схемою, доступний з безкоштовним акаунтом. Єдиний виняток з остаточного продажу становить істотний дефект, як-от пошкоджений файл, неправильна схема або понад 5% пропущених рядків. Напишіть у підтримку протягом 72 годин, і ми повторно видамо файл або повернемо кошти.

Отримайте повний список сайтів та їхніх технологій

313.9M сайтів · 3 030 технологій · свіжий експорт щодня · €159 за місяць.