인터넷에 등록된 모든 도메인 이름을 하나의 구조화된 파일에 담은 활성 도메인의 전체 목록을 찾고 계십니까? 영업 파이프라인을 구축하든, 보안 리서치를 수행하든, 모델을 훈련하든, 시장 규모를 산정하든, 어려운 부분은 대부분 분석이 아닙니다. 애초에 깨끗하고 최신이며 기계가 읽을 수 있는 데이터를 확보하는 일입니다.
이 가이드는 2026년 기준으로 현실적인 선택지, 「활성」이 실제로 의미하는 바, 그리고 전체 세트를 최신 JSONL로 다운로드하는 방법을 다룹니다.
「활성」 도메인이란 무엇인가
도메인은 레지스트리에 등록되어 있고 DNS 리졸브가 가능할 때 활성 상태입니다. 즉 해당 TLD의 존에 존재하며 보통 어딘가를 가리키는 DNS 레코드를 가지고 있다는 뜻입니다. 이는 다음과 다릅니다:
- 파킹된 도메인은 등록은 되어 있지만 실제 사이트를 서비스하지 않는 도메인입니다.
- 만료되었거나 삭제 대기 중인 도메인은 더 이상 등록되어 있지 않은 도메인입니다.
- 서브도메인의 경우,
blog.example.com은 별도의 등록이 아니며example.com이 별도의 등록입니다.
사람들이 「모든 도메인」을 요청할 때, 그것은 거의 항상 모든 TLD에 걸친 모든 등록된 2단계 도메인을 의미합니다. 예를 들어 example.com, example.org, example.de 등입니다. 이런 도메인은 수천 개의 TLD에 걸쳐 수억 개가 존재합니다.
데이터를 얻는 세 가지 방법
1. TLD 존 파일
ICANN의 중앙집중식 존 데이터 서비스(CZDS)를 통해 대부분의 gTLD에 대한 존 파일을 요청할 수 있습니다. 존 파일에는 해당 TLD에 속한 도메인과 그 네임서버가 함께 나열되어 있습니다.
장점: 신뢰할 수 있는 공식 데이터이며 무료입니다. 단점: TLD마다 개별적으로 신청하고 승인을 받아야 하고, 대부분의 ccTLD(.de, .uk, .fr 등)는 아예 존 파일을 공개하지 않으며, 얻을 수 있는 것도 도메인과 NS 레코드뿐입니다. 기술 스택도, 순위도, 등록 정보도 없습니다. 게다가 신선도가 제각각인 수백 개의 파일을 직접 병합해야 합니다.
2. 레지스트라 또는 레지스트리 내보내기
일부 레지스트리는 목록을 판매하거나 공개합니다. 다만 커버리지가 일관되지 않고 형식도 제각각이며 ccTLD 정책도 크게 다르고, 순수한 도메인 이름 외에는 거의 아무것도 얻을 수 없습니다. 이런 방식으로 전 세계 커버리지를 짜맞추는 일은 그 자체로 하나의 프로젝트입니다.
3. 완성된 도메인 데이터셋
실용적인 선택지는 수집, 중복 제거, 데이터 보강이 이미 끝난 데이터셋을 다운로드하는 것입니다. All Active Domains 데이터셋이 바로 그런 데이터셋입니다. 모든 TLD에서 관찰되는 모든 활성 도메인을 매일 새로 고침하여 담은, 다운로드 가능한 단일 파일입니다.
All Active Domains 데이터셋에는 무엇이 들어 있는가
각 줄은 하나의 도메인을 나타내며, 필터링과 분류에 필요한 필드를 담고 있습니다:
| 필드 | 예시 | 용도 |
|---|---|---|
domain |
example.com |
등록 자체 |
tld |
com |
TLD로 필터링 |
created / updated |
2014-03-09 |
연식, 최신성, 신규 등록 필터 |
ns |
ns1.cloudflare.com |
DNS 제공자 및 호스팅 클러스터 |
status |
active |
리졸브 가능 상태 대 파킹 상태 |
목록 자체보다 더 많은 정보가 필요하십니까? 각 사이트가 어떤 기술을 사용하는지 보려면 Technologies 데이터셋을 추가하시고, 등록 상세 정보가 필요하면 RDAP & WHOIS 데이터셋을 확인하십시오.
왜 JSONL인가
모든 webatla 데이터셋은 JSONL 형식으로 제공됩니다. 한 줄에 하나의 JSON 객체가 들어가는 방식입니다. 확장성이 뛰어난 형식입니다:
- 스트리밍 가능: 전체 파일을 메모리에 올리지 않고도 한 줄씩 처리할 수 있습니다.
- 툴 친화적:
jq, pandas, DuckDB, BigQuery, Spark와 별도 설정 없이 바로 사용할 수 있습니다. - 스키마 안정성: 파서를 깨뜨리지 않고도 새로운 필드를 추가할 수 있습니다.
jq 하나만으로 TLD별 도메인 수를 셀 수 있습니다:
cat all-active-domains.jsonl | jq -r .tld | sort | uniq -c | sort -rn | head
또는 DuckDB에서 직접 쿼리할 수도 있습니다:
SELECT tld, count(*) AS domains
FROM 'all-active-domains.jsonl'
GROUP BY tld
ORDER BY domains DESC;
데이터는 얼마나 최신인가
도메인은 매분 등록되고 삭제되므로, 6개월 전 목록은 대부분 노이즈에 불과합니다. 저희 내보내기 파일은 매일 다시 빌드되며 모든 다운로드는 날짜별로 버전이 관리되므로, 지금 가지고 있는 데이터가 정확히 무엇인지 항상 알 수 있습니다. 가치의 대부분은 신규 등록 도메인에 있습니다. 이런 도메인은 다른 누구도 알아차리기 전에 새로운 사업, 제품 출시, 캠페인의 신호가 됩니다.
자주 묻는 질문
활성 도메인은 총 몇 개입니까? 모든 TLD를 합치면 수억 개에 달하며, 그 수는 매일 변동합니다. 이 데이터셋은 오래된 과거 데이터가 아니라 현재 리졸브 가능한 도메인 집합을 반영합니다.
신규 도메인만 받아볼 수 있습니까?
가능합니다. created 날짜로 필터링하면 신규 등록 도메인만 걸러낼 수 있으며, 최신 등록에 초점을 맞춘 Domain Investor 데이터셋에서 시작하실 수도 있습니다.
WHOIS 스크레이핑이 더 빠른 방법 아닙니까? 아닙니다. WHOIS, 지금의 명칭으로는 RDAP입니다. 이 방식은 이미 알고 있는 도메인에 대한 등록 정보를 반환할 뿐이며, 전체 네임스페이스를 열거하지는 못합니다. 게다가 속도 제한 때문에 대량 조회도 느려집니다.
비용은 얼마입니까? 구독 없이 한 달간의 다운로드 이용료로 정액 요금 하나만 지불하시면 됩니다. 자세한 내용은 가격을 참고하십시오.
전체 목록 받기
존 파일 신청 절차와 미완성 스크레이퍼는 건너뛰십시오. All Active Domains 데이터셋 다운로드 → 오늘 바로 모든 활성 도메인을 깨끗한 JSONL로 확보하십시오. 그 위에 추가로 활용할 것이 있는지 보려면 전체 데이터셋 둘러보기를 이용하십시오.