ヘルプセンター

よくある質問

webatlaのデータセット、サブスクリプションなしのモデル、フォーマット、請求、プライバシーについてのすべてをご紹介します。

🤔
該当する質問が見つかりません。
より短いキーワードでお試しいただくか、サポートにお問い合わせください。

はじめに

基本情報(webatlaとは何か、どのように機能するか、誰のためのものか)。

webatlaとは何ですか?

webatlaはグローバルなドメインデータベースです。ウェブ上のすべてのアクティブなドメイン(合計4.25億件)を対象にクロール、分類、エンリッチを行い、その結果を構造化されたJSON Linesデータセット(zstd 圧縮)としてご自身でダウンロードして処理できる形で提供します。

ログインして使うクエリ用のUIはありません。データセットを購入してファイルをダウンロードするか、ダウンロードAPI 経由でプログラムから取得します。

誰のためのものですか?

主に4種類のチームが対象です。

  • リサーチ&データ: アナリスト、MLチーム、ウェブ動向を計測する学術研究者
  • 成長&営業: リードリストの構築(「ドイツにあるすべてのShopifyストア」など)
  • セキュリティ&脅威インテリジェンス: なりすましドメインや新規登録、リスクの高い技術スタックの追跡
  • ドメイン投資家: トラフィックとランクを備えた期限切れ間近のドメインの発掘
無料のサンプルはありますか?

はい。すべてのデータセットに、フルファイルと同じスキーマの10,000行サンプルダウンロードが用意されています。無料アカウント登録でダウンロードできます。データセットを見ると、サンプルを入手できます。

購入後どれくらいでデータが届きますか?

即時です。ダウンロードリンクは注文確認ページに表示され、数秒以内にメールでも届きます。10GBを超えるデータセットはダウンロード中にストリーミングされるため、エクスポート処理の完了を待つ必要はありません。

データセット&データ

中身、収集方法、更新頻度について。

どのデータセットを販売していますか?

コアとなる6つのデータセットに加えて、特別オファーが1つあります。

  • All active domains · €29 · 4.3億行
  • Active websites + Ranking · €99 · 3.3億行
  • Technologies · €159 · 3.1億行
  • DNS · €199 · 3.5億行
  • RDAP & WHOIS · €299 · 4.1億行
  • All data · €599 · 4.3億行 · すべて含む
  • Domain Investor · €299 · ランク付きの期限切れ・期限間近ドメイン

詳細はすべて料金ページに掲載しています。

ドメインはどのように数えていますか?

当社の総数には、すべてのICANNトップレベルドメイン(分野別と国別コード)のドメインと、Public Suffix Listに掲載されているmyshopify.comやblogspot.comなどのプライベートサフィックスのドメインが含まれます。現在、その数は4.25億件です。この数は毎日更新されます。

DNSレコードを持つドメインが総数より少ないのはなぜですか?

登録済みでアクティブなドメインの多くは、DNSレコードが空で、ネームサーバーもありません。これらのドメインは総数に含まれますが、DNSデータセットには行がありません。現在、DNSデータセットには3.5億行が含まれています。

DNSレコードのないドメインも、All active domainsやAll dataなど、ドメインを一覧にしたファイルには含まれています。

データの更新頻度はどれくらいですか?

毎日、すべてのデータセットの最新エクスポートを生成しています。アクセス期間中は、いつでも最新バージョンをダウンロードできます。

データの出所はどこですか?

複数のソースを組み合わせています。

  • ゾーンファイルを公開している全TLDの公開ゾーンファイル
  • 自社リゾルバーによるアクティブなDNS解決
  • 公開されているRDAPおよびWHOISエンドポイント
  • 技術フィンガープリンティング用の自社クローラー(HTTPヘッダー、HTMLマーカー、JSヒューリスティクス)
  • 公開されているランキングシグナル(PageRank、Harmonic Centrality)
技術検出の精度はどれくらいですか?

広く普及しているプラットフォーム(WordPress、Shopify、Cloudflare、Google Analytics)では、精度はおおむね99%です。ロングテールや自己ホスト型のツールは92〜95%程度です。誤検知のほとんどは、同じフィンガープリントを使うホワイトレーベルの再販業者によるものです。

ファイルサイズはどれくらいですか?

ファイルサイズはデータセットごとに異なり、時間とともに増加するため、ここでは固定の数値は示していません。現在の圧縮後サイズは、各データセットのページとチェックアウト画面に表示されます。

ファイルはJSON Lines 形式で、zstd 圧縮(.jsonl.zst)されています。解凍すると数倍のサイズになるため、ディスク容量はそれを見込んで計画してください。

スキーマのドキュメントはありますか?

無料の10,000行サンプル(プレーンな.jsonl)で正確なスキーマを確認できます。データ型を含む完全な列のリファレンスはAPIページにあります。列名は変わりません。新しい列は末尾に追加され(並び順が変わることはありません)、ローダーが壊れることはありません。

料金&請求

支払い、更新、返金の仕組みについて。

本当にサブスクリプションではないのですか?

その通りです。すべてのデータセットは一回限りの購入です。自動更新は行わず、明示的に同意いただかない限りカード情報を保存することもありません。アクセス権は自動的に失効し、更新するかどうかはお客様が決めます。

「1か月」のアクセスとはどういう意味ですか?

購入した瞬間から暦上の1か月間、その期間に公開される毎日の最新エクスポートも含めて、データセットを何度でもダウンロードできます。期限が切れると、ダウンロードリンクは使用できなくなります。

年間オプションはどういう仕組みですか?

仕組みは同じで、期間だけが長くなります。月額料金の10倍を支払うことで丸1年分のアクセス権が得られ、毎月更新する場合と比べて2か月分お得です。こちらも一回限りの購入で、自動更新はありません。

どの支払い方法に対応していますか?

カードまたは暗号資産でお支払いいただけます。カード決済(Visa、Mastercard、Amex)はStripeが処理します。暗号資産での決済(BTC、ETH、USDTなど)はPayerURLが処理します。

銀行振込はご依頼に応じて対応します。sales@webatla.comまでご連絡ください。

返金には対応していますか?

いいえ。データセットはデジタル商品であり、すべての販売は最終確定となります。 すべてのデータセットには、フルファイルと同じスキーマ・品質の10,000行プレビューがあります。 プレビューは、アカウントをお持ちであれば無料でダウンロードできます。チェックアウト時には、プレビューを確認済みである旨をお客様に表明していただきます。

唯一の例外は重大な欠陥がある場合です。スキーマの誤り、破損または不正な形式のファイル、掲載件数に対して5%を超える行の欠落がこれにあたります。 その場合は72時間以内にsupport@webatla.comまでメールでご連絡ください。 ファイルを再発行するか、返金いたします。

配信は、お支払いが確認された時点で直ちに開始されます。 チェックアウト時に当社の規約に同意することで、お客様はこの即時の配信を求め、ダウンロードが可能になった時点で法律上のいかなる撤回権も失うことを了承します。 お客様が消費者である場合、これによってお客様が有するその他の強行規定上の権利が影響を受けることはありません。

暗号資産には対応していますか?

はい。BTC、ETH、USDTなどの暗号資産での決済に対応しており、PayerURLが運営する暗号資産チェックアウトからお支払いいただけます。決済が確認されると、アクセス権は自動的に有効になります。

データセットを切り替えることはできますか?

各データセットは個別の購入となるため、別のデータセットに切り替える場合は新規購入が必要です。アップグレード分の差額精算はありません。

アクセスがまだ有効な間に同じデータセットを再度購入すると、それは更新になります。新しい1か月分は残り期間の上に加算されるため、日数が無駄になることはありません。

VAT情報付きの請求書は発行できますか?

はい。購入前に請求設定 → 請求書情報で会社名とVAT番号を登録しておくと、以降のすべての請求書が正しい内容で発行されます。過去の請求書についても、ご依頼いただければ再発行いたします。

VATは課税されますか?

ご注文にVATは加算されません。チェックアウト時の価格が、お支払いいただく金額のすべてです。

フォーマット&配信

実際にファイルを受け取る方法について。

データはどの形式で提供されますか?

JSON Lines 形式で、zstd 圧縮(.jsonl.zst)されており、1行につき1つのJSONオブジェクトです。無料の10Kサンプルは非圧縮のプレーンな.jsonlです。提供するフォーマットはこれのみで、Parquetなど他のフォーマットはありません。

ダウンロードはどのように行いますか?

署名付きのHTTPSダウンロードで、レジューム(再開)に対応しており、アクセス期間中はずっと有効です。データセット全体はもちろん、TLDやTLDサフィックス、国、技術といった一部分だけを取得することもできます。

同じファイルには、お客様のキーを使ってダウンロードAPIからプログラム的にアクセスすることもできます。

BigQuery / Snowflake / Postgresと組み合わせて使えますか?

はい。ファイルはJSON Lines(改行区切りのJSON)形式です。zstdで解凍してNDJSONとして読み込んでください。BigQuery、SnowflakeおよびDuckDBはJSONLを直接取り込めます。Postgresの場合は、各行をjsonb列に読み込むか、事前にjqでフラット化してください。

APIはありますか?

はい。ダウンロードAPIは、追加費用なしですべてのデータセットに含まれています。アカウントのBearerキーを使って、フルファイルまたはスコープ単位のスライス(TLD、サフィックス、国、技術のいずれか1つ)を取得できます。個別のクエリ用/検索用のAPIはありません。絞り込みが必要な場合は、該当するスライスをダウンロードしてローカルでフィルタしてください。詳しいドキュメントはAPIページにあります。

データセットが更新されたときに通知を受け取れますか?

はい。アカウント → APIキー → WebhooksでWebhookを追加すると、毎日のエクスポートが更新されるたびにdataset.updatedイベントをPOSTし、変更されたデータセットを通知します。あとはお客様のジョブがダウンロードAPI 経由で最新ファイルを取得します。

プライバシー&法務

GDPR、マスキング、データの利用範囲について。

データはGDPRに準拠していますか?

はい。データセットは、公開されているDNS、RDAP、WHOISのデータと公開ウェブサイトをもとに構築されています。個人の連絡先情報を含むようには設計されておらず、当社はそれを除外するための対策を講じています。提供前に、生の登録記録から個人に関するフィールドをマスキングしています。

ファイル内に個人データを見つけた場合は、お客様に適用される法律のもとで個人データとして取り扱い、privacy@webatla.comまでお知らせください。データ処理契約(DPA)はご依頼いただければご提供します。

データをアウトバウンドメールやコールドアウトリーチに使えますか?

はい。ただし、アウトリーチは、スパム対策法やデータ保護法など、そのアウトリーチに適用される法律に従っている必要があります。データセットは連絡先情報を含むようには設計されておらず、当社はそれを除外するための対策を講じています。使用するメールアドレスや電話番号は、お客様自身の適法な情報源から取得したものでなければなりません。

アウトリーチについてはお客様ご自身の責任となります。利用規約をご覧ください。

データを再配布または転売できますか?

はい。商用か非商用かを問わず、あらゆる適法な目的でデータをご利用いただけます。データをもとに製品を構築して販売することも、データそのものを再販、再配布、サブライセンスすることもできます。webatlaと競合する製品に使う場合も同様です。書面による契約は不要で、追加料金もかかりません。webatlaへの言及も必須ではありません。

お客様の唯一の義務は、スパム対策法やデータ保護法など、お客様の利用に適用される法律を守ることです。ライセンスはアクセス期間中にダウンロードしたすべてのファイルが対象で、アクセス期間が終了してもライセンスは終了しません。利用規約をご覧ください。

アカウント

ログイン、パスワード、アカウントの削除について。

パスワードを忘れました。

パスワード再設定をご利用ください。ワンタイムのリセットリンクをメールでお送りします(有効期限30分)。パスワードを再設定しても、データセットへのアクセス権や有効なセッションには影響しません。

チームメンバーを追加できますか?

いいえ。各アカウントは1名で利用するためのものです。同僚の方がサインインする必要がある場合は、その方ご自身のアカウントを作成してください。ダウンロードしたファイルはチームで共有できます。チームで共有のアクセスが必要な場合は、お問い合わせください。

アカウントを削除するにはどうすればいいですか?

アカウント → 設定 → 危険ゾーンから削除できます。アカウントを削除すると、すべての端末でサインアウトされ、APIキーとWebhookが無効になります。また、データセットへのアクセス権も直ちに終了し、未使用期間分の返金は行われません。すでにダウンロードしたファイルは、引き続き利用規約のライセンスの対象となります。

さらにサポートが必要ですか?

担当者に連絡する3つの方法。

メールサポート

1営業日以内に返信します。

support@webatla.com

お問い合わせフォーム

1営業日以内にメールで返信します。

フォームを開く

ドキュメントを読む

列、エンドポイント、活用例について。

ドキュメントを開く →