Web サイトの URL をすばやく見つける Sitemap API
クロール、インデックス化、SEO 分析、ナレッジベース作成の前に、関連 URL を検出します。
エンドポイント
クロール、インデックス化、監査、移行の前に、サイト内の重要 URL を見つけます。
重要 URL をクロール用に整理。
セクションとページ種別を把握。
クロール前にリンクを優先付け。
活用例
クロール準備 / SEO 監査 / 索引化
本文抽出の前にサイト全体を把握
Sitemap endpoint は URL を受け取り、検出したリンクを返します。sitemap.xml を使う sitemap モードと、ページ内リンクも探す all モードを選べます。
完全な発見
ウェブサイト内のすべての関連ページとリンクを検出します。包括的なサイトマッピングで徹底的なコンテンツ抽出の準備をします。
迅速なマッピング
サイト構造マップを迅速かつ効率的に生成します。コンテンツ抽出戦略を計画する際に時間を節約します。
整理された構造
構造化された階層形式でサイトリンクを受け取ります。ウェブサイトの組織とコンテンツの関係を簡単に理解できます。
スマートフィルタリング
無関係なリンクや重複コンテンツを自動的にフィルタリングします。抽出する価値のあるユニークなページにのみ焦点を当てます。
基本フロー
クロール、インデックス化、SEO 分析、ナレッジベース作成の前に、関連 URL を検出します。
ルート URL と sitemap/all の検出モードを指定します。
返されたリンク一覧を確認し、重要なセクションを絞り込みます。
選んだ URL を Crawl API または DeepCrawl に渡します。
主な用途
当社の強力なサイトマップジェネレーターを使用して、ウェブサイトからすべてのURLを抽出します。
ドキュメント、ブログ、ナレッジベース用のクロールキュー作成。
移行や SEO 分析前のサイト構造監査。
Crawl API に渡す重要 URL の選定。
FAQ
どの検出モードがありますか？
sitemap モードは sitemap.xml のリンクを処理します。all モードは sitemap がない場合や不完全な場合に、ページ内リンクも探索します。
Sitemap API のクレジット消費は？
Sitemap API は 1 リクエストあたり 1 クレジットです。