クロールとインデックス登録に関するトピックの概要

このセクションでは、Google がお客様のコンテンツを見つけて解析し、検索などの Google サービスに表示する方法を制御する方法や、お客様のサイトの特定のコンテンツを Google がクロールするのを防ぐ方法について説明します。

以下は、各ページに関する簡単な説明です。クロールとインデックス登録の仕組みについては、検索の仕組みに関する上級者向けガイドをご覧ください。

トピック
サイトマップ サイト上の新しいページや更新されたページについて Google に通知できます。
robots.txt robots.txt ファイルは、クローラがどのページやファイルをサイトからリクエストできるか、またはできないかを検索エンジン クローラに知らせるものです。
メタタグ Google は、Google 検索での表示や動作を制御する複数のタグ拡張をサポートしています。
クローラの管理
削除
重複コンテンツ お客様のサイトの重複するコンテンツを Google に通知し、過度なクロールを回避できます。Google が重複コンテンツを自動検出する仕組み、重複コンテンツの処理方法、重複するページのグループに対して正規ページを割り当てる方法をご確認ください。
サイトの移転と変更
多地域、多言語のサイト サイトのコンテンツに複数の言語版が存在する場合や、ロケーションによってコンテンツが異なる場合は、Google がサイトの内容を理解できるようにする方法をご確認ください。
JavaScript コンテンツ クローラによるアクセスやレンダリングに対応するには、ページやアプリケーションを設計する際に特別に考慮しなければならない点や制限事項がいくつかあります。