クロールとインデックス登録に関するトピックの概要

このセクションでは、Google がお客様のコンテンツを見つけて解析し、検索などの Google サービスに表示する方法を制御する方法や、お客様のサイトの特定のコンテンツを Google がクロールするのを防ぐ方法について説明します。

以下は、各ページに関する簡単な説明です。クロールとインデックス登録の仕組みについては、検索の仕組みに関する上級者向けガイドをご覧ください。

トピック
サイトマップ	サイト上の新しいページや更新されたページについて Google に通知できます。
robots.txt	robots.txt ファイルは、クローラがどのページやファイルをサイトからリクエストできるか、またはできないかを検索エンジン クローラに知らせるものです。
メタタグ	Google は、Google 検索での表示や動作を制御する複数のタグ拡張をサポートしています。
クローラの管理	URL の再クロールを Google にリクエストする Googlebot のクロール頻度を下げる Googlebot かどうかの確認 大規模なサイト所有者向けのクロール割り当て管理ガイド Google クローラ
削除	Google と共有するコンテンツを制限する 自身のサイトでホストしているページを Google から削除する 自身のページでホストしている画像を検索結果から削除する Search Console を使用して、Google ローカルなどの Google サービスでの表示からオプトアウトする
重複コンテンツ	お客様のサイトの重複するコンテンツを Google に通知し、過度なクロールを回避できます。Google が重複コンテンツを自動検出する仕組み、重複コンテンツの処理方法、重複するページのグループに対して正規ページを割り当てる方法をご確認ください。
サイトの移転と変更	リダイレクトと Google 検索 サイトの移転 ウェブサイトを一時停止または無効化する ソフト 404 エラー
多地域、多言語のサイト	サイトのコンテンツに複数の言語版が存在する場合や、ロケーションによってコンテンツが異なる場合は、Google がサイトの内容を理解できるようにする方法をご確認ください。
JavaScript コンテンツ	クローラによるアクセスやレンダリングに対応するには、ページやアプリケーションを設計する際に特別に考慮しなければならない点や制限事項がいくつかあります。