Overview of crawling and indexing topics

Topik di bagian ini menjelaskan bagaimana Anda dapat mengontrol kemampuan Google untuk menemukan dan mengurai konten Anda guna menampilkannya di Penelusuran dan Properti Google lainnya, serta cara mencegah Google meng-crawl konten tertentu di situs Anda.

Berikut deskripsi singkat setiap halaman. Baca artikel lengkapnya di sini.

Topik Deskripsi
Mengelola peta situs Anda Beri tahu Google tentang halaman di situs Anda yang baru atau diperbarui.
Memblokir akses ke konten Anda Cegah Google mengakses atau menampilkan konten dari situs Anda di Penelusuran atau Properti Google lainnya. Lihat metode mana yang paling sesuai dengan kebutuhan Anda.
Menghapus informasi dari Google Hapus konten dari situs Anda yang muncul di Google.
Memberi tahu Google tentang konten duplikat Anda Beri tahu Google tentang halaman duplikat di situs Anda untuk menghindari crawling yang berlebihan. Pelajari cara Google mendeteksi otomatis konten duplikat, menangani konten duplikat, dan menetapkan halaman kanonis ke grup halaman duplikat yang ditemukan.
Meminta Google untuk meng-crawl ulang URL Anda baru saja memublikasikan halaman penting baru atau yang telah diperbarui dan ingin Google menemukannya dengan cepat.
Memastikan Googlebot tidak diblokir Pastikan bahwa Google dapat mengakses semua halaman di situs Anda yang ingin ditampilkan di Penelusuran.
Membuat halaman 404 kustom Cara membuat halaman 404 kustom dengan benar yang sesuai untuk pengguna dan Googlebot.
Mentransfer, memindahkan, atau memigrasikan situs Anda Jika Anda memindahkan situs dari satu domain ke domain lainnya, berikut cara meminimalkan gangguan pada hasil penelusuran.
Tag khusus yang dipahami oleh Google Google mendukung beberapa ekstensi tag yang mengatur tampilan dan perilaku penelusuran.
Crawler Google Informasi tentang berbagai crawler yang digunakan oleh Google untuk berbagai tugas.
Laporan Statistik Crawling Laporan Statistik Crawling menunjukkan informasi tentang waktu dan jumlah crawling Google terhadap situs Anda.
Mengubah kecepatan crawling Googlebot Jika Google membuat terlalu banyak permintaan crawl ke situs Anda, Anda dapat memberi tahu kami untuk memperlambat permintaan kami.