Memblokir pengindeksan Penelusuran dengan 'noindex'

Anda dapat mencegah halaman agar tidak dimunculkan di Google Penelusuran dengan menyertakan tag meta noindex dalam kode HTML halaman, atau dengan menampilkan header noindex di permintaan HTTP. Saat Googlebot meng-crawl lagi halaman dan melihat tag atau header di atas, Googlebot akan menghapus halaman tersebut sepenuhnya dari hasil Google Penelusuran, terlepas apakah situs lain tertaut ke halaman itu atau tidak.

Menggunakan noindex akan berguna jika Anda tidak memiliki akses root ke server, karena dengan demikian Anda dapat mengontrol akses ke situs dengan basis halaman demi halaman.

Menerapkan noindex

Ada dua cara untuk menerapkan noindex: sebagai tag meta dan sebagai header respons HTTP. Keduanya memiliki efek yang sama; pilih metode yang lebih sesuai untuk situs Anda.

Tag <meta>

Agar sebagian besar web crawler mesin telusur tidak mengindeks halaman di situs Anda, tempatkan tag meta berikut di bagian <head> halaman:

<meta name="robots" content="noindex">

Agar web crawler Google saja yang tidak mengindeks halaman:

<meta name="googlebot" content="noindex">

Perlu diketahui bahwa beberapa web crawler mesin telusur mungkin menafsirkan perintah noindex secara berbeda. Oleh karena itu, halaman Anda mungkin masih muncul di hasil mesin telusur lainnya.

Baca selengkapnya tentang tag meta noindex.

Header respons HTTP

Selain tag meta, Anda juga dapat menampilkan header X-Robots-Tag dengan nilai noindex atau none dalam respons. Berikut contoh respons HTTP dengan X-Robots-Tag yang memerintahkan crawler agar tidak mengindeks halaman:

HTTP/1.1 200 OK
(…)
X-Robots-Tag: noindex
(…)

Baca selengkapnya tentang header respons noindex.

Membantu kami melihat tag meta Anda

Kami harus meng-crawl halaman Anda untuk melihat tag meta dan header HTTP. Jika halaman masih muncul di hasil penelusuran, kami mungkin belum meng-crawl halaman sejak tag ditambahkan. Anda dapat meminta Google untuk meng-crawl halaman menggunakan alat Inspeksi URL. Alasan lainnya adalah karena file robots.txt mungkin memblokir URL dari web crawler Google, sehingga tag tidak dapat dilihat. Untuk membatalkan pemblokiran halaman dari Google, Anda harus mengedit file robots.txt. Anda dapat mengedit dan menguji robots.txt menggunakan alat Penguji robots.txt .