Search Console Menunjukkan Noindex: Cara Menemukan Sumber dan Memeriksa URL

Anda ingin sebuah halaman muncul di Google Search, tetapi Search Console melaporkan bahwa halaman tersebut dikecualikan oleh aturan noindex. Sebelum mengubah pengaturan seluruh situs, periksa URL yang tepat dan asal instruksi tersebut. Satu templat, header respons HTTP, atau pengaturan staging yang tertinggal pada satu halaman dapat memerlukan perbaikan yang berbeda.

Panduan ini ditujukan untuk halaman publik yang memang ingin Anda indeks oleh Google. Halaman masuk, dokumen privat, atau lingkungan staging mungkin perlu tetap berada di luar hasil penelusuran. noindex adalah instruksi pengindeksan, bukan kontrol akses: gunakan autentikasi jika informasi harus tetap privat.

Mulai dari URL di Search Console

Salin alamat persis dari laporan, termasuk protokol, path, garis miring di akhir, dan string kueri. Periksa URL tersebut di Search Console. Laporan indeks mencerminkan informasi yang disimpan Google dari perayapan sebelumnya; pengujian live mengambil halaman saat ini dan dapat menunjukkan hasil berbeda. Catat tanggal perayapan dan keterangan pada masing-masing tampilan sebelum melakukan perubahan.

Jika pengujian live masih melaporkan noindex, langkah berikutnya adalah menemukan sumber instruksi tersebut. Jika tidak lagi melaporkannya, laporan indeks sebelumnya mungkin masih mencerminkan perayapan lama. Ini tidak membuktikan bahwa halaman sudah diindeks atau bahwa Google sudah memproses perubahan.

Dokumentasi Pemeriksaan URL Google menjelaskan perbedaan hasil indeks dan pengujian live, termasuk apa yang dapat dan tidak dapat ditentukan oleh masing-masing pengujian.

Periksa HTML dan header respons

Untuk halaman HTML, lihat sumber halaman dan cari noindex. Salah satu instruksi yang mungkin adalah:

<meta name="robots" content="noindex">

Tag meta googlebot juga dapat membawa instruksi tersebut. Periksa halaman yang benar-benar disajikan, bukan hanya templat yang menurut Anda digunakan: pengaturan CMS, plugin, atau konfigurasi deployment dapat menambahkan tag. Jika halaman mengubah metadata dengan JavaScript, periksa hasil render selain respons awal.

Instruksi itu juga dapat muncul dalam header HTTP X-Robots-Tag. Di alat developer browser, buka Network, muat ulang halaman, lalu pilih permintaan dokumen. Cari X-Robots-Tag pada header respons. Jika alamat melakukan pengalihan, periksa setiap respons secara terpisah: URL pengalih dan tujuan akhirnya merupakan URL yang berbeda. Perbaikan mungkin perlu dilakukan pada aturan hosting atau respons aplikasi, bukan editor halaman.

Google mendokumentasikan tag meta robots dan header respons, termasuk aturan untuk crawler tertentu dan nilai none, yang mencakup noindex. Tag meta HTML yang bersih tidak menyingkirkan kemungkinan adanya header.

Periksa perayapan secara terpisah

Buka robots.txt situs dan periksa apakah crawler Google yang relevan dapat mengambil halaman tersebut. Pemblokiran perayapan dan noindex memiliki fungsi berbeda. Google harus dapat mengakses halaman atau resource untuk melihat instruksi noindex; URL yang diblokir dalam robots.txt masih dapat muncul di hasil penelusuran berdasarkan tautan atau informasi lain. Google juga tidak mendukung penempatan noindex dalam robots.txt sebagai aturan pengindeksan. Lihat panduan noindex dari Google.

Jangan menghapus pembatasan perayapan di seluruh situs hanya agar satu laporan berubah menjadi hijau. Pastikan dahulu mengapa pembatasan itu ada dan apakah URL tersebut memang ditujukan untuk publik. Dalam pengujian live Search Console, periksa apakah pengambilan benar-benar berhasil; persyaratan masuk, kesalahan server, atau masalah akses lain perlu diselidiki tersendiri.

Ubah sumber instruksi, lalu periksa lagi

Untuk halaman yang memang harus diindeks, hapus noindex yang tidak disengaja pada lapisan yang menghasilkannya. Misalnya, jika pengaturan penerbitan mengontrol satu artikel, ubah pengaturan itu; jika templat bersama menetapkan tag atau header untuk semua halaman publik, periksa cakupan yang dimaksudkan sebelum mengubah templat tersebut. Tetap lindungi konten privat dan staging.

Ambil kembali URL yang sama dan periksa HTML maupun header. Kemudian jalankan pengujian live Search Console. Jika hasil live tidak lagi menunjukkan aturan tersebut dan halaman siap untuk penelusuran, Anda dapat meminta pengindeksan melalui Pemeriksaan URL. Pengujian live yang berhasil atau permintaan pengindeksan bukan jaminan halaman akan diindeks; laporan indeks Google diperbarui setelah pemrosesannya sendiri, dan Google masih dapat memilih untuk tidak mengindeks halaman karena alasan lain.

Jika URL yang terdampak adalah beranda Anda, SEOHabit menawarkan pemeriksaan pertama untuk beranda setelah pendaftaran. Periksa respons dan gunakan pengujian live Search Console untuk memverifikasi masalah noindex yang spesifik. SEOHabit tidak mengubah halaman untuk Anda; pemilik situs atau developer melakukan dan memverifikasi koreksi dalam lingkungan tempat situs dikelola.

Catat URL, tag atau header yang ditemukan, tempat perubahan dilakukan, dan tanggal pengujian live. Dengan begitu Anda memiliki hal konkret untuk dibandingkan ketika hasil yang disimpan Search Console berikutnya berubah.