Noindex Checker: Cara Menemukan Halaman Noindex Sebelum Anda Kehilangan Traffic
Satu baris HTML bisa menahan halaman agar tidak masuk Google. Itu persis yang Anda inginkan di halaman terima kasih, dan persis yang tidak Anda inginkan di halaman produk yang lupa dikembalikan developer setelah peluncuran. Noindex checker memberi tahu halaman mana yang memuat noindex, di mana noindex dipasang, dan apakah Google bahkan bisa melihatnya.
Apa yang Dilakukan Noindex Checker
Noindex checker mengambil sebuah URL dan membaca dua tempat: tag meta robots di HTML dan X-Robots-Tag di header respons HTTP. Checker melaporkan apakah salah satunya menyatakan noindex atau none, dan untuk crawler mana.
Mengecek satu URL menjawab pertanyaan cepat. Mengecek setiap URL dalam crawl menjawab pertanyaan yang berguna: halaman dapat diindeks mana yang ingin Anda rankingkan ternyata memuat noindex, halaman noindex mana yang masih ada di Sitemap XML, dan mana yang tidak bisa dibaca Google karena diblokir robots.txt.
Dua Cara Memasang Noindex
Halaman Google tentang memblokir pengindeksan dengan noindex menyatakan kedua metode punya efek yang sama. Pilih yang sesuai dengan tipe file-nya.
| Metode | Lokasinya | Berlaku untuk | Terlihat di |
|---|---|---|---|
| Tag meta robots | Head HTML | Halaman HTML | Source halaman |
| Header X-Robots-Tag | Respons HTTP | File apa pun, PDF, gambar | Header respons |
| Baris noindex di robots.txt | robots.txt | – tidak didukung | Diabaikan Google |
<!-- in the <head> -->
<meta name="robots" content="noindex">
# as an HTTP response header
X-Robots-Tag: noindex
Ganti robots dengan nama crawler, seperti googlebot, untuk menujukan aturan ke satu crawler. Referensi meta robots dan X-Robots-Tag dari SEO ProCheck mencantumkan setiap nilainya.
Sekilas Direktif Robots
Nilai yang didokumentasikan Google dalam spesifikasi robots meta tag-nya, dan fungsi masing-masing:
| Direktif | Dampak | Penggunaan umum |
|---|---|---|
noindex | Tidak ditampilkan di hasil pencarian | Terima kasih, pencarian internal |
nofollow | Link di halaman tidak diikuti | Halaman pengguna yang tidak tepercaya |
tidak ada | noindex plus nofollow | Jarang menjadi pilihan yang tepat |
nosnippet | Tanpa snippet teks | Teks berbayar atau teks hukum |
max-snippet:[n] | Snippet hingga n karakter | Snippet lebih pendek |
unavailable_after:[date] | Dihapus setelah tanggal itu | Acara, penawaran |
index, follow | Default, tanpa efek | Boleh tidak dicantumkan |
Saat dua direktif bertentangan, Google menerapkan yang lebih ketat. Halaman dengan index di HTML dan noindex di header akhirnya tidak terindeks.
Kesalahan Noindex yang Menyembunyikan Halaman yang Salah
| Kesalahan | Dampak | Perbaikan |
|---|---|---|
| Noindex staging tertinggal saat peluncuran | Seluruh situs hilang dari hasil | Hapus, crawl ulang |
| Noindex plus Disallow di robots.txt | Noindex tidak pernah terbaca | Izinkan crawling |
| Noindex dihapus oleh JavaScript | Google mungkin melewatkan rendering | Sajikan tag akhirnya |
| URL noindex di Sitemap XML | Sinyal campur aduk | Keluarkan dari sitemap |
| Canonical plus noindex | Sinyal yang bertentangan | Pilih salah satu |
| Meta robots di luar head | Tag bisa diabaikan | Pindahkan ke head |
| Header dan HTML tidak sama | Yang lebih ketat menang | Gunakan satu sumber |
| Hreflang mengarah ke noindex | Set bahasa rusak | Arahkan ke URL yang dapat diindeks |
Baris kedua adalah kejutan yang paling umum. Google menyatakan bahwa jika robots.txt memblokir sebuah halaman, crawler tidak akan pernah melihat aturan noindex, dan URL tersebut tetap bisa muncul di hasil pencarian hanya dari link. Baris ketiga berasal dari dasar-dasar JavaScript SEO dari Google: saat Google menemukan noindex di HTML asli, Google bisa melewatkan rendering, sehingga script yang menghapusnya belakangan mungkin tidak pernah berjalan. Panduan robots.txt tester membahas sisi crawling-nya.
Berapa Lama Noindex Bekerja, dan Opsi yang Lebih Cepat
Google menghapus halaman setelah meng-crawl-nya dan membaca noindex. Itu bergantung pada kapan Google kembali, dan Google menyatakan bisa memakan waktu berbulan-bulan untuk sebagian halaman. Pilih alatnya sesuai tujuan:
| Tujuan | Gunakan | Seberapa cepat |
|---|---|---|
| Keluar dari hasil sekarang | Alat Penghapusan, lalu noindex | Paling cepat |
| Keluar dari hasil selamanya | noindex, 404, atau 410 | Crawl berikutnya |
| Di-crawl tetapi tidak diindeks | noindex | Crawl berikutnya |
| Tidak di-crawl sama sekali | Disallow di robots.txt | Pengambilan robots.txt berikutnya |
| Kembali ke hasil pencarian | Hapus noindex, minta pengindeksan | Beberapa hari sampai beberapa minggu |
Alat Penghapusan hanya menyembunyikan URL selama sekitar enam bulan, jadi halaman tetap butuh noindex, 404, atau 410 di baliknya. Gunakan Minta Pengindeksan di Inspeksi URL untuk sejumlah kecil halaman penting setelah Anda memperbaikinya.
Cara Mengecek Noindex Secara Manual
Untuk satu URL, cek kedua tempat. Header dulu, lalu HTML:
curl -sI https://example.com/page | grep -i x-robots-tag
curl -s https://example.com/page | grep -io '<meta[^>]*robots[^>]*>'
Lalu cek apa yang dilihat Google. Di Search Console, Inspeksi URL menunjukkan HTML yang diterima Googlebot, dan laporan Pengindeksan halaman mencantumkan setiap halaman yang dikecualikan sebagai URL marked 'noindex'. Lihat daftar itu setelah setiap rilis: halaman yang ingin Anda tampilkan di pencarian tidak boleh ada di sana.
Ada dua jebakan pada pengecekan manual. Situs bisa menjawab user agent crawler secara berbeda dari browser, dan tag yang ditambahkan JavaScript hanya muncul di HTML hasil render, bukan di curl. Crawler yang mengambil HTML mentah dan hasil render melihat keduanya.
Cek Noindex di Seluruh Situs
- Crawl situs dari beranda, dengan render JavaScript aktif jika situsnya bergantung padanya.
- Daftar setiap halaman yang tidak dapat diindeks berdasarkan alasannya: noindex, canonical ke URL lain, status error, atau diblokir.
- Urutkan halaman noindex per template. Satu template dengan noindex bisa menyembunyikan ratusan halaman sekaligus.
- Bandingkan dengan Sitemap XML Anda. Setiap URL yang tercantum seharusnya dapat diindeks. Pada crawl kami sendiri atas seoprocheck.com pada 17 Oktober 2026, sitemap mencantumkan 1.835 URL sementara 4.561 halaman HTML menjawab 200, karena itu kedua daftar perlu dicek satu sama lain.
- Gabungkan klik Search Console. Halaman noindex yang masih mendapat klik berarti sampai baru-baru ini masih ranking, yang sering menjadi tanda kesalahan.
- Crawl lagi setelah setiap rilis dan bandingkan, agar noindex baru terlihat di hari yang sama saat dirilis.
Panduan indexability checker membahas alasan lain sebuah halaman tidak bisa diindeks, dan panduan XML sitemap checker membahas sisi sitemap.
Temukan Halaman Noindex dengan Neova
Neova menandai setiap URL sebagai Dapat diindeks atau Tidak dapat diindeks dan menjelaskan alasannya: status 200, tanpa noindex, canonical ke dirinya sendiri atau tanpa canonical. Set kolom Direktif di Semua URL menunjukkan direktif robots setiap URL, dengan filter Noindex dan Nofollow. Migrasi dan staging membandingkan crawl staging dengan produksi, termasuk noindex, sehingga noindex staging tidak lolos ke peluncuran tanpa disadari.

Pemeriksaan di baliknya antara lain:
- Direktif noindex ada dan Direktif noindex dan nofollow ada
- Noindex berbeda antara HTML dan header HTTP dan Noindex dideklarasikan lebih dari sekali
- Direktif Noindex Dihapus oleh JavaScript
- Tag meta robots berada di luar head
- URL Noindex Tercantum di XML Sitemap
- URL yang di-canonical-kan bernilai noindex dan Canonical mengarah ke URL noindex
- Redirect internal berakhir di URL noindex dan Hreflang mengarah ke URL noindex
- URL hanya ditautkan dari halaman HTML noindex
- URL noindex menerima klik di Search Console, setelah Search Console terhubung
- Tanggal unavailable_after sudah lewat atau tidak valid
Paket Free meng-crawl 1.000 URL per crawl dengan semua pemeriksaan, di Mac, Windows, dan Linux. Unduh Neova atau lihat Fitur.
Pertanyaan
Bagaimana cara mengecek apakah sebuah halaman noindex?
Cari tag meta robots dengan noindex di source halaman dan header X-Robots-Tag di respons HTTP. Inspeksi URL di Search Console menunjukkan apa yang dilihat Googlebot. Untuk seluruh situs, crawl situsnya dan filter halaman yang tidak dapat diindeks berdasarkan alasannya.
Apakah noindex bekerja jika halaman diblokir di robots.txt?
Tidak. Google harus meng-crawl halaman untuk membaca noindex. Jika robots.txt memblokirnya, Google tidak pernah melihat aturan itu dan URL tetap bisa muncul di hasil pencarian dari link. Izinkan crawling sampai halaman itu hilang dari hasil.
Apakah noindex di robots.txt didukung?
Tidak oleh Google. Google berhenti mendukung baris noindex di robots.txt pada 2019. Gunakan tag meta robots atau header X-Robots-Tag sebagai gantinya.
Berapa lama sampai halaman noindex hilang dari Google?
Sampai Google meng-crawl halaman itu lagi, yang bisa beberapa hari untuk halaman yang ramai dan berbulan-bulan untuk halaman yang jarang di-crawl. Untuk kasus mendesak, gunakan alat Penghapusan, yang menyembunyikan URL selama sekitar enam bulan sementara noindex mulai berlaku.
Apakah halaman noindex sebaiknya ada di sitemap XML saya?
Tidak. Sitemap sebaiknya mencantumkan halaman yang ingin Anda indeks. URL noindex di dalamnya mengirim sinyal yang bertentangan.