Digital Marketing
Noindex Tag
TL;DR: Noindex tag adalah instruksi
<meta name="robots" content="noindex">atau headerX-Robots-Tag: noindexyang meminta Googlebot tidak menampilkan halaman di hasil pencarian. Halaman tetap bisa di-crawl dan diakses pengguna, hanya tidak diindeks. Cocok untuk halaman thank-you, hasil pencarian internal, halaman admin, atau konten duplikat yang tidak perlu kompetisi di SERP.
Apa itu Noindex Tag?
Noindex tag adalah sinyal eksplisit ke mesin pencari supaya sebuah halaman tidak masuk indeks Google atau Bing. Sinyal dipasang di dua tempat: meta tag di dalam <head> HTML, atau di header HTTP response sebagai X-Robots-Tag. Berbeda dengan robots.txt yang mencegah crawling, noindex tetap mengizinkan bot membaca halaman, hanya menolak halaman muncul di hasil pencarian. Distinction penting karena halaman yang diblokir robots.txt tetap bisa terindeks tanpa konten kalau ada backlink eksternal.
Cara Pasang Noindex Tag
Di Next.js App Router, noindex dipasang lewat metadata export. Contoh:
export const metadata = {
robots: { index: false, follow: true }
}
Untuk halaman dinamis (misal hasil filter), noindex bisa di-set kondisional. Untuk file non-HTML (PDF, gambar), wajib pakai header HTTP X-Robots-Tag: noindex karena meta tag tidak bekerja di luar HTML. Validasi setelah deploy via Google Search Console (URL Inspection) atau curl: curl -I https://domain.com/halaman | grep -i x-robots.
Kapan Pakai Noindex?
| Skenario | Pakai Noindex? |
|---|---|
| Halaman thank-you post-form | Ya |
| Hasil pencarian internal | Ya |
| Halaman /admin atau /dashboard | Ya |
| Halaman duplikat (filter, sort) | Pakai canonical URL dulu |
| Halaman draft sebelum publish | Ya, sementara |
| Halaman tag kategori tipis | Ya jika konten kurang dari 3 item |
Kenapa Penting?
Tanpa noindex, halaman tipis atau duplikat dapat mencemari indeks dan memboroskan crawl budget. Google membatasi resource crawling per domain. Jika 40% URL website adalah halaman filter atau thank-you yang tidak bernilai SEO, halaman penting bisa terlambat di-crawl. Berdasarkan praktik di proyek client e-commerce yang saya tangani, mengecualikan 200+ halaman filter dengan noindex memperbaiki kecepatan re-indexing halaman produk dari 9 hari ke 3 hari rata-rata.
Pertanyaan Umum
Apakah noindex sama dengan disallow di robots.txt?
Tidak. Disallow di robots.txt mencegah bot meng-crawl, tapi halaman masih bisa terindeks via backlink eksternal tanpa konten. Noindex mengizinkan crawl tapi mencegah indexing, jadi lebih definitif untuk menghapus dari SERP.
Kalau halaman sudah terindeks, apakah noindex langsung menghapus?
Tidak instan. Google harus crawl ulang halaman untuk membaca direktif noindex. Biasanya butuh 1-4 minggu. Bisa dipercepat lewat URL Inspection Tool di Search Console dengan "Request Indexing".
Istilah Terkait