Digital Transformation
Meta Robots Tag (Direktif Indeks per Halaman)
TL;DR: Meta robots tag adalah elemen HTML di dalam
<head>yang memberi tahu mesin pencari cara memperlakukan satu halaman, mulai dari boleh diindeks atau tidak, sampai boleh mengikuti link di dalamnya. Berbeda darirobots.txtyang memblokir crawler di level direktori, meta robots bekerja per halaman dan tetap dibaca oleh Googlebot meski halaman ter-crawl.
Apa itu Meta Robots Tag?
Meta robots adalah baris kode pendek di bagian <head> HTML yang berbentuk <meta name="robots" content="...">. Direktif yang umum dipakai antara lain index, noindex, follow, nofollow, noarchive, dan max-snippet. Tag ini memberi instruksi spesifik untuk satu URL, sehingga marketer atau developer bisa mengontrol nasib halaman tertentu di hasil pencarian tanpa mengubah file robots.txt di seluruh situs.
Analogi sederhana: jika robots.txt adalah pagar di pintu gerbang sebuah perumahan, meta robots adalah tanda di pintu rumah masing-masing. Pagar bisa membiarkan tamu masuk komplek, tapi tanda di pintu rumah tetap bisa berkata "jangan dipublikasikan".
Direktif Penting yang Sering Dipakai
| Direktif | Fungsi | Contoh Penggunaan |
|---|---|---|
index, follow | Default, halaman boleh diindeks dan link diikuti | Artikel publik |
| noindex, follow | Jangan tampil di hasil pencarian, tapi link di dalamnya tetap ditelusuri | Halaman thank-you, hasil pencarian internal |
noindex, nofollow | Tidak diindeks, link tidak diikuti | Halaman private member |
noarchive | Larang menyimpan versi cache di hasil pencarian | Halaman harga yang sering berubah |
max-snippet:-1 | Bebaskan panjang snippet | Konten editorial yang ingin tampil utuh |
Kenapa Penting?
Untuk website bisnis Indonesia, meta robots adalah alat yang menentukan apakah satu halaman muncul di Google atau tidak, sekaligus melindungi sinyal SEO situs. Misalnya, halaman thank-you setelah lead form sebaiknya noindex supaya tidak ramai dirayapi orang yang tidak konversi, sementara halaman koleksi artikel utama harus tetap index, follow. Tanpa kontrol ini, crawl budget Googlebot bisa habis di halaman yang tidak strategis.
Berbeda dengan [canonical tag](/glosarium/canonical-tag) yang menunjuk versi utama dari konten ganda, meta robots adalah perintah indeks atau tidak. Keduanya sering dipakai bersamaan, bukan saling menggantikan.
Pertanyaan Umum
Apa beda meta robots dengan robots.txt?
Meta robots bekerja per halaman dan tetap dibaca jika halaman bisa di-crawl, sementara robots.txt mengatur akses crawler di level direktori atau pola URL. Halaman yang diblokir di robots.txt tidak akan dibaca meta robots-nya, sehingga noindex justru tidak terbaca.
Apakah noindex langsung menghapus halaman dari Google?
Tidak instan. Setelah memasang noindex, Googlebot perlu meng-crawl ulang halaman tersebut, biasanya butuh hari sampai minggu tergantung otoritas situs. Periksa lewat Search Console.
Istilah Terkait