Studi Kasus Felicia Tan: Pasang Incrementality Test Geo-Holdout di Brand Fashion, Identifikasi 28 Persen Iklan Tidak Inkremental dan Hemat Rp 14 Juta per Bulan dalam 38 Hari di 2026

TL;DR: Felicia Tan, pendiri brand fashion lokal Indonesia, memasang incrementality test berbasis geo-holdout selama 28 hari untuk mengukur dampak inkremental iklan Meta. Hasilnya: 28 persen budget tidak memberi konversi inkremental (kanibalisasi organik). Realokasi budget memberi penghematan Rp 14 juta per bulan tanpa penurunan revenue total dalam 38 hari di 2026.

Banyak brand fashion Indonesia kecanduan dashboard Meta Ads yang melaporkan ROAS tinggi. Tapi ROAS yang dilaporkan platform tidak sama dengan dampak inkremental. Sebagian konversi yang diklaim iklan sebenarnya akan terjadi tanpa iklan, karena pembeli memang sudah mencari brand secara organik.

Felicia Tan, klien personal-branding sekaligus brand fashion Vito Atmo, mengalami persis ini. Saat dashboard Meta Ads melaporkan ROAS 4,2x, dia merasa angka itu tidak konsisten dengan revenue aktual. Lalu kami memasang incrementality test berbasis geo-holdout untuk mendapat angka kebenaran.

Masalah Awal: Gap antara ROAS Platform dan Revenue Riil

Felicia Tan mengoperasikan brand fashion lokal dengan revenue rata-rata Rp 180 juta per bulan. Spend Meta Ads dia Rp 50 juta per bulan, dengan ROAS yang dilaporkan platform 4,2 sampai 4,8x. Secara teori, iklan menghasilkan Rp 210 sampai Rp 240 juta revenue, tapi total revenue aktual Felicia hanya Rp 180 juta. Selisih ini menunjukkan kanibalisasi organik atau over-attribution platform.

Sumber masalah: model attribution last-click Meta menghitung semua konversi yang lewat iklan sebagai "disebabkan iklan", tanpa mempertimbangkan apa yang akan terjadi tanpa iklan tersebut. Inilah yang Marketing Mix Modeling dan incrementality test coba perbaiki.

Kerangka Geo-Holdout 4 Minggu

Ukuran sample minimum: setiap grup geo harus punya minimal 200 konversi dalam window 28 hari supaya hasil statistically significant. Untuk brand kecil di bawah threshold ini, MMM jadi alternatif lebih praktis.

Hasil Felicia Tan dalam 38 Hari

Setelah 28 hari holdout dan 10 hari validasi:

Penemuan kunci: 28 persen budget Meta Ads dialokasikan ke kampanye retargeting brand kuat yang akan tetap convert tanpa iklan. Setelah dimatikan, 90 persen konversi tersebut tetap terjadi via direct dan organic search.

Tiga Tools yang Dipakai

Felicia tidak butuh tools mahal. Stack yang dipakai: Meta Ads Manager untuk geo splitting (built-in), Google Analytics 4 dengan custom dimension region untuk tracking, dan Google Sheets untuk diff-in-diff calculation. Total biaya tambahan Rp 0. Untuk eksperimen lebih kompleks, Meta Lift Studies tersedia untuk advertiser dengan spend di atas USD 30 ribu per bulan.

Kesalahan yang Hampir Terjadi

Awalnya kami merencanakan holdout hanya 14 hari. Setelah konsultasi dengan data analyst, window diperpanjang ke 28 hari karena cycle pembelian fashion berbasis season-event biasanya 21 sampai 28 hari. Holdout terlalu pendek akan menangkap noise harian, bukan sinyal inkremental.

Kesalahan kedua yang berhasil dihindari: tidak mematikan kampanye prospecting top-of-funnel. Geo-holdout hanya untuk retargeting dan bottom-of-funnel; prospecting tetap aktif di kedua grup untuk menjaga pipeline jangka panjang.

Pertanyaan Umum

Apa beda incrementality test dan A/B test biasa?

A/B test membandingkan dua versi kreatif atau halaman. Incrementality test membandingkan dengan ada-iklan vs tanpa-iklan sama sekali.

Apakah geo-holdout cocok untuk semua brand?

Tidak. Brand dengan distribusi geografis sangat terkonsentrasi (misalnya 90 persen di Jakarta) sulit menjalankan geo-holdout. Alternatif: audience holdout berbasis user list.

Berapa risiko revenue saat menjalankan holdout?

Dalam kasus Felicia, revenue grup holdout turun 6 persen selama window holdout. Setelah re-aktivasi, kembali normal. Risiko bersih: kehilangan 1 sampai 2 persen revenue bulanan, jauh lebih kecil dari potensi penghematan.

Berapa sering harus jalankan incrementality test?

Setiap 6 bulan untuk brand growing, atau setelah perubahan kreatif/audience besar. Tidak perlu kontinyu.

Apakah hasil ini bisa direplikasi UMKM lain?

Kerangkanya bisa. Angka 28 persen tidak inkremental adalah temuan Felicia spesifik dan akan bervariasi tergantung brand strength, kategori produk, dan saluran iklan.

Penutup

Dashboard platform iklan dirancang untuk menjual lebih banyak iklan, bukan untuk memberi gambaran inkrementalitas yang jujur. Brand yang serius soal efisiensi marketing wajib menjalankan incrementality test secara berkala. Felicia Tan adalah contoh bahwa pendekatan disiplin selama 38 hari bisa membebaskan budget signifikan untuk realokasi ke channel yang benar-benar inkremental.