Gesaan dan persekitaran
Klik diperhatikan selepas penetapan dan dipengaruhi oleh rawatan. Mengehadkan analisis kepada pengklik mungkin kelihatan seperti perbandingan subkumpulan yang berguna, tetapi ia boleh merosakkan perawakan yang mengenal pasti kesan rawatan keseluruhan.
Perkara yang diuji oleh penemu duga
- Membezakan pemoderat pra-rawatan daripada pengantara (mediator) pasca-rawatan.
- Menerangkan bias pelanggar (collider) dan pemilihan menggunakan graf kausal.
- Memilih estimand yang sepadan dengan keputusan produk.
Soalan penjelasan sebelum menjawab
- Adakah klik diukur sebelum penetapan, selepas penetapan, atau kedua-duanya?
- Adakah keputusan tersebut mengenai impak keseluruhan, kesan dalam kalangan pematuh (compliers), atau mekanisme melalui panel?
- Adakah terdapat pemboleh ubah pra-rawatan yang meramalkan tindakan mengklik dan membuat pembelian?
- Adakah penapis klik dirancang sebelum eksperimen dan disokong oleh strategi pengenalpastian yang sah?
Kerangka jawapan 30 saat
Saya tidak akan membandingkan pembeli hanya dalam kalangan pengklik yang diperhatikan sebagai hasil utama. Mengklik ialah pengantara pasca-rawatan dan mungkin juga dipengaruhi oleh sifat tidak terukur yang meramalkan pembelian. Pengkondisian padanya boleh membuka laluan bukan kausal dan merosakkan perawakan kumpulan rawatan dan kawalan. Saya akan melaporkan niat-untuk-merawat (intent-to-treat) bagi semua pengguna yang ditetapkan, kemudian menggunakan analisis pengantaraan atau stratifikasi utama yang telah dipratentukan hanya dengan andaian yang jelas.
Analisis mendalam langkah demi langkah
1. Lakarkan susunan masa
Penetapan mendahului klik, dan klik mendahului pembelian. Sifat garis dasar (baseline) boleh mempengaruhi kedua-dua klik dan pembelian. Rawatan juga mempengaruhi klik, jadi subset pengklik dipilih menggunakan pemboleh ubah di hiliran rawatan.
2. Nyatakan soalan kausal
Kesan keseluruhan bertanyakan perkara yang akan berlaku jika produk dilancarkan kepada populasi yang ditetapkan. Soalan mekanisme bertanyakan berapa banyak kesan yang disalurkan melalui panel. Soalan responden bertanyakan tentang pengguna yang tingkah laku kliknya adalah sama di bawah mana-mana kumpulan. Ini adalah estimand yang berbeza.
3. Tunjukkan sebab penapisan gagal
Dalam subset pengklik, pengguna kumpulan rawatan dan kawalan boleh berbeza dalam kecenderungan pembelian pendam kerana rawatan telah mengubah siapa yang memasuki subset tersebut. Perawakan asal melindungi keseluruhan populasi yang ditetapkan, bukannya bahagian pasca-rawatan yang sewenang-wenangnya.
4. Pilih analisis yang boleh dipertahankan
Gunakan niat-untuk-merawat sebagai anggaran pelancaran. Untuk pengantaraan, pratetapkan kovariat garis dasar, tentukan tetingkap pengantara dan hasil, serta nyatakan andaian tentang pengeliru (confounding) pengantara-hasil. Bagi soalan pematuhan, pertimbangkan stratifikasi utama atau kaedah pemboleh ubah instrumental apabila andaian mereka boleh dipercayai.
5. Salurkan maklumat tentang batasan
Tunjukkan anggaran keseluruhan, kadar klik mengikut kumpulan, dan analisis sekunder secara berasingan. Jangan menganggap perbandingan pengklik sebagai kausal semata-mata kerana saiz sampel adalah besar atau peristiwa klik boleh diperhatikan. Terangkan kesimpulan mana yang dikenal pasti dan mana yang bergantung pada andaian.
Contoh jawapan berkualiti tinggi
“Klik berlaku selepas penetapan dan diubah oleh rawatan, jadi penapisan kepada pengklik bertindak sebagai pengkondisian pada pengantara. Ini boleh memilih kecenderungan pembelian pendam yang berbeza dalam kumpulan rawatan dan kawalan serta memecahkan perlindungan perawakan. Saya akan menggunakan niat-untuk-merawat untuk keputusan pelancaran, menunjukkan kadar klik dan kesan pembelian keseluruhan, dan menganggap sebarang analisis mekanisme atau responden sebagai sekunder. Saya akan mempratetapkan graf kausal dan andaian sebelum menggunakan kaedah pengantaraan atau stratifikasi utama.”
Kesilapan biasa
- Bandingkan hanya pengklik → rawatan mengubah siapa yang disertakan → kekalkan niat-untuk-merawat sebagai yang utama.
- Panggil klik sebagai segmen garis dasar → ia diukur selepas penetapan → rekod susunan masa.
- Laras untuk setiap tingkah laku yang diperhatikan → pengkondisian pasca-rawatan boleh membuka laluan bias → gunakan kovariat pra-rawatan yang berasas.
- Anggap subkumpulan yang besar sebagai kausal → kejituan tidak memulihkan pengenalpastian → nyatakan estimand dan andaian.
Soalan susulan dan respons
Bolehkah saya masih melaporkan hasil pengklik?
Ya, sebagai hasil sekunder deskriptif atau yang bergantung secara eksplisit pada andaian. Labelkannya sebagai perkaitan dalam kalangan pengklik yang diperhatikan dan tunjukkan bagaimana penapis mengubah komposisi kumpulan.
Mengapa tidak mengawal klik dalam regresi sahaja?
Pelarasan regresi tidak menjadikan pemboleh ubah pasca-rawatan sebagai pra-rawatan. Ia boleh menyekat sebahagian daripada kesan rawatan dan mewujudkan bias pelanggar apabila punca yang tidak terukur mempengaruhi kedua-dua klik dan pembelian.
Bagaimana jika keputusan produk adalah khusus untuk pengklik?
Tentukan sasaran sebagai stratum utama, seperti pengguna yang akan mengklik di bawah mana-mana kumpulan, dan gunakan kaedah pengenalpastian yang andaiannya boleh anda pertahankan. Pengklik yang diperhatikan tidak secara automatik merupakan stratum tersebut.