Soalan dan Masa Ia Digunakan
Produk SaaS aliran kerja pasukan menambah 10,000 ruang kerja percubaan setiap minggu. Kadar penyelesaian pendaftaran ialah 72%, tetapi hanya 24% ruang kerja diaktifkan dalam tempoh tujuh hari. Aliran semasa memerlukan pentadbir menyelesaikan sembilan langkah yang meliputi butiran syarikat, kebenaran, pemberitahuan, penyepaduan, dan templat sebelum menerbitkan aliran kerja pertama. Data juga menunjukkan pengekalan D30 sebanyak 38% bagi ruang kerja yang diaktifkan dalam tempoh tujuh hari dan 9% bagi yang tidak. Diagnosis masalah ini, reka bentuk semula onboarding, takrifkan metrik dan eksperimen, serta nyatakan masa untuk melancarkan, mengulang lelar, atau membuat pengunduran (roll back).
Ini ialah soalan penambahbaikan produk untuk pengurus produk, pengurus produk pertumbuhan (growth PM), dan peranan produk SaaS B2B. Panduan temu duga awam semasa masih meminta calon untuk menambah baik onboarding SaaS B2B, mereka bentuk semula pengalaman onboarding, dan mengukur aliran onboarding baharu. Panduan tersebut secara eksplisit menilai nilai pertama, pengaktifan, diagnosis corong, eksperimentasi, dan pengekalan.
10,000 ruang kerja, 72%, 24%, 38%, 9%, tujuh hari, D30, dan sembilan langkah tersebut adalah andaian temu duga, bukannya fakta atau penanda aras industri. Keputusan 38% berbanding 9% mewujudkan suatu perkaitan (association). Pasukan dengan niat lebih tinggi mungkin lebih cenderung untuk mengaktifkan dan juga lebih cenderung untuk kekal, jadi ia tidak membuktikan bahawa onboarding menyebabkan pengekalan.
Perkara yang Dinilai oleh Penemu Duga
Pertama, bolehkah calon membezakan antara menyelesaikan onboarding dengan menerima nilai? Menonton tutorial, memasukkan data profil, atau melengkapkan sembilan langkah ialah tindakan produk. Perkara tersebut tidak membuktikan bahawa sesebuah pasukan telah menyelesaikan masalah sebenar. Jawapan yang mantap mentakrifkan janji produk dan mencari peristiwa penting tingkah laku yang menunjukkan bahawa sesebuah ruang kerja telah memenuhinya buat kali pertama.
Kedua, adakah calon mendiagnosis sebelum menetapkan ciri baharu? Mengurangkan sembilan langkah kepada empat, menambah bar kemajuan, atau menambah petua semuanya kedengaran munasabah. Walau bagaimanapun, penurunan yang sama mungkin berpunca daripada kebenaran yang hilang, istilah yang tidak jelas, data yang tidak tersedia, ketiadaan rakan sepasukan, atau tiada keperluan sebenar. Setiap punca memerlukan tindak balas yang berbeza.
Ketiga, bolehkah calon mengendalikan sifat perisian B2B yang melibatkan pelbagai peranan dan pelbagai sesi? Pembeli, pentadbir, dan pengguna harian mempunyai tugas yang berbeza. Sesebuah ruang kerja mungkin memerlukan beberapa orang, peranti, dan hari untuk menyelesaikan persediaan. Pengukuran atau penetapan pada peringkat sesi boleh memecahkan rantaian nilai sebenar dan memberikan varian yang tidak konsisten kepada satu pasukan.
Keempat, bolehkah calon menukar keputusan kepada keputusan pelancaran? Pengaktifan boleh meningkat kerana peristiwa penting tersebut menjadi lebih cetek atau produk memaksa jemputan dihantar. Jawapan yang mantap menggabungkan pengaktifan tujuh hari, masa untuk mencapai nilai pertama, pengekalan D30, kualiti konfigurasi, dan beban sokongan dalam satu matriks keputusan.
Soalan untuk Dijelaskan Terlebih Dahulu
- Apakah nilai teras produk? Kes ini mengandaikan produk membantu pasukan memindahkan item sebenar daripada permulaan hingga selesai di bawah peraturan yang dikongsi. Jika nilainya adalah analisis individu atau pematuhan pentadbir, pengaktifan tidak sepatutnya memerlukan ahli kedua.
- Apakah maksud pengaktifan 24% semasa? Sahkan peristiwa, unit, tempoh masa, penyahduplikasian, dan pengecualian. Jika ia hanya bermaksud "menyelesaikan sembilan langkah," bina semula definisi tersebut sebelum mendiagnosisnya.
- Peranan manakah yang wujud dalam ruang kerja sasaran? Ketua pasukan, pentadbir sistem, dan ahli yang dijemput mungkin gagal pada titik yang berbeza. Jawapan ini memfokuskan pada percubaan layan diri dengan sekurang-kurangnya tiga pengguna berpotensi; perusahaan sentuhan tinggi (high-touch enterprise) menggunakan laluan berbantu.
- Antara sembilan langkah tersebut, yang manakah tidak boleh dilangkau? Pintu keselamatan, kebenaran, atau kawal selia mungkin diperlukan sebelum data sebenar menjadi aktif. Avatar, keutamaan pemberitahuan penuh, atau penyepaduan lanjutan selalunya boleh ditangguhkan. Mengalih keluar prasyarat akan mewujudkan kegagalan di peringkat hiliran.
- Di manakah dan untuk siapakah pengabaian berlaku? Segmenkan mengikut peranan, saiz pasukan, kes penggunaan, saluran pemerolehan, peranti, dan kesediaan data. Ukur masa antara langkah, bukan hanya penukaran agregat.
- Apakah yang boleh menjadi unit eksperimen? Gunakan ruang kerja kerana ahli berkongsi konfigurasi dan hasil. Penetapan pada peringkat pengguna atau sesi akan mewujudkan pertindihan (crossover).
- Apakah yang akan menyekat pelancaran? Pra-tetapkan ambang untuk ralat konfigurasi, insiden kebenaran, beban sokongan, pengekalan D30, dan penukaran berbayar.
Kerangka Jawapan 30 Saat
"Saya akan mentakrifkan pengaktifan sebagai ruang kerja yang menggunakan data sebenar untuk menerbitkan aliran kerja pertamanya dan melengkapkan satu larian bersama ahli kedua dalam tempoh tujuh hari—bukan menyelesaikan sembilan langkah persediaan. Saya akan mensegmenkan corong ruang kerja mengikut peranan, kes penggunaan, dan saiz pasukan, kemudian menggunakan bukti kualitatif untuk mengklasifikasikan punca penurunan utama sebelum mengubah aliran. Saya akan merawakkan laluan yang lebih pendek dan berasaskan peranan mengikut ruang kerja, menggunakan pengaktifan tujuh hari sebagai metrik utama, serta mewajibkan pengekalan D30, kualiti konfigurasi, dan batas perlindungan sokongan dipenuhi sebelum pelancaran berperingkat."
Pembukaan ini mentakrifkan nilai dan diagnosis sebelum penyelesaian dan peraturan pelepasan. Langkah-langkah berikut memberikan butiran untuk soalan susulan.
Huraian Terperinci Langkah Demi Langkah
Langkah 1: Anggap pengaktifan sebagai hipotesis nilai
Mulakan dengan janji produk: "Pasukan boleh memindahkan item sebenar hingga selesai di bawah peraturan yang dikongsi." Oleh itu, peristiwa pengaktifan calon ialah ruang kerja yang layak menerbitkan aliran kerja pertamanya dengan data sebenar dan meminta ahli kedua melengkapkan satu larian menyeluruh (end-to-end) dalam tempoh tujuh hari selepas pendaftaran.
Definisi ini mengandungi objek sebenar, aliran kerja yang boleh dilaksanakan, hasil kolaboratif, dan tempoh masa. Ia lebih dekat dengan nilai berbanding "menyelesaikan lawatan panduan", tetapi ia kekal sebagai hipotesis. Bandingkan pengekalan tugas teras D30 merentas kohort pendaftaran yang mencapai peristiwa penting calon yang berbeza sambil mengambil kira perbezaan yang diketahui seperti saiz pasukan, saluran, dan niat terdahulu. Gunakan analisis tersebut untuk memilih calon, bukan untuk mendakwa sebab-akibat (causality). Jika pengguna solo menerima nilai penuh, alih keluar syarat ahli kedua untuk segmen yang telah diisytiharkan terlebih dahulu itu.
Langkah 2: Bina corong ruang kerja yang boleh dihasilkan semula
Modelkan laluan sebagai: cipta ruang kerja → pilih kes penggunaan → import atau masukkan data sebenar → terbitkan aliran kerja → ahli kedua melengkapkan tugas → jalankan semula dalam tempoh tujuh hari. Catatkan ID ruang kerja, peranan, cap masa, hasil, dan sebab kegagalan pada setiap langkah. Ruang kerja yang gagal kekal dalam penyebut (denominator).
Audit juga kontrak peristiwa: cara peristiwa pendua dialih keluar; kohort pendaftaran manakah yang menerima jemputan yang diterima beberapa hari kemudian; cara seseorang dalam pelbagai ruang kerja diatribusikan; sama ada peristiwa mudah alih dan pelayan adalah sepadan; dan bila peristiwa tertangguh mencapai kematangan. Bandingkan penukaran dan masa berlalu mengikut peranan, kes penggunaan, saiz pasukan, saluran, dan ketersediaan data yang boleh diimport. Penurunan peratusan terbesar tidak semestinya peluang terbesar; pertimbangkan ruang kerja yang terjejas, nilai hiliran, dan kebolehselesaian.
Langkah 3: Klasifikasikan geseran dan bukannya sekadar mencari lokasinya
| Jenis geseran | Bukti | Tindak balas yang sesuai |
|---|---|---|
| Pintu risiko yang diperlukan | Keselamatan, kebenaran, atau peraturan mesti dipenuhi sebelum data sebenar dijalankan | Terangkan, alih keluar kemasukan data pendua, dan sediakan pratonton yang selamat; jangan padamkannya begitu sahaja |
| Jurang keupayaan atau kebergantungan | Penilai kekurangan import yang disokong, hak pentadbir, atau penyepaduan yang diperlukan | Kesan lebih awal, sediakan alternatif, atau halakan ke onboarding berbantu |
| Geseran pemahaman | Pengguna berulang kali berhenti pada istilah, pilihan templat, atau langkah seterusnya yang tidak jelas | Gunakan bahasa berorientasikan tugas, contoh kontekstual, dan pengesahan segera |
| Nilai atau motivasi lemah | Pengguna boleh menyelesaikan langkah tetapi tidak mahu membawa masuk tugas sebenar | Tunjukkan hasil sasaran lebih awal dan nilai semula segmen atau janji |
| Formaliti yang boleh dielakkan | Data profil, keutamaan, atau persediaan lanjutan tidak mempengaruhi nilai pertama | Tangguhkan, pra-isi, atau jadikannya boleh dilangkau |
Corong peristiwa mengenal pasti lokasi. Pemerhatian sesi dan tema sokongan menunjukkan apa yang berlaku. Temu duga dan ujian tugas membantu menjelaskan sebabnya. Penurunan pada halaman import, contohnya, boleh bermaksud format yang tidak disokong atau penilai tanpa hak pentadbir. Menambah teks arahan hanya menyelesaikan salah satu daripada punca tersebut.
Langkah 4: Susun semula aliran mengikut nilai pertama
Bahagikan sembilan langkah tersebut kepada "diperlukan sebelum larian sebenar pertama" dan "selamat dilakukan selepas menerima nilai." Kekalkan kebenaran data, medan wajib, dan semakan keselamatan pelaksanaan. Tangguhkan avatar syarikat, keutamaan pemberitahuan penuh, penyepaduan lanjutan, dan tetapan untuk peranan lain. Biarkan pengguna memilih templat kes penggunaan, melihat pratonton hasil dengan data sampel yang ditanda dengan jelas, dan kemudian beralih kepada data sebenar secara sengaja.
Berikan laluan berbeza kepada peranan berbeza: ketua pasukan mencipta aliran kerja yang boleh dijalankan; pentadbir sistem mengendalikan kebenaran dan penyepaduan; ahli yang dijemput terus mendarat pada tugas sebenar. Tawarkan kotak pasir (sandbox) kepada penilai tanpa data sebenar dan onboarding berbantu kepada perusahaan yang kompleks. Penunjuk kemajuan harus menunjukkan baki perkara sebelum nilai pertama, bukan mempersembahkan setiap tetapan sebagai sama penting.
Langkah 5: Reka bentuk eksperimen pada peringkat ruang kerja
Tetapkan ruang kerja layan diri baharu yang layak secara rawak. Kumpulan kawalan menggunakan aliran sembilan langkah semasa. Kumpulan rawatan menggunakan penghalaan kes penggunaan, persediaan tidak penting yang ditangguhkan, dan pratonton nilai yang lebih awal. Penetapan, analisis, dan metrik utama semuanya menggunakan ruang kerja. Ahli yang kembali dalam sesi lain kekal dalam varian yang sama.
Sebelum bermula, kunci populasi yang layak, titik pendedahan, metrik utama, tempoh masa, peningkatan praktikal penting minimum, had batas perlindungan, sampel dan tempoh, peraturan trafik anomali, dan syarat henti. Selepas pelancaran, semak keseimbangan kumpulan, peristiwa yang hilang, pertindihan varian, dan kematangan kohort sebelum membaca hasil perniagaan. Jangan berhenti awal hanya kerana beberapa hari pertama kelihatan menggalakkan.
Metrik mempunyai tanggungjawab yang berbeza:
- Utama: peratusan ruang kerja yang melengkapkan peristiwa pengaktifan calon dalam tempoh tujuh hari selepas pendaftaran.
- Diagnostik: penukaran langkah, masa median dan p75 antara langkah, kadar langkau, penerimaan jemputan, dan sebab ralat.
- Hasil hiliran: pengekalan tugas teras D30 merentas semua ruang kerja yang dirawakkan, bukan hanya ruang kerja yang diaktifkan.
- Batas perlindungan: ralat konfigurasi, isu kebenaran atau data, permintaan sokongan berkaitan bagi setiap 100 ruang kerja, penarikan diri atau pemadaman, penukaran percubaan kepada berbayar, dan jam pelaksanaan berbantu.
Langkah 6: Buat keputusan pelepasan merentas dua ufuk
Tempoh pertama menjawab sama ada pengguna mencapai nilai pertama dengan lebih cepat. Tempoh kedua meneliti sama ada nilai tersebut adalah nyata dan tahan lama.
| Corak keputusan | Keputusan |
|---|---|
| Pengaktifan tujuh hari meningkat, D30 stabil atau lebih baik, dan batas perlindungan melepasi | Tingkatkan secara berperingkat dan terus pantau segmen |
| Pengaktifan tujuh hari meningkat manakala D30 menurun secara ketara | Jangan lancarkan secara meluas; uji sama ada peristiwa penting menjadi cetek atau memaksa |
| Penyelesaian onboarding meningkat manakala pengaktifan sebenar mendatar | Aliran terasa lebih mudah tetapi tidak meningkatkan nilai; diagnosis sekatan hiliran |
| Masa untuk mencapai nilai pertama berkurangan manakala ralat atau sokongan melebihi had | Kekalkan laluan yang berguna, pulihkan semakan yang diperlukan, dan uji semula |
| Impak keseluruhan mendatar manakala satu segmen sasaran bertambah baik | Hadkan pelancaran jika segmen tersebut telah diisytiharkan terlebih dahulu, strategik, dan boleh dipercayai |
Perusahaan sentuhan tinggi, pelanggan yang dikawal selia dengan ketat, atau pasukan dengan kitaran penyepaduan yang panjang mungkin tidak sesuai untuk eksperimen layan diri. Berikan mereka peristiwa penting peringkat akaun dan onboarding berbantu sambil mengekalkan ujian nilai, kualiti, dan hasil hiliran yang sama.
Contoh Jawapan yang Mantap
"Mula-mula saya akan mengesahkan maksud 24% tersebut. Saya tidak akan menggunakan penyelesaian sembilan langkah sebagai pengaktifan. Janji produk adalah menyelesaikan tugasan sebenar di bawah peraturan yang dikongsi, jadi peristiwa pengaktifan calon saya ialah ruang kerja yang menerbitkan aliran kerja pertamanya dengan data sebenar dan meminta ahli kedua melengkapkan satu larian menyeluruh dalam tempoh tujuh hari. Jurang D30 sebanyak 38% berbanding 9% menjadikan perkara ini wajar disiasat, tetapi ia hanyalah suatu perkaitan.
Saya akan membina semula corong ruang kerja daripada pemilihan kes penggunaan dan import data sebenar sehinggalah penerbitan aliran kerja dan penyelesaian oleh ahli kedua. Saya akan mensegmenkannya mengikut peranan, saiz pasukan, kes penggunaan, saluran, dan kesediaan data. Bagi penurunan utama, saya akan menggabungkan pemerhatian sesi, tema sokongan, dan temu duga untuk mengklasifikasikan pintu risiko yang diperlukan, jurang kebergantungan, geseran pemahaman, nilai yang lemah, dan formaliti yang boleh dielakkan. Klasifikasi itu memberitahu saya sama ada perlu memudahkan, menerangkan, menyediakan alternatif, atau menilai semula segmen sasaran.
Katakan bukti menunjukkan banyak pasukan sasaran keluar semasa memasukkan butiran syarikat yang lengkap dan penyepaduan lanjutan, yang mana kedua-duanya tidak menjejaskan aliran kerja pertama. Saya akan menguji laluan yang lebih pendek: pilih templat kes penggunaan, lihat pratonton hasil dengan data sampel, kemudian masukkan data sebenar minimum dan terbitkan. Tangguhkan data profil yang tidak penting dan penyepaduan lanjutan. Pentadbir, ketua, dan ahli yang dijemput masing-masing menerima tugas seterusnya yang berkaitan dengan mereka. Semakan keselamatan dan kebenaran masih berjalan sebelum data sebenar menjadi aktif.
Saya akan merawakkan mengikut ruang kerja. Andaikan 5,000 ruang kerja yang layak dalam setiap kumpulan. Kumpulan kawalan mengaktifkan 1,200 dalam tempoh tujuh hari, atau 24.0%; kumpulan rawatan mengaktifkan 1,500, atau 30.0%. Itu adalah peningkatan mutlak sebanyak 6.0 mata peratusan dan peningkatan relatif sebanyak 25.0%. Masa median untuk mencapai nilai pertama berkurangan daripada 26 kepada 11 jam, dan p75 berkurangan daripada 4.2 kepada 2.1 hari. Anggaran titik tersebut masih memerlukan selang dan pelan sampel yang dipersetujui terlebih dahulu.
Saya akan menunggu D30 dan menganalisis setiap ruang kerja yang dirawakkan. Jika pengekalan tugas teras D30 beralih daripada 19.0% kepada 19.6%, ralat konfigurasi daripada 3.1% kepada 3.4%, dan permintaan sokongan berkaitan bagi setiap 100 ruang kerja daripada 6.2 kepada 7.0, yang mana semuanya dalam batas perlindungan yang telah dipersetujui terlebih dahulu, saya akan meningkatkannya kepada 25% daripada ruang kerja baharu sebelum menaikkannya lagi. Jika pengaktifan tujuh hari meningkat tetapi D30 menurun atau ralat melebihi had, saya akan berhenti seketika, menguji sama ada melangkau persediaan penting telah mewujudkan pengaktifan cetek, dan menyemak semula sebelum menjalankan semula eksperimen."
Saiz kumpulan, hasil, masa, dan peratusan pelancaran ialah pengiraan temu duga. Kerja sebenar memerlukan ambang kesan berasaskan garis dasar, kaedah statistik, kemusiman, dan keputusan sampel serta tempoh berasaskan risiko.
Kesilapan Biasa
- Memanggil penyelesaian sembilan langkah sebagai pengaktifan → Pengguna boleh menyelesaikan formaliti tanpa menyelesaikan tugasan → Takrifkan pengaktifan melalui nilai sebenar pertama.
- Memadamkan langkah sebaik sahaja penurunannya kelihatan → Prasyarat kebenaran, data, atau kawal selia mungkin penting → Klasifikasikan puncanya sebelum menangguhkan, menerangkan, atau mengekalkannya.
- Hanya membaca corong agregat → Masalah pentadbir, ketua, dan ahli yang dijemput boleh membatalkan satu sama lain → Segmenkan mengikut peranan, kes penggunaan, saiz, dan kesediaan data.
- Memberikan panduan yang sama kepada semua orang → Setiap peranan dalam produk B2B pelbagai peranan mempunyai tugas seterusnya yang berbeza → Halakan setiap peranan ke tugas utamanya.
- Merawakkan mengikut sesi → Satu ruang kerja boleh menerima varian berbeza merentas hari dan ahli → Tetapkan secara berterusan mengikut ruang kerja.
- Membandingkan pengekalan hanya dalam kalangan ruang kerja yang diaktifkan → Rawatan dan kawalan mungkin mewujudkan populasi teraktif yang berbeza → Ukur hasil hiliran merentas semua ruang kerja yang dirawakkan.
- Melancarkan serta-merta apabila pengaktifan meningkat → Peristiwa penting yang cetek, jemputan paksa, atau semakan yang dilangkau boleh meningkatkan angka awal secara palsu → Tunggu D30 dan batas perlindungan kualiti.
- Mencampurkan perusahaan sentuhan tinggi ke dalam ujian layan diri → Perolehan, kebenaran, dan kitaran penyepaduan memesongkan hasil → Gunakan laluan berbantu dan peristiwa penting berasingan untuk akaun yang kompleks.
Soalan Susulan
Soalan Susulan 1: Bagaimanakah anda tahu peristiwa pengaktifan anda adalah yang betul?
Senaraikan beberapa peristiwa nilai calon dan bandingkan hubungannya dengan pengekalan tugas teras hiliran, liputan, dan kebolehbertindakannya. Gunakan penyelidikan pengguna untuk menyemak sama ada saat tersebut benar-benar menyelesaikan tugasan. Perkaitan hanya membantu memilih calon. Kemudian rawakkan perubahan pada laluan dan perhatikan hasil hiliran merentas semua ruang kerja yang ditetapkan untuk menguji sama ada peningkatan peristiwa tersebut mewujudkan nilai tambahan (incremental value).
Soalan Susulan 2: Menjemput ahli kedua ialah titik penurunan terbesar. Patutkah anda mengalih keluarnya?
Mula-mula tentukan sama ada kerjasama adalah sebahagian daripada nilai teras kes penggunaan tersebut. Jika tugas tersebut adalah penyerahan tugasan pasukan (team handoff), mengalih keluar jemputan menjadikan pengaktifan lebih cetek. Anda boleh melewatkan jemputan, menerangkan nilainya, atau membiarkan ketua membina aliran kerja yang boleh dikongsi terlebih dahulu. Jika penilai solo boleh menerima nilai penuh, pra-takrifkan peristiwa penting yang berasingan tanpa jemputan daripada memaksa tindakan sosial.
Soalan Susulan 3: Pengaktifan meningkat, tetapi pengekalan D30 menurun. Apakah yang anda lakukan?
Hentikan peningkatan pelancaran. Semak sama ada rawatan tersebut melangkau langkah yang melindungi kualiti konfigurasi, sama ada gesaan yang memaksa telah mewujudkan penyelesaian sekali sahaja, dan sama ada takrifan peristiwa serta kematangan kohort sepadan. Segmenkan mengikut peranan, kes penggunaan, dan sebab ralat, kemudian pulihkan semakan yang diperlukan, perketatkan kelayakan, atau takrifkan semula pengaktifan. Penukaran awal tidak mengatasi nilai tahan lama yang lebih lemah.
Soalan Susulan 4: Bolehkah data sampel mewujudkan pengaktifan palsu?
Ya. Data sampel adalah untuk pratonton dan pembelajaran serta tidak dikira sebagai pengaktifan sebenar. Peristiwa mesti melabelkan sumber data. Hanya peralihan kepada data sebenar dan penyelesaian tugas menyeluruh akan dimasukkan ke dalam metrik utama. Jika pengguna hanya boleh menilai dalam kotak pasir, ukur "pemahaman nilai" secara berasingan daripada pengaktifan pengeluaran.
Soalan Susulan 5: Bagaimana jika kesemua sembilan langkah adalah keperluan kawal selia?
Jangan alih keluar pintu wajib. Kurangkan kemasukan data pendua, semak kebenaran lebih awal, proses semakan secara selari, terangkan sebab setiap item diperlukan, dan biarkan pengguna melihat pratonton hasil dengan selamat tanpa data sebenar. Jika pematuhan mengambil masa beberapa hari, asingkan "memahami nilai produk" daripada "pengaktifan pengeluaran" dan uruskan masa menunggu serta kualiti akhir secara berasingan.
Soalan Susulan 6: Keputusan keseluruhan mendatar, tetapi pasukan kecil bertambah baik. Bolehkah anda melancarkannya?
Sahkan bahawa segmen tersebut telah ditakrifkan sebelum analisis, mempunyai data yang boleh dipercayai, dan bersesuaian dengan strategi; jika tidak, ia mungkin pemilihan pasca-hoc (post-hoc selection). Jika pengaktifan dan D30 kedua-duanya bertambah baik untuk pasukan kecil dan batas perlindungan melepasi manakala pasukan lain tidak melihat sebarang faedah, lancarkan kepada segmen tersebut sahaja. Kekalkan laluan lama di bahagian lain dan teruskan diagnosis.
Soalan Susulan 7: Bagaimana jika trafik tidak mencukupi untuk ujian A/B?
Gunakan ujian tugas, kohort berperingkat, dan pelepasan terhad yang boleh diundurkan. Lengkapkan bukti dengan masa antara langkah, sebab kegagalan, dan susulan kualitatif daripada akaun yang sama. Kohort yang dipadankan atau pelancaran berasaskan masa boleh membantu, tetapi nyatakan baki kemusiman, pemilihan sendiri, dan bias campur tangan kejayaan pelanggan. Trafik yang rendah melemahkan kepastian; ia tidak mengubah perubahan pemerhatian menjadi hasil bersebab (causal result).