Itqualityassurance
- Bagaimana anda memilih kesan minimum yang dapat dikesan?
- Apakah kesan minimum yang dapat dikesan berhubung dengan ujian hipotesis?
- Semasa menjalankan ujian A B bila masa yang tepat untuk menentukan metrik kejayaan utama?
- Bagaimana anda tahu jika percubaan A dalam talian berjaya?
Bagaimana anda memilih kesan minimum yang dapat dikesan?
Menetapkan MDE yang sesuai
Ia harus dimaklumkan oleh risiko, kos, dan jangkaan yang berkaitan dengan eksperimen yang mendasari. MDE minimum anda mestilah kesan terkecil yang akan membenarkan pelaksanaan perubahan yang sedang diuji. Sudah tentu, anda sentiasa dapat mengalahkan ujian untuk mengetahui lebih lanjut daripadanya.
Apakah kesan minimum yang dapat dikesan berhubung dengan ujian hipotesis?
Kesan minimum yang dapat dikesan adalah saiz kesan yang ditetapkan oleh penyelidik bahawa penilaian impak direka untuk menganggarkan tahap kepentingan tertentu. Kesan minimum yang dapat dikesan adalah input kritikal untuk pengiraan kuasa dan berkait rapat dengan kuasa, saiz sampel, dan anggaran tinjauan dan projek.
Semasa menjalankan ujian A B bila masa yang tepat untuk menentukan metrik kejayaan utama?
Sekiranya anda melancarkan ujian A/B untuk memantau pendapatan yang dihasilkan oleh dua sistem, anda mungkin perlu menjalankannya selama berbulan -bulan sebelum yakin tentang kesan positif atau negatif dari lelaran.
Bagaimana anda tahu jika percubaan A dalam talian berjaya?
Ambil tindakan berdasarkan hasil anda.
Sekiranya satu variasi secara statistik lebih baik daripada yang lain, anda mempunyai pemenang. Lengkapkan ujian anda dengan melumpuhkan variasi kehilangan dalam alat ujian A/B anda.
