Glosarium Eksperimen dan CRO

Suatu metode yang melibatkan perbandingan dua versi halaman atau elemen untuk menentukan mana yang berkinerja terbaik.

Pendekatan statistik yang memperbarui probabilitas suatu varian menjadi pemenang seiring dengan masuknya data, alih-alih menunggu ambang batas tetap.

Fitur yang secara otomatis menyesuaikan distribusi lalu lintas ke arah varian dengan kinerja terbaik yang sedang diuji.

Algoritma yang secara bertahap mengalokasikan lebih banyak lalu lintas ke varian berkinerja terbaik yang sedang diuji, alih-alih pembagian yang sama antara semua varian.

Kesalahan yang terjadi ketika sampel pengunjung yang terpapar suatu tes tidak mewakili seluruh audiens, sehingga membiaskan hasilnya.

Representasi visual yang menunjukkan di mana pengunjung mengklik, mengarahkan kursor, atau menggulir halaman, berguna untuk mengidentifikasi area yang perlu dioptimalkan.

Suatu metode yang membandingkan versi halaman saat ini (sang juara) dengan satu atau lebih versi baru (para penantang) untuk melihat mana yang berkinerja terbaik.

Segmentasi pengunjung berdasarkan tindakan atau perjalanan mereka di situs.

Semua praktik yang bertujuan untuk meningkatkan rasio konversi situs web atau aplikasi.

Sebuah antarmuka yang memungkinkan Anda untuk memodifikasi tampilan halaman (teks, warna, elemen) tanpa menulis kode, untuk membuat varian uji coba.

Tampilan singkat konten asli sebelum digantikan oleh varian yang diuji, yang dapat berdampak negatif pada pengalaman pengguna.

Langkah-langkah berikut yang dilalui pengunjung sebelum melakukan konversi (misalnya, halaman produk, kemudian keranjang belanja, kemudian pembayaran), berguna untuk mengidentifikasi di mana pengguna meninggalkan pembelian mereka.

Menyimpulkan secara keliru bahwa suatu varian lebih unggul padahal perbedaan yang diamati disebabkan oleh kebetulan.

Gagal mendeteksi perbedaan nyata antar varian, seringkali karena ukuran sampel yang tidak mencukupi.

Mekanisme teknis yang memungkinkan fitur diaktifkan atau dinonaktifkan untuk pengguna tertentu tanpa perlu melakukan penyebaran ulang kode, sering digunakan untuk meluncurkan pengujian secara bertahap.

Pernyataan yang dapat diuji, dirumuskan sebelum eksperimen, yang menggambarkan perubahan yang diharapkan dan pengaruh yang diasumsikan terhadap perilaku pengunjung.

Metrik yang dipilih untuk mengukur keberhasilan suatu pengujian atau eksperimen, seperti rasio konversi atau nilai pesanan rata-rata.

Rentang nilai di mana hasil sebenarnya dari suatu pengujian diperkirakan berada, dengan tingkat kepastian tertentu.

Pengujian simultan beberapa kombinasi variabel pada halaman yang sama, untuk mengidentifikasi kombinasi yang paling efisien.

Tindakan spesifik yang diharapkan dari pengunjung (pembelian, pendaftaran, klik...), digunakan untuk mengukur kinerja suatu varian.

Halaman yang dikunjungi pengunjung setelah mengklik tautan, seringkali menjadi fokus pengujian optimasi.

Menyesuaikan konten yang ditampilkan kepada pengunjung berdasarkan profil atau perilaku mereka.

Probabilitas bahwa suatu tes akan mendeteksi perbedaan nyata antara varian jika perbedaan itu ada; hal ini terutama bergantung pada ukuran sampel.

Distribusi pengunjung secara acak di antara berbagai varian tes, sangat penting untuk menjamin hasil yang dapat diandalkan.

Membagi pengunjung ke dalam kelompok berdasarkan kriteria umum (perilaku, sumber, perangkat...) untuk analisis atau pengujian yang ditargetkan.

Periode aktivitas berkelanjutan seorang pengunjung di suatu lokasi, sering digunakan sebagai satuan pengukuran dalam analisis pengujian.

Suatu indikator untuk menentukan apakah perbedaan yang diamati antara dua varian dapat diandalkan dan bukan karena kebetulan.

Suatu jenis pengujian yang membandingkan dua URL yang berbeda, bukan dua versi dari halaman yang sama.

Jumlah pengunjung atau sesi yang dibutuhkan agar suatu pengujian mencapai signifikansi statistik yang dapat diandalkan.

Persentase pengunjung yang mengklik suatu elemen (tombol, tautan, spanduk) dibandingkan dengan jumlah total orang yang melihatnya.

Proporsi pengunjung yang menyelesaikan tindakan tujuan yang telah ditentukan, dibandingkan dengan jumlah total pengunjung.

Persentase pengunjung yang meninggalkan situs setelah hanya melihat satu halaman, tanpa interaksi lebih lanjut.

Sebuah pengujian yang membandingkan dua versi halaman yang identik, digunakan untuk memverifikasi bahwa alat pengujian dan metode pengukuran berfungsi dengan benar.

Analisis mendalam terhadap hasil setelah berakhirnya suatu pengujian, misalnya berdasarkan segmen audiens, untuk menarik pelajaran lebih lanjut.

Probabilitas mengamati hasil yang setidaknya sama ekstremnya dengan hasil yang diukur jika tidak ada perbedaan nyata antara varian; nilai rendah memperkuat keyakinan terhadap hasil tersebut.

Versi alternatif dari sebuah halaman atau elemen, yang diuji terhadap versi aslinya (varian kontrol) untuk mengukur dampaknya.