Thử nghiệm A/B (A/B testing) là gì?

Ron Kohavi và các chuyên gia từ Microsoft, Google, Amazon đã tổng kết phương pháp luận A/B testing quy chuẩn trong cuốn sách ‘Trustworthy Online Controlled Experiments’ (Kohavi et al., 2020). Xem bài Website Dy Khoa phiên bản mới.

Nguyên tắc chỉ thay đổi một biến số duy nhất

Để biết chắc chắn vì sao tỷ lệ nhấp tăng, chỉ thay đổi màu nút bấm hoặc tiêu đề giữa phiên bản A và B, giữ nguyên tất cả các yếu tố còn lại.

Ý nghĩa thống kê trong A/B testing

Cần chạy thử nghiệm đủ lâu và đạt cỡ mẫu đủ lớn để đảm bảo sự chênh lệch hiệu quả giữa A và B đạt ý nghĩa thống kê (p < 0,05) chứ không phải do may rủi nhất thời.