Phân tích kết quả A/B test với kết luận rõ ràng

Ví dụ kết quả

Về dịch vụ này

Một biến thể trông tốt hơn 12% sau một tuần có thể chỉ là ngẫu nhiên, và dừng thử nghiệm ngay ngày đầu có kết quả tốt là cách thường gặp để triển khai một thay đổi chẳng mang lại gì. Từ số khách truy cập và lượt chuyển đổi của từng biến thể, chúng tôi tính tỷ lệ chuyển đổi, mức cải thiện, ý nghĩa thống kê và khoảng tin cậy, đồng thời kiểm tra mẫu có đủ lớn không. Bạn nhận kết luận rõ ràng: triển khai biến thể, giữ bản gốc, hoặc coi kết quả là chưa đủ cơ sở và chạy thêm.

Bao gồm những gì

• Bạn nhận được gìBáo cáo thử nghiệm với tỷ lệ chuyển đổi, mức cải thiện, ý nghĩa thống kê, khoảng tin cậy, kiểm tra cỡ mẫu, kết quả theo phân khúc ở các gói cao hơn và kết luận rõ ràng, dưới dạng văn bản đã định dạng có bảng trên trang đơn hàng. Bạn cũng nhận được báo cáo dạng tệp Word (.docx), với các bảng trong tệp Excel (.xlsx).
• Chuyển đổi và mức cải thiệnCho mọi phương án
• Ý nghĩa thống kêKèm khoảng tin cậy
• Kiểm tra cỡ mẫuThử nghiệm đã đủ dài chưa
• Phân khúcThiết bị, nguồn hoặc người dùng mới
• Kết luận rõ ràngTriển khai, giữ nguyên hoặc chạy thêm

Cách hoạt động

1. 1
   Yêu cầuBạn dán hoặc đính kèm số liệu của từng biến thể
2. 2
   Phân tíchChúng tôi kiểm tra ý nghĩa thống kê và cỡ mẫu
3. 3
   Kết luậnBạn nhận quyết định và lý do

Chúng tôi cần gì từ bạn

Số khách truy cập và lượt chuyển đổi của từng biến thể, tốt nhất theo ngày, chỉ số được thử nghiệm, thời gian chạy thử nghiệm và điểm khác nhau giữa các biến thể.

Chúng tôi sẽ hỏi bạn:

• Điều gì đã được thử nghiệm?
• Chỉ số nào quyết định người thắng?
• Thử nghiệm đã chạy bao lâu?
• Công cụ nào đã chạy thử nghiệm?

So sánh các gói

Hỏi đáp