Thử nghiệm A/B cho phép so hai phiên bản trang với các nhóm người dùng được phân ngẫu nhiên. Với một doanh nghiệp có trang báo giá, câu hỏi có thể rất hẹp: lời kêu gọi “Nhận báo giá theo nhu cầu” có giúp tăng số yêu cầu đủ thông tin so với “Liên hệ” không? Chốt câu hỏi này trước để tránh sửa nhiều chi tiết rồi khó biết điều gì tạo khác biệt.
Hai phương án trên giấy giúp nhóm xác định đúng chi tiết sẽ thay đổi trước khi thử A/B.
Định nghĩa phiên bản và cách đo
Đổi một yếu tố gắn với giả thuyết
Giữ trang hiện tại làm A. Ở B, thay chữ trên nút và giữ nguyên vị trí, màu, biểu mẫu, giá và nguồn truy cập. Giả thuyết là diễn đạt rõ kết quả sau khi bấm giúp người có nhu cầu tự tin gửi yêu cầu. Nếu muốn thử rút ngắn biểu mẫu, chạy một thử nghiệm riêng sau khi đã ghi nhận kết quả lần này.
Chọn chỉ số chính và dấu hiệu cần theo dõi
Đếm tỷ lệ người được phân vào nhóm hoàn tất gửi yêu cầu đủ thông tin theo tiêu chí đã định, chẳng hạn có phương thức liên hệ và mô tả nhu cầu. Theo dõi thêm lỗi biểu mẫu và tỷ lệ yêu cầu mà nhân viên xác minh là phù hợp. Lượt nhấp nút giúp chẩn đoán, còn kết quả chính cần gắn với mục tiêu của trang.
Ví dụ vì sao 10 so với 14 chưa đủ để chốt
Giả sử A có 200 người và 10 yêu cầu hợp lệ, B có 200 người và 14 yêu cầu. Tỷ lệ là 5% và 7%, chênh hai điểm phần trăm. Mức chênh mới là ước tính từ mẫu. Với ít sự kiện, biến động ngẫu nhiên có thể lớn. Dùng công cụ tính cỡ mẫu trước khi chạy, dựa vào tỷ lệ nền, mức cải thiện nhỏ nhất có giá trị, ngưỡng sai số và mức lực thống kê đã chọn. Với doanh nghiệp ít lượt truy cập, kết quả có thể cần thời gian dài hơn mức nhóm sẵn sàng chờ.
Chọn chỉ số chính và ngưỡng ra quyết định trước khi phân nhóm người dùng.
Chạy thử và đọc kết quả theo kế hoạch
- Kiểm tra hai phiên bản gửi dữ liệu giống nhau. Thử từ điện thoại và máy tính trước khi mở cho người dùng.
- Chia nhóm ngẫu nhiên cùng thời điểm. Giữ một người ở cùng phiên bản nếu họ quay lại, theo khả năng của hệ thống đo.
- Định trước thời lượng hoặc điều kiện dừng. Tránh dừng ngay sau một ngày B vượt A nếu phương pháp đã chọn cần đủ cỡ mẫu.
- Kiểm tra chất lượng yêu cầu và sự cố trước khi mở rộng. Nếu chưa đủ bằng chứng, ghi là chưa kết luận và lưu các chỉ số đã quan sát.
Nếu lưu lượng thấp, dùng thử nghiệm khả năng sử dụng với vài khách đúng đối tượng để biết họ có hiểu nút và biểu mẫu không. Những buổi này giúp hình thành giả thuyết tốt hơn. Khi đã có lưu lượng đủ, thử nghiệm A/B sẽ trả lời câu hỏi khác là thay đổi đó tạo ra mức chênh lệch nào trong điều kiện đo. Nếu phải dùng hai URL, đọc hướng dẫn của Google trước để cấu hình thử nghiệm phù hợp cho trang công khai.
Trước khi phân tích, so số người thực sự vào mỗi nhóm với tỷ lệ phân bổ dự kiến. Nếu một phiên bản lỗi trên điện thoại hoặc có phiên truy cập bị ghi hai lần, dừng để tìm nguyên nhân trước khi kết luận. Lưu thời điểm lỗi, thiết bị bị ảnh hưởng và khoảng dữ liệu cần loại theo quy tắc đã đặt. Điều này giúp lần chạy lại trả lời đúng câu hỏi ban đầu.
Xử lý khi số yêu cầu tăng nhưng chất lượng giảm
Giả sử B tạo thêm yêu cầu, nhưng phần lớn thiếu thông tin để báo giá hoặc đến từ khách ngoài khu vực phục vụ. Quay lại định nghĩa đã chốt và dùng cùng tiêu chuẩn cho A lẫn B. Đừng đổi tiêu chí giữa chừng để chọn bên thắng. Nếu kết quả chính đạt nhưng tỷ lệ yêu cầu phù hợp giảm, xem việc tăng khối lượng xử lý có đáng với số cơ hội tăng thêm. Ghi kết quả theo số người, số yêu cầu và chất lượng thay vì chỉ báo tỷ lệ. Ở lần tiếp theo, thử lời kêu gọi mô tả rõ điều kiện phục vụ, rồi đo lại với cùng quy trình.
Tài liệu đọc và phiếu thực hành
Google Search Central, Hướng dẫn thử nghiệm trên website. Tải phiếu PDF ở phần Tài liệu đính kèm để làm thử với dữ liệu của doanh nghiệp.
Đọc tiếp Hành trình khách hàng: Khách đang vướng ở đâu?.
Doanh nghiệp đang cần xác định ưu tiên về vốn, kinh doanh hoặc quản trị? Thực hiện khảo sát doanh nghiệp miễn phí của SMEMONEY để tổng hợp tình hình và chọn việc cần xử lý trước.