A/B test kịch bản chatbot là chạy 2 phiên bản kịch bản khác nhau cho 2 nhóm khách, so chỉ số để biết bản nào tốt hơn — rồi áp dụng bản thắng. Chatbot không "cài xong là xong": kịch bản phải thử, đo và lặp. Zenify ghi nhận tăng 21% tỷ lệ chuyển đổi với chatbot tối ưu (đã duyệt).
TL;DR
- A/B test so 2 phiên bản kịch bản với nhau.
- Chỉ chạy khi có đủ khách — ít khách thì không đủ ý nghĩa.
- Chỉ test một thay đổi một lần.
- Đo bằng chỉ số rõ: chuyển đổi, containment, CSAT.
- Lặp lại liên tục — chatbot tốt là chatbot được thử.
Vì sao cần A/B test?
Bạn "nghĩ" kịch bản hay, nhưng khách mới quyết định.
Thay đổi nhỏ (lời chào, thứ tự menu, cách hỏi) ảnh hưởng lớn.
Tránh sửa theo cảm tính — dữ liệu cho biết bản nào hơn.
Zenify ghi nhận tăng 21% chuyển đổi — con số đến từ tối ưu có đo lường.
A/B test cái gì?
Yếu tố | Ví dụ
Lời chào | "Em là trợ lý của shop" vs "Anh cần gì em giúp?"
Thứ tự menu | Đặt "Báo giá" đầu hay "Gặp nhân viên" đầu
Cách hỏi thông tin | Hỏi dần từng cái vs gửi form gom
CTA | "Đặt ngay" vs "Để em gửi bảng giá nhé"
Fallback | Gợi ý lại menu vs chuyển người sớm (xem Fallback chatbot)
Cách thực hiện A/B test
Chọn một yếu tố duy nhất: không test 2 thứ cùng lúc.
Chia 2 nhóm: ngẫu nhiên, tương đương nhau.
Chạy đủ thời gian: đến khi đủ số lượng hội thoại có ý nghĩa.
So chỉ số: chuyển đổi, containment, CSAT.
Chọn bản thắng: áp dụng, rồi thử thay đổi tiếp theo.
Đo bằng chỉ số nào?
Mục tiêu | Chỉ số
Bán hàng | Tỷ lệ chốt đơn, giá trị đơn
CSKH | Containment rate, CSAT (xem Containment rate)
Trải nghiệm | Tỷ lệ khách bỏ dở, thời gian hoàn tất
Chuyển người | Tỷ lệ chuyển agent đúng lúc
Nguyên tắc: chọn chỉ số chính từ trước — đừng "nhìn sau rồi chọn".
Lưu ý khi A/B test chatbot
Đủ dữ liệu: vài chục hội thoại chưa đủ kết luận — cần vài trăm trở lên.
Không test thứ không đáng: lời chào thay "dạ" thành "ạ" không đáng test.
Xem ngữ cảnh: chuyển đổi giảm nhưng CSAT tăng — cần hiểu vì sao.
Ghi lại kết quả: lưu để không lặp lại thử nghiệm cũ.
Quy trình tối ưu liên tục
Đo baseline hiện tại.
Chọn một điểm nghi ngờ.
A/B test thay đổi.
Áp dụng bản thắng.
Quay lại bước 1 — chatbot tốt là chatbot được cải thiện liên tục.