Chỉ số quan trọng nhất của chatbot nhận lịch là tỉ lệ đặt thành công: trong những cuộc trò chuyện có ý định đặt lịch, bao nhiêu phần trăm kết thúc bằng một lịch được giữ, không cần người can thiệp. Đi kèm nó là hai con số giải thích lý do: tỉ lệ bỏ ngang và tỉ lệ chuyển người.
Bài này hướng dẫn tiệm nhỏ đo chatbot bằng một bảng tính đơn giản, không cần công cụ phân tích riêng: định nghĩa từng chỉ số, cách ghi hằng tuần, đọc phễu để biết khách rơi ở bước nào, những bẫy khi đọc số, và cách biến con số thành việc sửa cụ thể. Mọi con số trong bài là ví dụ giả định.
Vì sao phải đo, không dựa vào cảm giác
Sau vài tuần chạy chatbot, chủ tiệm thường có một cảm giác chung: "có vẻ đỡ hơn" hoặc "khách hình như không thích". Cảm giác đó hay bị chi phối bởi vài cuộc trò chuyện đáng nhớ, thường là cuộc tệ nhất. Nhân viên cũng có góc nhìn riêng: người phải nhận những cuộc chuyển khó dễ thấy chatbot tệ hơn thực tế, người ít đụng tới thì dễ thấy nó ổn hơn thực tế. Một khách bực vì chatbot hiểu sai có thể khiến bạn muốn tắt hẳn, trong khi chín mươi khách khác đã đặt lịch suôn sẻ mà không ai nhắc tới.
Đo giúp tách hai câu hỏi: chatbot có làm được việc không, và nếu chưa thì hỏng ở đâu. Câu hỏi thứ hai quan trọng hơn, vì nó cho bạn biết nên sửa câu chào, sửa bước hỏi giờ, hay thêm dữ liệu dịch vụ.
Đo cũng giúp quyết định những việc lớn hơn: có nên cho chatbot tự xác nhận thay vì chờ duyệt, có nên bật thêm kênh mới, có nên đổi công cụ. Không có số liệu, những quyết định đó dựa vào lời giới thiệu của người bán công cụ hoặc vào một vài cuộc trò chuyện tình cờ. Bạn không cần số liệu hoàn hảo; số đếm thô mỗi tuần, ghi đều tay, đã đủ để thấy xu hướng.
Các chỉ số nên theo dõi
Năm chỉ số dưới đây đủ cho tiệm nhỏ. Điều quan trọng là định nghĩa cố định từ đầu, không đổi cách đếm giữa chừng.
| Chỉ số | Cách tính | Cho biết điều gì | Lưu ý |
|---|---|---|---|
| Số cuộc có ý định đặt lịch | Đếm cuộc trò chuyện khách có hỏi lịch hoặc giờ trống | Quy mô nhu cầu qua tin nhắn | Loại cuộc chỉ hỏi địa chỉ, giờ mở cửa |
| Tỉ lệ đặt thành công | Số cuộc kết thúc bằng lịch được giữ, chia cho số cuộc có ý định | Chatbot làm trọn việc được bao nhiêu | Không tính lịch do người chốt sau khi chuyển |
| Tỉ lệ chuyển người | Số cuộc chuyển cho nhân viên, chia cho số cuộc có ý định | Phần việc chatbot không làm được hoặc không nên làm | Ghi kèm lý do chuyển |
| Tỉ lệ bỏ ngang | Số cuộc khách ngừng trả lời giữa chừng, chia cho số cuộc có ý định | Chỗ khách mất kiên nhẫn | Ghi bước khách dừng |
| Tỉ lệ lịch phải sửa | Số lịch do chatbot giữ mà sau đó tiệm phải sửa vì hiểu sai | Độ chính xác của chatbot | Không tính lịch khách tự đổi ý |
Ba tỉ lệ thành công, chuyển người và bỏ ngang cộng lại gần bằng một trăm phần trăm, phần dư là những cuộc còn dở. Nếu cộng lại lệch xa, có thể cách đếm đang chồng chéo.
Lập bảng theo dõi hằng tuần
Một bảng tính với mỗi hàng là một tuần là đủ. Nếu công cụ chatbot có báo cáo sẵn, bạn chép số sang bảng này để so qua nhiều tháng.
- Tạo các cột: tuần, số cuộc có ý định, số đặt thành công, số chuyển người, số bỏ ngang, số lịch phải sửa, ghi chú.
- Mỗi đầu tuần, lấy số của tuần trước từ báo cáo công cụ, hoặc đếm tay bằng cách lướt danh sách hội thoại nếu lượng ít.
- Thêm các cột tỉ lệ tính bằng công thức, để không phải bấm máy tính.
- Ở cột ghi chú, ghi những gì đã thay đổi trong tuần: sửa câu chào, thêm dịch vụ, nghỉ lễ, chạy khuyến mãi. Không có cột này, ba tháng sau bạn sẽ không nhớ vì sao một tuần số tăng vọt.
- Mỗi tháng, thêm một dòng tổng và so với tháng trước. Nhìn xu hướng, không nhìn từng tuần riêng lẻ.
Ví dụ giả định: tuần đầu một tiệm tóc ở Lâm Đồng có bốn mươi cuộc có ý định, hai mươi hai đặt thành công, mười chuyển người, tám bỏ ngang. Tỉ lệ đặt thành công khoảng năm mươi lăm phần trăm. Con số này chỉ có nghĩa khi đặt cạnh các tuần sau đó.
Đọc phễu để tìm chỗ khách rơi
Chia luồng đặt lịch thành các bước. Chào, chọn dịch vụ, chọn ngày, chọn giờ, để lại tên và cách liên lạc, xác nhận. Với mỗi cuộc bỏ ngang, ghi lại khách dừng ở bước nào.
Bỏ ngang ngay sau câu chào. Thường là câu chào quá dài, không rõ đây là chỗ đặt lịch, hoặc khách chỉ muốn nói chuyện với người. Thử rút gọn câu chào và đặt lối gặp nhân viên rõ hơn.
Bỏ ngang ở bước chọn giờ. Thường là giờ đưa ra không hợp, hoặc chatbot bắt khách đoán giờ rồi báo kín nhiều lần. Xem lại cách đưa giờ trống, và xem có đang thiếu khung giờ khách thực sự muốn như sau giờ tan làm.
Bỏ ngang ở bước để lại số điện thoại. Khách ngại cho số khi chưa rõ để làm gì. Thêm lý do vào câu hỏi, và cho phép giữ lịch qua chính kênh tin nhắn nếu khách không muốn cho số.
Bỏ ngang sau câu xác nhận. Ít gặp, nhưng nếu có thì có thể câu xác nhận chưa nói rõ lịch đã chắc hay còn chờ, khiến khách tưởng chưa xong và bỏ đi đặt chỗ khác.
Những bẫy khi đọc số
Con số dễ đánh lừa nếu không cẩn thận. Mấy bẫy dưới đây hay gặp ở tiệm nhỏ.
- Đếm cả cuộc không có ý định đặt lịch: khách hỏi đường, hỏi giờ mở cửa rồi thôi bị tính là bỏ ngang, khiến tỉ lệ thành công thấp oan.
- Tính lịch do người chốt vào thành công của chatbot: chatbot chuyển người, nhân viên chốt lịch, rồi lịch đó bị tính là chatbot đặt được. Số đẹp nhưng sai.
- So hai tuần khác mùa: tuần trước Tết và tuần sau Tết không so được với nhau. So với cùng kỳ hoặc so trung bình nhiều tuần.
- So hai kênh khác nhau như so cùng một thứ: khách Zalo phần lớn là khách quen, tỉ lệ thành công tự nhiên cao hơn khách mới từ fanpage.
- Lẫn chuyện đặt lịch với chuyện khách có đến hay không: chatbot đặt thành công nhưng khách không đến là chuyện của nhắc lịch và chính sách huỷ, có danh mục riêng trên trang. Đừng trừ điểm chatbot vì chuyện đó.
- Mẫu quá nhỏ: tuần chỉ có mười cuộc thì một hai cuộc lệch đã làm tỉ lệ nhảy mười hai mươi phần trăm. Nhìn theo tháng nếu lượng tin ít.
Khi thấy một con số thay đổi mạnh, việc đầu tiên là kiểm cách đếm, sau đó mới tìm nguyên nhân trong chatbot.
Nhờ AI đọc số liệu và hội thoại
Khi bảng đã có vài tháng, bạn có thể nhờ một chatbot AI phổ thông đọc giúp. Chỉ đưa vào bảng số liệu tổng theo tuần, không cần dữ liệu khách. Câu lệnh mẫu: "Đây là bảng theo dõi chatbot đặt lịch của một tiệm tóc trong mười hai tuần, kèm cột ghi chú các thay đổi. Hãy chỉ ra xu hướng của tỉ lệ đặt thành công, những tuần bất thường và thay đổi nào có thể liên quan. Nói rõ chỗ nào là suy đoán vì dữ liệu ít."
Muốn biết lý do bỏ ngang, bạn có thể xuất một số cuộc trò chuyện bỏ ngang, xoá tên, số điện thoại, địa chỉ và mọi chi tiết nhận ra được khách, rồi hỏi: "Với mỗi đoạn hội thoại sau, khách dừng ở bước nào, và câu nào của chatbot ngay trước đó có thể khiến khách dừng?" Kết quả giúp bạn biết đọc kỹ những đoạn nào trước.
Hai điều cần nhớ. Thứ nhất, AI có thể tính sai phép chia, phép cộng trong bảng, nên kiểm lại vài con số bằng tay. Thứ hai, AI dễ đưa ra lời giải thích nghe hợp lý cho mọi biến động; một tuần số giảm có khi chỉ vì trời mưa bão. Coi phần giải thích là giả thuyết để kiểm, không phải kết luận.
Từ con số đến việc sửa
Đo mà không sửa thì chỉ là ghi chép. Mỗi tháng, chọn một chỗ yếu nhất trong phễu và sửa đúng một thứ: viết lại câu chào, đổi cách đưa giờ trống, thêm lý do khi hỏi số điện thoại. Sửa nhiều thứ một lúc thì tháng sau không biết thứ nào có tác dụng.
Nếu lượng tin đủ lớn, bạn có thể thử hai phiên bản của một câu trong hai tuần liền nhau, giữ mọi thứ khác như cũ, rồi so tỉ lệ ở bước đó. Với tiệm nhỏ, chênh lệch nhỏ giữa hai tuần thường chỉ là ngẫu nhiên; chỉ tin những thay đổi rõ và lặp lại qua vài lần thử.
Khi chọn chỗ sửa, ưu tiên bước có nhiều khách rơi nhất tính theo số lượng, không theo tỉ lệ. Một bước làm rơi ba mươi khách mỗi tháng đáng sửa trước một bước có tỉ lệ rơi cao hơn nhưng chỉ ảnh hưởng vài khách, vì công sức sửa gần như ngang nhau.
Ghi mọi lần sửa vào cột ghi chú của bảng. Sau nửa năm, bảng đó trở thành nhật ký của chatbot: bạn biết chính xác nó đã đi từ đâu đến đâu, nhờ thay đổi nào, và khi đổi người phụ trách, người mới đọc bảng là nắm được ngay.
Đến lúc tỉ lệ thành công ổn định và tỉ lệ lịch phải sửa thấp trong vài tháng liền, đó là tín hiệu có thể cho chatbot thêm quyền, như tự xác nhận thêm vài dịch vụ, thay vì chờ người duyệt.
Câu hỏi thường gặp
Tỉ lệ đặt thành công bao nhiêu là tốt?
Không có con số chung cho mọi tiệm, vì nó phụ thuộc vào loại dịch vụ, nhóm khách và cách bạn định nghĩa cuộc có ý định đặt lịch. Điều nên nhìn là xu hướng của chính tiệm bạn qua các tháng, và chỗ khách rơi trong phễu, chứ không phải so với một mức chuẩn bên ngoài.
Công cụ chatbot không có báo cáo thì đếm thế nào?
Với lượng tin vừa phải, bạn có thể lướt danh sách hội thoại mỗi tuần và đếm tay theo năm nhóm: có ý định, thành công, chuyển người, bỏ ngang, phải sửa. Mất chừng nửa giờ mỗi tuần nhưng cho số đáng tin hơn đoán.
Chuyển người nhiều có làm tỉ lệ thành công thấp không?
Có, vì theo định nghĩa trong bài, lịch do người chốt không tính là chatbot thành công. Điều đó không xấu nếu lý do chuyển là đúng việc của người như tư vấn chuyên môn hay phàn nàn. Xem cột lý do chuyển trước khi kết luận.
Có nên đưa dữ liệu khách vào AI để phân tích?
Chỉ đưa những gì cần cho câu hỏi. Bảng số tổng hợp không cần dữ liệu khách. Khi cần phân tích nội dung hội thoại, xoá tên, số điện thoại, địa chỉ và các chi tiết nhận ra được người trước khi dán, và dùng công cụ được tiệm cho phép.
Bao lâu thì nên xem lại số liệu?
Ghi số hằng tuần, nhưng đánh giá và quyết định sửa theo tháng. Nhìn số từng tuần dễ bị nhiễu bởi thời tiết, ngày lễ hay một đợt khuyến mãi; nhìn theo tháng thấy xu hướng rõ hơn.
Đo chatbot có cần đo cả khách có đến hay không?
Nên theo dõi, nhưng tách riêng. Khách có đến hay không phụ thuộc nhiều vào nhắc lịch, chính sách đặt cọc và huỷ, những phần nằm ngoài chatbot. Gộp chung sẽ khiến bạn sửa nhầm chỗ.