Hãy kể về lần bạn giải thích giới hạn của một mô hình cho người không chuyên kỹ thuật

Dùng cấu trúc STAR và chuyển hành vi của mô hình sang ngôn ngữ kinh doanh.

Bối cảnh. Một product lead muốn ra mắt mô hình dự đoán khách hàng rời bỏ và cho rằng nó chính xác khoảng 90 phần trăm với mọi khách hàng, vì đó là con số được nêu nổi bật.

Nhiệm vụ. Đặt kỳ vọng thực tế mà không giết dự án.

Hành động. Tôi thay accuracy bằng một câu hỏi mà lead quan tâm: nếu liên hệ 1.000 khách hàng có điểm cao nhất thì sẽ tiếp cận được bao nhiêu người thật sự rời bỏ? Tôi cho xem các ví dụ dự đoán đúng và sai, giải thích rằng mô hình yếu hơn với khách hàng mới vì có ít dữ liệu về họ, và quy các con số thành chi phí cho mỗi quyết định sai. Tôi đề xuất chạy thử có bước người duyệt và một chỉ số thành công rõ ràng.

Kết quả. Lead chọn ra mắt giới hạn. Bản thử nghiệm đạt mục tiêu đã thống nhất, và chúng tôi mở rộng một cách tự tin, không có bất ngờ.

Bài học: tránh thuật ngữ, dùng ví dụ cụ thể, trung thực về sự không chắc chắn và đưa ra bước tiếp theo an toàn.