images
07/10/2020 08:02 am

Gấu mèo đi làm Data Scientist - Phần 6 - Evaluate Model - Part 3 - Gain and Lift Charts

Cốc starbucks của Crazy Puppy làm Gấu Mèo tỉnh hẳn. Và vì tỉnh nên nó nhận ra nó còn mắc kẹt với chú em Crazy Puppy lâu nữa. Thôi đành, dạy nó thêm vài cách evaluate model nữa vậy.

"Hôm nay sẽ chỉ chú về Gain and Lift Chart. Cách này anh đặc biệt hay dùng khi kết hợp phân tích các chiến dịch với phòng marketing. Bên đấy họ thường vẫn thường nhờ anh để tính toán sự phản hồi (response) của khách hàng đối với một campaign quảng cáo. Và sau khi tạo một model thì đây là cách mà anh đánh giá nó có dùng được hay không".


Bước 1: Tính xác suất phản hồi campaign cho từng khách hàng.

Bước 2: Xếp theo thứ tự xác suất cao tới thấp

Bước 3: Chia thành 10 nhóm mỗi nhóm ~ 10%

Bước 4: Tính sự phản hồi Responders, Non-responders và total cho từng nhóm

Dân marketing hơn nhau ở chỗ tối ưu tiền quảng cáo. Như trong hình họ có thể gửi quảng cáo cho 5440 khách hàng. Nếu gửi hết thì có model hay không có model đều chuyển đổi như nhau, đều 3850 cả.


Tuy nhiên nếu chỉ gửi cho một số lượng trong thấy thì cách dùng model cover được nhiều trường hợp hơn, từ đấy tăng được conversion rate.


Dựa vào cách này bên marketing cũng có thể ước tính được số tiền mình cần bỏ ra để thu được số khách hàng phản hồi như mong muốn.


Bởi vậy nên một model có thể có độ chính xác không quá cao nhưng vẫn hữu dụng trong thực tế. Còn nếu như cứ cắm cúi để tăng độ chính xác của model lên thật cao có khi lại làm chậm lại các mục đích kinh doanh, thậm chí là lỡ cơ hội.


Vậy nên mỗi trường hợp sẽ cần tỉnh táo để xem mình nên dùng cách evaluate nào.


Gấu Mèo nói đến đấy thì Fat Cat đi qua và cười đầy ẩn ý. Gấu Mèo tự dưng chột dạ, không biết nó có nói sai gì không…

------------

Các bạn đọc tiếp Phần 7 - Gấu mèo đi làm Data Scientist - Co-occurrences and Associations: Finding Items That Go nhé.


Mời các bạn xem lại Phần 6 - Gấu mèo đi làm Data Scientist - Evaluate Model - Part 2 (F1 Score)

 

- Tech Zone -

Thư giãn chút nào!!!

Bài viết liên quan