mindset
mindset
Tư duy đúng trước khi thiết kế test
TB5 min
Experiment mindset là thói quen hỏi: điều gì sẽ xảy ra với cùng nhóm user nếu họ không nhận treatment? Vì ta không thể quan sát cả hai trạng thái trên cùng một user cùng lúc, randomization giúp tạo hai nhóm tương đương về kỳ vọng.
| Khái niệm | Ý nghĩa thực tế |
|---|---|
| Treatment | Trải nghiệm mới, campaign mới, price message mới |
| Control | Trải nghiệm hiện tại hoặc baseline |
| Treatment effect | Khác biệt do treatment tạo ra |
| Noise | Dao động tự nhiên của dữ liệu |
| Bias | Sai lệch do thiết kế hoặc đo lường |
Task mindset
causal-language
causal-language
Dùng ngôn ngữ causal có trách nhiệm
TB5 min
Một lỗi phổ biến là dùng dữ liệu quan sát để kết luận causal. Ví dụ: user dùng feature A có retention cao hơn không có nghĩa feature A làm retention tăng. Có thể user vốn đã engaged hơn nên mới dùng feature đó.
| Bằng chứng | Cách viết phù hợp |
|---|
Task causal-language