Tỷ lệ đoán đúng là con số quen thuộc nhất nhưng cũng dễ gây hiểu lầm nhất khi đánh giá dự đoán bóng đá. Một người luôn nói “đội mạnh hơn sẽ thắng” có thể đạt tỷ lệ đúng khá, trong khi người khác đưa ra xác suất tinh tế hơn lại bị chấm thấp vì vài trận bất ngờ. Hai công cụ công bằng hơn là calibration (độ khớp giữa mức tin và tần suất thực tế) và điểm Brier (sai số trung bình của xác suất). Cả hai đều tính tay được.
Vì sao tỷ lệ đúng không kể hết câu chuyện
Tỷ lệ đúng chỉ hỏi “dự đoán chính có trùng kết quả không”, rồi bỏ qua mức tin. Hai tình huống sau cho cùng một dòng “sai” nhưng rất khác nhau:
- Bạn tin 90 phần trăm chủ nhà thắng, và chủ nhà thua.
- Bạn tin 45 phần trăm chủ nhà thắng, 30 phần trăm hoà, 25 phần trăm khách thắng, và khách thắng.
Tình huống đầu là một cú trượt nặng của sự tự tin quá đà; tình huống sau gần như nằm trong dự liệu. Tỷ lệ đúng coi hai trường hợp ngang nhau. Muốn phân biệt được, ta cần một thước đo nhìn vào chính con số xác suất.
Ngoài ra, ở bóng đá còn có vấn đề mẫu nhỏ. Với vài chục trận, dao động may rủi lớn đến mức tỷ lệ đúng nhảy lên xuống nhiều điểm phần trăm mà chẳng nói lên kỹ năng thật sự.
Calibration: khi nói 70 phần trăm thì đúng khoảng bảy lần trong mười
Một người dự đoán được gọi là hiệu chỉnh tốt (well-calibrated) nếu các lần họ nói “khoảng 70 phần trăm” thì thực tế xảy ra xấp xỉ 70 phần trăm số lần. Không cần đoán đúng mọi trận, chỉ cần mức tin phản ánh đúng tần suất.
Cách kiểm tra rất đơn giản: gom các dự đoán vào vài nhóm theo mức tin, rồi so mức tin trung bình của nhóm với tỷ lệ thực tế xảy ra. Bảng dưới là ví dụ giả định với 100 dự đoán “chủ nhà thắng”, số liệu bịa để minh hoạ.
| Nhóm mức tin | Mức tin trung bình | Số dự đoán | Số lần xảy ra | Tần suất thực tế | Chênh lệch |
|---|---|---|---|---|---|
| 50 đến 59% | 55% | 40 | 22 | 55% | 0 điểm |
| 60 đến 69% | 65% | 30 | 18 | 60% | -5 điểm |
| 70 đến 79% | 75% | 20 | 16 | 80% | +5 điểm |
| 80 đến 89% | 85% | 10 | 6 | 60% | -25 điểm |
| Tổng | 65% | 100 | 62 | 62% | -3 điểm |
Cách tính: mức tin trung bình chung là (40 nhân 55 cộng 30 nhân 65 cộng 20 nhân 75 cộng 10 nhân 85) chia 100, bằng 65 phần trăm; thực tế xảy ra 62 trên 100. Đọc bảng này ta rút ra ba điều:
- Nhóm 50 đến 59 khớp hoàn hảo, nghĩa là khi bạn tin vừa phải, bạn đáng tin.
- Nhóm 80 đến 89 lệch -25 điểm: bạn nói 85 phần trăm nhưng chỉ xảy ra 60 phần trăm. Đây là dấu hiệu tự tin thái quá ở vùng cao. Nhưng nhóm này mới có 10 dự đoán, nên cần thêm dữ liệu trước khi kết luận.
- Tổng thể mức tin cao hơn thực tế 3 điểm, tức hơi lạc quan, một lỗi rất phổ biến.
Cách sửa thường là kéo các xác suất cực đoan về gần giữa một chút. Đừng ghi 85 phần trăm khi dữ liệu của chính bạn cho thấy những lần như vậy chỉ xảy ra khoảng 60 phần trăm.
Điểm Brier: tính tay trong năm phút
Điểm Brier lấy hiệu giữa xác suất bạn đưa ra và kết quả thật (1 nếu xảy ra, 0 nếu không), bình phương lên, rồi lấy trung bình. Điểm càng thấp càng tốt; 0 là hoàn hảo. Với một biến hai chiều như “chủ nhà thắng hay không”, điểm Brier nằm giữa 0 và 1.
Ví dụ năm trận giả định, mỗi trận bạn ghi xác suất chủ nhà thắng:
| Trận (giả định) | Xác suất bạn ghi | Kết quả (1 = chủ thắng) | Sai lệch | Bình phương |
|---|---|---|---|---|
| 1 | 0,70 | 1 | 0,30 | 0,09 |
| 2 | 0,60 | 0 | 0,60 | 0,36 |
| 3 | 0,80 | 1 | 0,20 | 0,04 |
| 4 | 0,50 | 1 | 0,50 | 0,25 |
| 5 | 0,30 | 0 | 0,30 | 0,09 |
| Tổng | 0,83 |
Điểm Brier bằng 0,83 chia 5, tức khoảng 0,166. Để biết con số đó tốt hay dở, hãy so với mốc “lười”: luôn ghi 0,50 cho mọi trận. Khi đó mỗi trận đều ra sai lệch 0,5, bình phương là 0,25, nên điểm Brier là 0,25. Bạn đạt 0,166, tốt hơn mốc lười, nghĩa là các xác suất của bạn mang thông tin thật.
Cái hay của bình phương nằm ở chỗ nó phạt nặng sự tự tin sai. Nếu ở trận 2 bạn từng ghi 0,90 thay vì 0,60 và chủ nhà vẫn thua, sai lệch là 0,90, bình phương thành 0,81, tức đắt gấp hơn hai lần so với 0,36. Ngược lại, thắng với mức tin 0,80 chỉ tốn 0,04. Hệ thống chấm này khuyến khích bạn nói thật mức tin của mình thay vì “nói chắc cho oai”.
Mở rộng cho ba kết cục thắng, hoà, thua
Với ba kết cục, bạn cộng bình phương sai lệch của cả ba ô. Giả sử bạn ghi 0,50 cho chủ thắng, 0,30 cho hoà, 0,20 cho khách thắng, và chủ nhà thắng. Sai lệch lần lượt là 0,50, 0,30 và 0,20, bình phương là 0,25, 0,09 và 0,04, tổng 0,38. Mốc lười lúc này là chia đều một phần ba: (2/3)^2 cộng hai lần (1/3)^2, ra xấp xỉ 0,667. Bạn đạt 0,38, tốt hơn mốc lười khá nhiều. Lưu ý thang điểm khác thang hai chiều, nên đừng đem so điểm Brier hai chiều với ba chiều.
Cách phối hợp ba thước đo
- Tỷ lệ đúng: dễ hiểu, dùng làm cái nhìn đầu tiên, nhưng đừng dùng một mình.
- Calibration: cho biết mức tin của bạn lệch về phía nào và ở vùng xác suất nào, rất hợp để chỉnh thói quen.
- Điểm Brier: một con số tóm gọn, dùng để theo dõi tiến bộ qua từng tháng và so với mốc lười.
Hãy tính cả ba trên cùng một bộ dữ liệu, ví dụ nhật ký trong bảng tính mà bạn lập từ trước. Nếu tỷ lệ đúng tăng mà điểm Brier xấu đi, rất có thể bạn đang nói chắc hơn thực lực của mình.
Những cái bẫy khi tự chấm điểm
- Mẫu nhỏ. Dưới khoảng 50 dự đoán, cả điểm Brier lẫn calibration đều dao động mạnh. Đừng vội đổi cách làm chỉ vì một tuần xấu.
- Chọn trận có lợi. Chỉ chấm các trận bạn tự tin sẽ làm kết quả đẹp giả. Hãy chấm theo một danh sách trận cố định, chọn trước khi biết kết quả.
- So sánh khập khiễng. Giải dễ đoán và giải khó đoán cho điểm Brier khác nhau, nên chỉ so bạn với chính mình, hoặc với mốc lười trên cùng bộ trận.
- Sửa dữ liệu quá khứ. Xác suất ghi sau trận không còn là dự đoán.
Chú ý cuối: các phương pháp tự chấm điểm này là công cụ học tập và chỉ mang tính tham khảo. Nếu bạn quan tâm đến chủ đề liên quan cá cược, hãy nhớ nội dung dành cho người từ 18 tuổi, và việc đo được mức tin của mình không biến dự đoán thành khoản chắc chắn có lời.