Vài nét về “Siêu dự báo”

Tác giả
Luke Muehlhauser
Xuất bản gốc tháng
February 22, 2021
bởi
Luke Muehlhauser
Thời gian đọc bài viết
[time]
phút

Đây là bài viết liên kết với: http://lukemuehlhauser.com/superforecasting-in-a-nutshell/

Giả sử bạn muốn biết khả năng thành công sáng kiến về sản phẩm mới, hoặc khả năng Trung Quốc xâm lược Đài Loan trong thập kỷ tới, hoặc khả năng một đại dịch toàn cầu sẽ càn quét thế giới — về cơ bản là bất kỳ câu hỏi nào mà bạn không thể chỉ sử dụng “phân tích dự đoán” (predictive analytics), vì bạn không có bộ dữ liệu khổng lồ để đưa vào các mô hình thống kê như Amazon có thể làm khi dự đoán thời gian gói hàng của bạn sẽ đến.

Liệu có thể đưa ra dự báo đáng tin cậy, chính xác cho những câu hỏi như vậy không?

Điều đáng ngạc nhiên là câu trả lời dường như là "Có, nếu bạn làm đúng".

Thị trường dự đoán là một phương pháp hứa hẹn để làm điều này, nhưng chúng hầu hết là bất hợp pháp ở Mỹ, và nhiều vấn đề thực thi gây cản trở tính chính xác của thị trường dự đoán ở thời điểm hiện nay. May mắn thay, còn có phương pháp "siêu dự báo", hoàn toàn hợp pháp và rất hiệu quả.

Nó hoạt động như thế nào? Ý tưởng cơ bản rất đơn giản. Các bước thực hiện như sau:

  1. Đầu tiên, hãy đo lường độ chính xác của dự báo. Một số ngành rất quan tâm đến độ chính xác của dự báo và vì thế có đo lường dự báo, ví dụ như quỹ đầu tư mạo hiểm. Nhưng hầu hết các ngành dựa nhiều vào dự báo thậm chí không thèm đo lường độ chính xác của dự báo,[1] ví dụ như cộng đồng tình báo Hoa Kỳ hoặc các tổ chức từ thiện.
  2. Cuối cùng, đặt câu hỏi dự báo của bạn cho các siêu dự báo viên và sử dụng tổng hợp các dự đoán của họ.
  3. Cuối cùng, hãy đặt câu hỏi dự báo của bạn cho các siêu dự báo viên và sử dụng tổng hợp các dự đoán của họ.

Về mặt kỹ thuật, phương pháp thông thường phức tạp hơn một chút,[3] nhưng ba bước đơn giản này là cốt lõi của phương pháp siêu dự báo.

Vậy, phương pháp này hiệu quả đến mức nào?

Vài năm trước, cộng đồng tình báo Hoa Kỳ đã thử nghiệm phương pháp này trong một cuộc thi dự báo quy mô lớn và nghiêm ngặt, bao gồm nhiều thử nghiệm lâm sàng ngẫu nhiên có đối chứng và đưa ra hơn một triệu dự báo về hơn 500 câu hỏi dự báo địa chính trị, chẳng hạn như “Liệu năm 2013 có xảy ra vụ bạo lực ở Biển Đông khiến ít nhất một người thiệt mạng không?” Nghiên cứu này cho thấy:

  1. Phương pháp này đưa ra các dự báo rất chính xác, theo nghĩa là các dự báo được đưa ra với độ tin cậy 20% sẽ thành hiện thực 20% số lần, các dự báo được đưa ra với độ tin cậy 80% sẽ thành hiện thực 80% số lần, v.v. Phương pháp này không phải là quả cầu pha lê; nó không thể cho bạn biết chắc chắn liệu Trung Quốc có xâm lược Đài Loan trong thập kỷ tới hay không, nhưng nếu nó cho bạn biết khả năng là 10%, thì bạn có thể khá tin tưởng rằng tỷ lệ thực sự rất gần 10% và quyết định chính sách phù hợp với mức rủi ro đó.[4]
  2. Phương pháp này đưa ra các dự báo chính xác hơn nhiều so với các dự báo của một nhà dự báo điển hình hoặc các phương pháp khác đã được thử nghiệm, và chính xác hơn khoảng 30% so với các nhà phân tích tình báo (không giống như các nhà dự báo siêu hạng[5]) có quyền truy cập vào thông tin mật được thu thập với chi phí cao và được đào tạo nhiều năm về các vấn đề địa chính trị mà họ dự báo.[6] Đó là những kết quả khá kinh ngạc! Và đó là kết quả của một nghiên cứu cực kỳ cẩn thận và nghiêm ngặt![7]

Vì vậy, bạn có thể nghĩ rằng cộng đồng tình báo Hoa Kỳ đã hào hứng áp dụng phương pháp dự báo siêu chính xác, đặc biệt là khi nghiên cứu này được tài trợ bởi cộng đồng tình báo, với mục đích cụ thể là tìm ra cách cải thiện độ chính xác của các ước tính tình báo Hoa Kỳ được các nhà hoạch định chính sách sử dụng để đưa ra các quyết định khó khăn. Thật không may, theo kinh nghiệm của tôi, rất ít người trong cộng đồng tình báo và an ninh quốc gia Hoa Kỳ từng nghe về những kết quả này, hoặc thậm chí là thuật ngữ “dự báo siêu chính xác”.[8]

Một tổ chức lớn như CIA hoặc Bộ Quốc phòng có đủ nhân lực và thực hiện đủ các dự báo để có thể tự thực hiện tất cả các bước của phương pháp dự báo siêu việt, nếu muốn. May mắn thay, các tổ chức nhỏ hơn có thể ký hợp đồng với các nhà dự báo siêu việt đã được xác minh để thực hiện các dự báo được hiệu chỉnh tốt về các vấn đề có tầm quan trọng nhất đối với quá trình ra quyết định của họ. Cụ thể:

  • Các nhà dự báo siêu hạng đã vượt qua các nhà phân tích tình báo trong cuộc thi dự báo nêu trên có thể được ký hợp đồng thông qua Good Judgment Inc.
  • Một công ty khác, Hypermind, cung cấp các dự báo tổng hợp từ các “nhà dự báo xuất sắc”, tức là những nhà dự báo chính xác nhất trong hàng ngàn câu hỏi dự báo cho các khách hàng doanh nghiệp trong (một số trường hợp) gần hai thập kỷ qua.[9]
  • Một số dự án khác, ví dụ như Metaculus, cũng đang bắt đầu xác định những nhà dự báo có độ chính xác cao bất thường trong hàng trăm câu hỏi.

Mỗi công ty này có những điểm mạnh và điểm yếu riêng, và Open Philanthropy đã đặt hàng dự báo từ cả ba công ty trong vài năm qua. Nếu bạn làm việc cho một tổ chức nhỏ thường xuyên đưa ra các quyết định quan trọng dựa trên những gì bạn dự đoán sẽ xảy ra trong tương lai, bao gồm cả những gì bạn dự đoán sẽ xảy ra nếu bạn đưa ra quyết định này so với quyết định kia, tôi khuyên bạn nên thử chúng. (Cả ba công ty đều cung cấp các câu hỏi “có điều kiện”, ví dụ: “Xác suất kết quả X xảy ra là bao nhiêu nếu tôi đưa ra quyết định A, và xác suất kết quả đó xảy ra là bao nhiêu nếu tôi đưa ra quyết định B?”)

Nếu bạn làm việc cho một tổ chức rất lớn và/hoặc làm việc với thông tin rất nhạy cảm, ví dụ như CIA, bạn nên xem xét việc triển khai toàn bộ quy trình dự báo siêu chính xác trong nội bộ. (Mặc dù ký hợp đồng với một hoặc nhiều tổ chức trên có thể là một cách tốt để thử nghiệm mô hình với chi phí thấp trước khi triển khai toàn diện.)

Bài tiếp theo:

Dự báo hàng đầu của Metaculus

Bài viết này nằm trong Cẩm nang thiện nguyện hiệu quả - một chuỗi bài viết giới thiệu đến bạn một số công cụ tư duy cốt lõi đằng sau thiện nguyện hiệu quả, chia sẻ một số luận điểm về những vấn đề toàn cầu cấp bách nhất, đồng thời giúp bạn suy ngẫm về cách bạn có thể đóng góp cá nhân.

Xem thêm về cẩm nang tại đây.

Nên làm gì tiếp theo?

Nếu bạn quan tâm đến việc tìm hiểu cách làm nhiều điều tốt hơn, đây là một số bước tiếp theo bạn có thể thực hiện.

Thắc mắc thường gặp

Phản biện thường gặp