ตลาดทำนายไม่ใช่เรื่องใหม่
แนวคิดของการใช้ตลาดเพื่อรวบรวมการทำนายไม่ใช่นวัตกรรมของศตวรรษที่ 21 ตลาดเดิมพันทางการเมืองมีอยู่ในสหรัฐอเมริกาตั้งแต่ช่วงต้นทศวรรษ 1860 เมื่อ Wall Street curb exchanges รับเดิมพันเกี่ยวกับการเลือกตั้งประธานาธิบดี ตลาดเหล่านี้ได้รับการติดตามอย่างกว้างขวางและมักจะแม่นยำกว่าการสำรวจความคิดเห็นในยุคเดียวกัน Iowa Electronic Markets ซึ่งเปิดตัวในปี 1988 ได้ให้หลักฐานทางวิชาการชุดแรกๆ เกี่ยวกับความแม่นยำของตลาดทำนายในรูปแบบสมัยใหม่
ประวัติการดำเนินงานทางวิชาการ
Berg, Nelson และ Rietz แห่งมหาวิทยาลัย Iowa เผยแพร่การศึกษาหลายชิ้นที่เปรียบเทียบการทำนายของ Iowa Electronic Markets กับข้อมูลการสำรวจความคิดเห็นในการเลือกตั้งประธานาธิบดีตั้งแต่ปี 1988 ถึง 2004 ตลาดทำผลงานดีกว่าโพล 74% ของเวลาเมื่อเปรียบเทียบในวันเดียวกัน ข้อได้เปรียบเด่นชัดเป็นพิเศษเมื่อการคาดการณ์ทำล่วงหน้ามากกว่า 100 วันก่อนการเลือกตั้ง
meta-analysis ในปี 2023 ใน International Journal of Forecasting โดย Atanasov และเพื่อนร่วมงานตรวจสอบตลาดทำนาย โพล และผู้เชี่ยวชาญการพยากรณ์ในหลายโดเมน พวกเขาพบว่าการพยากรณ์ที่ดีที่สุดโดยทั่วไปรวมแหล่งข้อมูลทั้งสาม โดยตลาดทำผลงานดีที่สุดเมื่อคำถามถูกกำหนดไว้อย่างดี เกณฑ์การแก้ไขสัญญาชัดเจน และสภาพคล่องเพียงพอ
ที่ตลาดล้มเหลว
ตลาดทำนายไม่ใช่สิ่งที่ผิดพลาดไม่ได้ และความล้มเหลวของพวกมันก็ให้ความรู้ ตลาดประเมินความน่าจะเป็นของเหตุการณ์สุดขั้ว (black swans) ต่ำเกินไปเชิงระบบ เพราะ base rate สำหรับเหตุการณ์สุดขั้วนั้นต่ำมากและผู้เข้าร่วมตลาดส่วนใหญ่ยังไม่เคยประสบกับมัน ตลาดยังมีปัญหากับเหตุการณ์ที่การแก้ไขสัญญาขึ้นอยู่กับผู้ตัดสินใจเพียงคนเดียวที่กระบวนการคิดเป็นเรื่องส่วนตัวอย่างแท้จริง (CEO คนใดคนหนึ่งจะลาออกหรือไม่ ผู้พิพากษาคนใดคนหนึ่งจะตัดสินในทางใด)
การเลือกตั้งสหรัฐฯ ปี 2024 ให้กรณีที่ผสมผสาน Polymarket ระบุอย่างถูกต้องว่า Trump เป็นผู้ที่มีแนวโน้มจะชนะเมื่อโพลแสดงผลสูสี แต่ความน่าจะเป็น 57% ยังคงหมายความว่ามีโอกาสผิด 43% ตลาดถูกในกรณีนี้ แต่การทำนาย 57% ที่กลายเป็นถูกไม่ได้หมายความว่าการทำนายสมบูรณ์แบบ หมายความว่าตลาดประเมินความไม่แน่นอนได้อย่างถูกต้อง ซึ่งเป็นข้อเรียกร้องที่แตกต่างและละเอียดกว่า
การสอบเทียบคือตัวชี้วัดที่ถูกต้อง
วิธีที่ถูกต้องในการประเมินความแม่นยำของตลาดทำนายตลอดเวลาคือการสอบเทียบ: เหตุการณ์ที่ตลาดกำหนดราคาที่ 30% เกิดขึ้นจริง 30% ของเวลาหรือไม่ เหตุการณ์ที่มีราคา 70% เกิดขึ้น 70% ของเวลาหรือไม่ การสอบเทียบที่สมบูรณ์แบบหมายความว่าตลาดไม่มีความมั่นใจเกินไปหรือขาดความมั่นใจเกินไปเชิงระบบในระดับความน่าจะเป็นใดๆ
การศึกษาการสอบเทียบตลาดทำนายโดยทั่วไปแสดงผลงานที่ดีในช่วง 20-80% แต่มีความมั่นใจเกินไปบ้างที่ขอบสุด (เหตุการณ์ที่มีราคา 95% เกิดขึ้นน้อยกว่า 95% ของเวลาเล็กน้อย) สิ่งนี้สอดคล้องกับความคาดหวังทางทฤษฎี: ความน่าจะเป็นสุดขั้วกำหนดราคาได้อย่างแม่นยำยากกว่าเพราะการเปลี่ยนแปลงค่าสัมบูรณ์เล็กน้อยในความน่าจะเป็นจำเป็นต้องมีการเปลี่ยนแปลงเปอร์เซ็นต์ขนาดใหญ่ในตำแหน่งเพื่อแก้ไข
สำรวจเครื่องมือเหล่านี้บน Blockcircle: Prediction Markets Mispricing Engine