予測精度の検証
Pennant Labの優勝確率予測モデルを、過去10年・両リーグ合計 20 シーズンでバックテストしました。 各時点で当時の試合結果からEloとDERを再構築し、残り試合をモンテカルロ法で シミュレーション。実際の優勝チームと突き合わせた結果を全公開します。
バックテスト試合数8,437試合
対象シーズン10年 × 2リーグ
4月末時点の的中率38.9%
9月末時点の的中率90.0%
月別の予測精度
各月末時点でモデルが「優勝候補1位」と予測したチームが、 実際にレギュラーシーズン優勝した割合です。 中盤の不確実性の高さと、終盤に向けた予測の収束が読み取れます。
的中率の推移
10年の検証結果（年×リーグ）
各セルは「年×リーグ」の最終予測。◎ がモデルが優勝を当てた年、 × が外した年。
モデルが捉えきれなかった逆転年
シーズン終盤時点でも実優勝チームを1位予測できなかったケース。 数字は最終時点での順位予測です。
2022 · パ・リーグ
最終時点でも予測外れ実優勝 オリックス（モデル最終予測: ソフトバンク、優勝チームは2位）
2021 · パ・リーグ
6月末でキャッチアップ実優勝 オリックス（モデル最終予測: ロッテ、優勝チームは2位）
バックテストの設定: 各時点のEloはその日までの実試合からリプレイ。DERは年度内の累積値を 適用（年度内のリーク注意）。残り試合はモンテカルロ法 10,000回で シミュレーション。引き分けは勝敗評価から除外。 このページの数値はモデルの精度示唆であり、将来予測の保証ではありません。