予測精度の検証
Pennant Labの優勝確率予測モデルを、過去10年・両リーグ合計 20 シーズンでバックテストしました。 各時点で当時の試合結果からEloとDERを再構築し、残り試合をモンテカルロ法で シミュレーション。実際の優勝チームと突き合わせた結果を全公開します。
バックテスト試合数8,437試合
対象シーズン10年 × 2リーグ
4月末時点の的中率35.0%
シーズン終了時の的中率95%
月別の予測精度
各月末時点でモデルが「優勝候補1位」と予測したチームが、 実際にレギュラーシーズン優勝した割合です。 中盤の不確実性の高さと、終盤に向けた予測の収束が読み取れます。
的中率の推移
10年の検証結果(年×リーグ)
各セルは「年×リーグ」の最終予測。◎ がモデルが優勝を当てた年、 × が外した年。
モデルが捉えきれなかった逆転年
シーズン終盤時点でも実優勝チームを1位予測できなかったケース。 数字は最終時点での順位予測です。
2022 · パ・リーグ
最終時点でも予測外れ実優勝 オリックス(モデル最終予測: ソフトバンク、優勝チームは2位)
2021 · パ・リーグ
6月末でキャッチアップ実優勝 オリックス(モデル最終予測: ロッテ、優勝チームは2位)
バックテストの設定: 各時点のEloはその日までの実試合からリプレイ。DERは年度内の累積値を 適用(年度内のリーク注意)。残り試合はモンテカルロ法 10,000回で シミュレーション。引き分けは勝敗評価から除外。 このページの数値はモデルの精度示唆であり、将来予測の保証ではありません。