Pennant Lab

予測精度の検証

Pennant Labの優勝確率予測モデルを、過去10年・両リーグ合計 20 シーズンでバックテストしました。 各時点で当時の試合結果からEloとDERを再構築し、残り試合をモンテカルロ法で シミュレーション。実際の優勝チームと突き合わせた結果を全公開します。

バックテスト試合数8,437試合
対象シーズン10年 × 2リーグ
4月末時点の的中率35.0%
シーズン終了時の的中率95%

月別の予測精度

各月末時点でモデルが「優勝候補1位」と予測したチームが、 実際にレギュラーシーズン優勝した割合です。 中盤の不確実性の高さと、終盤に向けた予測の収束が読み取れます。

月末n的中率優勝者への平均付与確率優勝者の平均順位予測
4月末1838.9%31.1%2.56
5月末1838.9%36.3%2.22
6月末2050.0%47.7%2.00
7月末2080.0%67.0%1.40
8月末2080.0%75.2%1.25
9月末2090.0%86.1%1.10

的中率の推移

02550751004月末39%5月末39%6月末50%7月末80%8月末80%9月末90%

10年の検証結果(年×リーグ)

各セルは「年×リーグ」の最終予測。 がモデルが優勝を当てた年、 × が外した年。

セ・リーグ優勝セ予測パ・リーグ優勝パ予測
2025阪神◎ 的中 100%ソフトバンク◎ 的中 100%
2024巨人◎ 的中 100%ソフトバンク◎ 的中 100%
2023阪神◎ 的中 100%オリックス◎ 的中 100%
2022ヤクルト◎ 的中 100%オリックス◎ 的中 100%
2021ヤクルト◎ 的中 100%オリックス◎ 的中 100%
2020巨人◎ 的中 100%ソフトバンク◎ 的中 100%
2019巨人◎ 的中 100%西武× 3位予測(0%)
2018広島◎ 的中 100%西武◎ 的中 100%
2017広島◎ 的中 100%ソフトバンク◎ 的中 100%
2016広島◎ 的中 100%日本ハム◎ 的中 100%

モデルが捉えきれなかった逆転年

シーズン終盤時点でも実優勝チームを1位予測できなかったケース。 数字は最終時点での順位予測です。

2022 · ・リーグ
実優勝 オリックス(モデル最終予測: ソフトバンク、優勝チームは2位)
最終時点でも予測外れ
2021 · ・リーグ
実優勝 オリックス(モデル最終予測: ロッテ、優勝チームは2位)
6月末でキャッチアップ
バックテストの設定: 各時点のEloはその日までの実試合からリプレイ。DERは年度内の累積値を 適用(年度内のリーク注意)。残り試合はモンテカルロ法 10,000回で シミュレーション。引き分けは勝敗評価から除外。 このページの数値はモデルの精度示唆であり、将来予測の保証ではありません。