さかのぼり計算と、前向きの予測の違い
公開
本サービスの成績には、「さかのぼり計算」と「前向きの予測」という、2種類の記録が混ざっています。どちらも「予測」と呼んでいますが、 いつ計算したかがまったく違います。この違いを混ぜて読むと、実力以上に良い 成績を、実際に公開していた成績のように受け取ってしまいます。この記事では その違いと、本サービスがどちらの記録を代表として掲げているかを説明します。
前向きの予測とは何か
前向きの予測とは何ですか
試合の締切より前に計算し、そのまま画面に公開していた予測のことです。結果はまだ誰も知りません。予測を出したあとで結果が決まるので、 その予測が実際にどれだけ的中していたかを、あとから確かめられます。
さかのぼり計算の予測となにが違うのですか
さかのぼり計算は、いまのモデルを採用したあとで、過去の締切に対して計算し直した予測です。 締切の時点までのデータだけを使っていて、未来の情報は使っていません。それでも当時それを公開していたわけではありません。モデルの選び方や調整には、後の期間を見た判断が混ざりうるので、当時の実力の 証明にはならない、という違いがあります。
たとえば、いくつかの作り方を試して、後から見ていちばん成績の良かった作り方 だけを選び、その作り方で過去の全期間に予測を計算し直したとします。この 予測は締切時点までのデータだけで計算されているので、ルールの上では反則では ありません。ですが、「後から見ていちばん良かったものを選んだ」という選び方自体が、未来の 情報(結果)を使っています。当時この予測を公開していたとしたら、同じ成績になっていたとは限りません。 さかのぼり計算の数字を、前向きの実績と同じ重さで読んではいけない理由は ここにあります。
本サービスの境目はいつか
本サービスが前向きの予測を作り始めたのは 2026/08/30(日) 05:46 JST です。これより前に締め切った回の予測は、すべて後からさかのぼって計算した ものになります。これより後に締め切った回だけが、当時実際に公開していた 「前向き」の予測です。
代表成績で使っている予測の種類は「採用中のモデル」、記録する時点は「締切直前(最終)」です。予測の種類は「いまのモデルの系列」という意味で、前向きかさかのぼりか とは別の軸です。同じ「採用中のモデル」の系列の中に、前向きの回とさかのぼり の回の両方が含まれることがあります。
代表成績はどちらの記録で作っているか
本サービスの成績は、どちらの記録で作っているのですか
本サービスの代表成績は、締切直前(最終)の記録を、 2000/11/05(日) から 2026/08/30(日) までの 16,440 件集めたものです。当てた率は 46.8% でした。
この期間には、前向きの予測を作り始めた後に締め切った回が含まれています。 期間の一部、あるいは全部が、当時実際に公開していた予測です。集計の期間 と作り始めた時刻を見比べれば、どちらの割合が多いかが分かります。
なぜ2つを分けて出すのか
さかのぼり計算の予測を、前向きの予測と同じ表に混ぜて見せると、実力以上に 良く見える成績を作れてしまいます。締切後の結果を見ながらモデルを何度でも 調整できる立場と、締切前に一度だけ予測を出す立場では、条件がまったく違う からです。
本サービスは、この2つを同じ表の中でも分けて表示し、さかのぼり計算の集計には当時公開していなかったことを明記しています。 代表として掲げる成績は締切直前(最終)の記録に絞っていて、時点の違う予測を 混ぜて平均を取ることもしていません。数字を良く見せることより、いつ計算した 数字なのかを分かるようにしておくことを優先しています。
モデルの版を上げるたびに、さかのぼり計算で作り直した過去の成績が新しく 加わります。版が変われば対象の集め方も変わるため、版をまたいで数字を足したり、直接比べたりすることもしていません。版ごとにその時点で凍結した成績として残し、最新の版がどれかを常に明示して います。
後から計算した検証には、何の意味があるのですか
無意味ではありません。締切時点までのデータだけを使って計算している以上、 「未来の情報を見て当てている」わけではなく、モデルの作り方そのものが機能しているかどうかを確かめる材料にはなります。ここで注意しているのは、当時この成績を公開していたという 証拠にはならない、という一点だけです。意味のある検証と、公開実績の証明は 別の話です。
この違いを踏まえて、何を確かめればよいか
なぜこの違いを知っておく必要があるのですか
予測の成績を掲げるサービスは他にもあります。そこで示されている数字が、 当時実際に公開していた予測の成績なのか、後から作り直した検証なのかは、 表記を確かめないと分かりません。「当時公開していたか」を書いていない成績は、どちらの意味にも読めるということを、この2つの言葉の違いを知っていれば見分けやすくなります。
本サービスの場合は、予測の成績 のページで、採用中のモデルの集計と、後から計算した検証の集計を見出しから 分けています。数字を見るときは、まずその見出しがどちらを指しているかを 確認してください。
もう一つの目安は、集計の対象期間が、いつまで遡っているかです。サービスを始めたばかりのはずなのに、何年も前の試合まで含めた成績を 掲げている場合は、その大部分がさかのぼり計算である可能性が高くなります。 対象期間とサービスの開始時期を見比べるだけでも、簡単な見当が付きます。
この記事のまとめ
- 前向きの予測は、締切より前に計算し、当時そのまま公開していた予測です。
- さかのぼり計算は、モデル採用後に過去の締切へ向けて計算した予測で、当時は 公開していません。
- 本サービスが前向きの予測を作り始めたのは 2026/08/30(日) 05:46 JST です。
- 本サービスは2つを同じ表の中でも分けて表示し、当時公開していたかどうかを 明記しています。