UFC上海の予想を採点: 我々のモデルは13戦中8的中
我々のモデルはUFC上海で人気を嫌ったと書いた。結果と照らして採点すると8-for-13、市場と互角、そしてウマル・ヌルマゴメドフについては大きく外した。
UFC上海の2日前、私はここで「我々のモデルは人気を嫌う」という見出しの記事を公開した。そこではAIモデルがブックメーカーの市場と違う勝者を選んだ2試合を挙げ、13試合のうち8試合でモデルがオッズ板よりも人気側を低く評価していたことに触れた。
カードは終わった。以下がその採点であり、モデルがメインイベントについて大きく、そして高くつく形で間違っていた部分も含む。
見出しの数字
モデルがコーナー一致の予想を持っていたカード上の13試合のうち、13試合中8つの勝者を的中させた。61.5パーセントである。クロージング時点の人気側も8-for-13だった。素の的中率では、モデルと市場はこの夜を互角で終えた。
それは退屈な方の話だ。面白いのは両者が実際に食い違った場所であり、それは13試合のうちちょうど2試合だった。
| 試合 | 我々のモデル | 市場 (クロージング) | 勝者 | モデル |
|---|---|---|---|---|
| ウマル・ヌルマゴメドフ vs ソン・ヤードン | ウマル 74.2% | ウマル -621 | ソン・ヤードン、KO/TKO R2 | 不的中 |
| ヤン・シャオナン vs デニス・ゴメス | ゴメス 62.8% | ヤン -147 | デニス・ゴメス、KO/TKO R1 | 的中 |
| アオリチレン vs 朝倉海 | 朝倉 74.0% | 朝倉 -463 | 朝倉海、KO/TKO R2 | 的中 |
| スムダエルジ vs アレックス・ペレス | スムダエルジ 60.2% | スムダエルジ -313 | スムダエルジ、判定 | 的中 |
| ツェ・リウ vs レビ・ロドリゲスJr. | ロドリゲス 51.1% | ツェ・リウ -180 | ツェ・リウ、KO/TKO R1 | 不的中 |
| ビラル・ハサン vs ニルソン・ロハス | ハサン 63.4% | ハサン -837 | ビラル・ハサン、KO/TKO R2 | 的中 |
| ナムスライ・バトバヤル vs アンドレ・リマ | リマ 72.3% | リマ -333 | アンドレ・リマ、サブミッション R3 | 的中 |
| 鶴屋怜 vs ケビン・ボルハス | 鶴屋 78.2% | 鶴屋 -796 | 鶴屋怜、サブミッション R1 | 的中 |
| ジャック・ジェンキンス vs ショーン・ウッドソン | ウッドソン 58.2% | ウッドソン -155 | ショーン・ウッドソン、スプリット判定 | 的中 |
| シャオ・ロン vs フランチェスコ・ヌッツィ | シャオ・ロン 64.8% | シャオ・ロン -176 | フランチェスコ・ヌッツィ、KO/TKO R1 | 不的中 |
| ローレンス・ルイ vs ヘクター・サンティアゴ | ルイ 72.4% | ルイ -319 | ヘクター・サンティアゴ、KO/TKO R2 | 不的中 |
| シオン・ジンナン vs ジュリア・ポラストリ | ポラストリ 58.6% | ポラストリ -227 | ジュリア・ポラストリ、KO/TKO R1 | 的中 |
| ディン・モン vs キャメロン・ネルソン | ディン・モン 57.2% | ディン・モン -121 | キャメロン・ネルソン、判定 | 不的中 |
上のモデル確率は最終的に保存された数字であり、水曜時点ではなく試合当日にモデルが言っていた内容である。カードが変わるたびに再スコアリングされ、今回はディン・モンのラインが直前の2日間で大きく動いた。
両者が実際に食い違った2試合
13試合のうち11試合で、モデルとクロージングオッズは同じ選手を指していた。食い違ったのは2試合で、結果は1つずつだった。
大きい方はモデルが取った。モデルはデニス・ゴメスをヤン・シャオナンに対して62.8パーセントとしていたが、ブックメーカーはヤンを-147の人気にしていた。これは端数の違いではなく本物の食い違いだ。市場はヤンが約59パーセントの確率で勝つと示唆し、モデルはゴメスが約63パーセントで勝つと言った。この2つの数字が両方とも正解に近いということはありえない。ゴメスはストロー級4位を4:49でKOした。
もう一方は市場が取った。モデルはレビ・ロドリゲスJr.を51.1パーセント、つまり完全なコイン投げとし、相手のツェ・リウをブックメーカーは-180で評価していた。ツェ・リウは1ラウンドで彼をKOした。両者の名誉のために言えば、ロドリゲスはジュニア・タファの欠場後に短期間の通知でこの試合を受けており、それはモデルもオッズラインもうまく扱えない類のことだ。
食い違いではなかったが、もう1行触れておく価値がある。スムダエルジはモデルで60.2パーセント、市場で-313だったが、ベン・カートリッジ、ビト・パオリロ、クレメンス・ベルナーの3者全員が29-28とする、1ラウンド差の判定勝ちだった。-313の人気が最終ラウンドを必要とするはずはない。モデルはこの試合を、実際の内容にずっと近い形で評価していた。
何を外したのか、そしてその最悪の部分
ウマル・ヌルマゴメドフに74.2パーセント。彼は2ラウンドでKOされた。
これを和らげる方法はない。モデルはコイン投げより大きく差をつけてウマルを信頼しており、市場は-621でさらに信頼していた。そして両者が見ていたのは、コリー・サンドヘーゲン、マリオ・バウティスタ、デイベソン・フィゲイレドを判定で下し、キャリアで一度もフィニッシュされたことのない選手だった。プロフィールのすべてが「ラウンドを取り、ストップされない」と言っていた。ソン・ヤードンは1:48で彼を止めた。
それは実在する限界であり、埋めてしまうのではなく名指しする価値がある。選手の戦績と試合ごとの数字が過去に何をしてきたかに大きく依拠したモデルは、判定まで持ちこたえる耐久型の選手が試合を終わらせる相手と出会う可能性を、価格に織り込むのが遅くなる。ソンは試合後ボーナスを8本持ち、うち7本はフィニッシュによるものだ。それは隠れた事実ではない。数字が過小評価していた事実である。
プレリムでの3つの外しは、同じ話の小さい版を語っている。ローレンス・ルイに72.4パーセント、シャオ・ロンに64.8パーセント、ディン・モンに57.2パーセント、全員が敗れ、うち2人はKO負けだった。5人のアンダードッグが勝ち、完了した13試合のうち10試合が判定に行かなかったカードでは、確立された実績に寄りかかるモデルは、もとから苦しい夜になる運命だった。
誠実な読み方
的中率では市場と互角、実際に食い違った2試合では1勝1敗、そして全員が見ていた1試合では市場と揃って自信を持って間違えた。ヤン・シャオナンでモデルをフェード材料に使っていたなら報われた。メインイベントで使っていたなら報われなかった。もっとも、市場に従っていた方がより痛かったはずだが。
私はこれを、的中した8試合についての記事よりも公開したい。我々の予想はすべての今後の大会ページに載っており、私が記事にするかどうかに関係なく結果と照合して採点される。精度トラッカーが公開されているのは、まさにこのためだ。勝った時だけ記事になる予想システムは、測定ではなくマーケティング資産である。
次の試験は9月5日のUFC Fight Night: Hooker vs Parnasseだ。