Previsões do UFC Shanghai avaliadas: nosso modelo acertou 8 de 13
Dissemos que nosso modelo ia contra os favoritos do UFC Shanghai. Avaliado diante dos resultados, ele acertou 8-for-13, empatado com o mercado, e errou feio em Umar Nurmagomedov.
Dois dias antes do UFC Shanghai publiquei aqui um texto com a manchete "nosso modelo vai contra os favoritos". Ele apontava duas lutas em que nosso modelo de IA escolheu um vencedor diferente do mercado de apostas, e observava que em oito das treze lutas o modelo avaliava o favorito abaixo do que o painel de odds avaliava.
O card acabou. Aqui está o balanço disso, incluindo a parte em que o modelo estava feia e caramente errado sobre a luta principal.
O número principal
Entre as treze lutas do card em que nosso modelo tinha uma previsão com os corners correspondentes, ele escolheu oito vencedores em treze, ou 61.5 por cento. O favorito de fechamento nas apostas também fez 8-for-13. Na taxa bruta de acerto, o modelo e o mercado terminaram a noite empatados.
Essa é a versão sem graça. A versão interessante é onde eles realmente discordaram, o que aconteceu em exatamente duas lutas das treze.
| Luta | Nosso modelo | Mercado (fechamento) | Vencedor | Modelo |
|---|---|---|---|---|
| Umar Nurmagomedov vs Song Yadong | Umar 74.2% | Umar -621 | Song Yadong, KO/TKO R2 | Errado |
| Yan Xiaonan vs Denise Gomes | Gomes 62.8% | Yan -147 | Denise Gomes, KO/TKO R1 | Certo |
| Aoriqileng vs Kai Asakura | Asakura 74.0% | Asakura -463 | Kai Asakura, KO/TKO R2 | Certo |
| Sumudaerji vs Alex Perez | Sumudaerji 60.2% | Sumudaerji -313 | Sumudaerji, decisão | Certo |
| Ce Liu vs Levi Rodrigues Jr. | Rodrigues 51.1% | Ce Liu -180 | Ce Liu, KO/TKO R1 | Errado |
| Bilal Hasan vs Nilson Rojas | Hasan 63.4% | Hasan -837 | Bilal Hasan, KO/TKO R2 | Certo |
| Namsrai Batbayar vs André Lima | Lima 72.3% | Lima -333 | André Lima, finalização R3 | Certo |
| Rei Tsuruya vs Kevin Borjas | Tsuruya 78.2% | Tsuruya -796 | Rei Tsuruya, finalização R1 | Certo |
| Jack Jenkins vs Sean Woodson | Woodson 58.2% | Woodson -155 | Sean Woodson, decisão dividida | Certo |
| Xiao Long vs Francesco Nuzzi | Xiao Long 64.8% | Xiao Long -176 | Francesco Nuzzi, KO/TKO R1 | Errado |
| Lawrence Lui vs Hector Santiago | Lui 72.4% | Lui -319 | Hector Santiago, KO/TKO R2 | Errado |
| Xiong Jing Nan vs Julia Polastri | Polastri 58.6% | Polastri -227 | Julia Polastri, KO/TKO R1 | Certo |
| Ding Meng vs Cameron Nelson | Ding Meng 57.2% | Ding Meng -121 | Cameron Nelson, decisão | Errado |
As probabilidades do modelo acima são os números finais armazenados, que é o que ele estava dizendo na noite da luta, e não na quarta-feira. Ele reavalia conforme os cards mudam, e neste a linha de Ding Meng se moveu bastante nos últimos dois dias.
As duas lutas em que eles realmente discordaram
Em onze das treze lutas o modelo e as odds de fechamento apontavam para o mesmo lutador. Eles se dividiram em duas, e ficaram um a um.
O modelo venceu a maior. Ele tinha Denise Gomes em 62.8 por cento contra Yan Xiaonan enquanto as casas tinham Yan como favorita a -147. Isso é uma discordância genuína, não uma diferença de arredondamento: o mercado implicava que Yan deveria vencer cerca de 59 por cento das vezes, o modelo dizia que Gomes deveria vencer cerca de 63 por cento, e os dois números não podem estar os dois perto do certo. Gomes nocauteou a quarta colocada do peso-palha em 4:49.
O mercado venceu a outra. O modelo tinha Levi Rodrigues Jr. em 51.1 por cento, uma moeda ao ar de verdade, contra um Ce Liu que as casas precificavam a -180. Ce Liu o nocauteou no primeiro round. Em defesa dos dois, Rodrigues aceitou aquela luta em cima da hora depois da saída de Junior Tafa, que é o tipo de coisa que nem um modelo nem uma linha de apostas lidam bem.
Outra linha merece destaque mesmo não tendo sido uma discordância. Sumudaerji entrou com 60.2 por cento do modelo e -313 do mercado, e venceu por decisão unânime por um único round nos três cartões, 29-28 de Ben Cartlidge, Vito Paolillo e Clemens Werner. Um favorito a -313 não deveria precisar do último round. O modelo precificou aquela luta muito mais perto do que ela acabou sendo.
O que ele errou, e o pior de tudo
Umar Nurmagomedov em 74.2 por cento. Ele foi nocauteado no segundo round.
Não tem como suavizar isso. O modelo estava mais confiante em Umar do que uma moeda ao ar por uma margem larga, o mercado estava ainda mais confiante a -621, e os dois olhavam para um lutador que havia batido Cory Sandhagen, Mario Bautista e Deiveson Figueiredo por decisão e nunca havia sido parado antes do tempo na carreira. Tudo no perfil dizia "vence rounds, não é parado". Song Yadong o parou a 1:48.
Essa é uma limitação real e vale nomeá-la em vez de enterrá-la. Um modelo construído em boa parte sobre o que o cartel e os números por luta de um atleta fizeram no passado vai demorar a precificar a possibilidade de um durável lutador de decisão encontrar alguém que acaba com lutas. Song tem oito bônus pós-luta e sete deles vieram por acabar com a luta antes do tempo. Isso não é um fato escondido. É um fato que os números subestimaram.
Os três erros nas preliminares contam uma versão menor da mesma história: Lawrence Lui em 72.4 por cento, Xiao Long em 64.8 por cento, Ding Meng em 57.2 por cento, todos derrotados, dois deles por nocaute. Em um card em que cinco azarões venceram e dez das treze lutas completadas terminaram antes do tempo, um modelo que se apoia em forma estabelecida sempre teria uma noite difícil.
A leitura honesta
Empatado com o mercado na taxa de acerto, um a um nas duas lutas em que eles realmente discordaram, e confiantemente errados juntos naquela que todo mundo estava assistindo. Se você tivesse usado o modelo como sinal de fade em Yan Xiaonan, foi pago. Se tivesse usado na luta principal, não foi, ainda que o mercado tivesse machucado mais.
Prefiro publicar isto do que um texto sobre as oito que ele acertou. Nossas previsões vivem em toda página de evento futuro e são avaliadas diante dos resultados quer eu escreva sobre elas ou não, e o rastreador de precisão é público exatamente por isso. Um sistema de previsão que só é escrito quando vence é um ativo de marketing, não uma medição.
O próximo teste é o UFC Fight Night: Hooker vs Parnasse, em 5 de setembro.