Como escolher um site de previsões de futebol
Todo site desta categoria diz que é preciso, então a afirmação em si não informa nada. O que separa um modelo que vale a leitura de uma página de marketing é se as afirmações dele podem ser conferidas. Seis perguntas resolvem isso, e nenhuma exige formação em estatística. As mesmas perguntas servem para escolher entre os melhores sites de estatísticas de futebol.
1. Existe um histórico avaliado, e ele é completo?
Comece por saber se o site publica o resultado de cada previsão que fez, inclusive as que falharam. O quanto ele diz acertar vem depois. Um histórico com só as seleções que o site decidiu manter é um portfólio, não um histórico.
O que procurar: uma página com previsões passadas, uma a uma, com os seus resultados, acessível sem conta e cobrindo um período contínuo, sem seleção feita a dedo. Do que desconfiar: uma porcentagem de destaque sem lista nenhuma por trás, resultados que só aparecem em capturas de tela ou depoimentos, ou um histórico que começa, por coincidência, há pouco tempo.
A maioria dos sites falha nesta verificação, e ela é barata de passar: publicar um histórico completo não custa nada do ponto de vista técnico. Um site que não fez isso, em geral, decidiu não fazer.
2. Qual é o tamanho da amostra e em que datas?
Uma porcentagem sem denominador não é uma estatística. Quarenta previsões podem dar quase qualquer taxa de acerto só por acaso, e um número tirado de um mês bom fala daquele mês, não do modelo.
Todo número de precisão publicado deveria dizer quantas previsões avaliadas cobre e em que período. Se o site reporta por mercado, cada mercado precisa da sua própria contagem, porque um modelo pode ir bem num mercado e mal em outro, e é no número misturado que essa diferença se esconde.
Mercados de dois resultados, como ambas equipes marcam, ficam naturalmente acima dos de três resultados, como o resultado da partida. Um site que cita um número só para todos publica, querendo ou não, um valor moldado pelos mercados que ele mais cobre.
3. A calibração é divulgada?
Calibração é saber se as probabilidades declaradas batem com a realidade: de tudo o que um modelo apontou com 70%, perto de 70% deve acontecer. É ela que torna uma probabilidade útil em vez de decorativa, e é a única coisa que um site não consegue forjar escolhendo bons exemplos.
Para divulgá-la basta uma tabela: previsões agrupadas pela probabilidade declarada, o que cada grupo afirmou ao lado do que de fato aconteceu, com o tamanho de amostra de cada grupo. Um site que mostra isso está entregando a você as ferramentas para auditá-lo. Um site que fala de precisão mas nunca de calibração talvez nunca tenha conferido se as suas porcentagens significam alguma coisa.
É o sinal isolado mais forte que existe, porque é fácil de verificar e raro. Mesmo que um site não publicasse mais nada de útil, uma tabela de calibração diria mais do que uma página inicial cheia de números.
4. O método é descrito em termos verificáveis?
"IA avançada" e "algoritmo proprietário" não descrevem nada. Um site que construiu algo consegue dizer que tipo de modelo usa, que dados entram, com que frequência retreina e como chega às probabilidades, e nada disso entrega algo que um concorrente possa copiar.
Uma descrição de verdade nomeia famílias de modelos em vez de usar adjetivos, dá uma contagem específica de variáveis de entrada em vez de "milhões de pontos de dados" e explica como a saída bruta do modelo vira uma porcentagem declarada. Esse último passo é o mais pulado, e é nele que se decide se um número significa alguma coisa.
Ser vago nem sempre é desonestidade. Alguns sites são rasos mesmo e não têm o que descrever. De um jeito ou de outro, isso diz o que você está lendo.
5. Como o site ganha dinheiro?
Um site de previsões que recebe para mandar visitantes a um determinado operador de terceiros tem interesse em quais previsões mostra a você e para onde elas apontam. Isso não acusa nenhum site em particular. É um incentivo comum, que existe mesmo que ninguém aja por causa dele, e saber que ele está ali muda o jeito como você lê o resultado.
Dá para responder em um minuto. Os links de saída são links de afiliado ou de indicação com rastreamento? O site cita parceiros comerciais? Vive de assinaturas, publicidade, comissões de indicação ou de uma mistura? Um site que declara com clareza de onde vem a receita tirou de você um motivo de dúvida.
Ser financiado por assinaturas não é automaticamente melhor, porque cria a sua própria pressão para impressionar. Mas pelo menos essa pressão aponta para a qualidade das previsões, e não para a direção delas.
6. O que ele diz sobre errar?
O futebol é incerto de um jeito que limita o quanto qualquer coisa pode saber. Um cartão vermelho aos nove minutos não é um sinal que o modelo deixou passar; é ruído que o esporte produz. Qualquer método construído sobre o jogo herda esse teto.
Por isso o jeito como um site fala dos próprios limites diz muito. Ele aponta os mercados em que vai pior? Mostra o tamanho da amostra, para que um número fraco não passe por sólido? Explica que uma previsão de 75% deve falhar mais ou menos uma vez em quatro, em vez de tratar isso como anomalia?
O contrário é o sinal de alerta mais claro da categoria. Uma linguagem que promete resultados ou certeza descreve algo que o esporte não tem, e um site disposto a dizer isso sobre o futebol mostra com que cuidado diz todo o resto.
Como o ScorePredicts se sai nas seis
Um critério que valesse para todos menos para nós mesmos não valeria nada, então aqui vai o nosso. Toda previsão é avaliada contra o resultado final e nunca é alterada depois, e o histórico é público, sem exigir conta: números agregados na página de precisão e previsões avaliadas, uma a uma, em todas as páginas de liga e de time. A precisão de destaque é reportada separadamente para cada tipo de previsão, cada uma com a sua contagem de amostra, e a mistura de mercados por trás dessas previsões é publicada ao lado, para que o número possa ser desmontado e conferido.
A calibração é publicada para o mercado de resultado da partida numa tabela faixa a faixa, com tamanho de amostra e intervalo de 95%, ao lado de uma comparação com uma referência ingênua de vitória do mandante nesse mercado. Quando os dados não sustentam uma afirmação, a página diz isso: a calibração de outros mercados ainda não é publicada, e a de ambas equipes marcam fica retida de propósito, porque as previsões estão concentradas demais para serem reportadas com honestidade. Toda taxa de acerto aparece com o número de previsões avaliadas por trás dela, para que uma amostra pequena seja vista pelo que é. Uma faixa de calibração precisa de pelo menos 50 jogos para ser exibida, e jogos que nunca foram concluídos ficam de fora, com a contagem à vista. Os mesmos números podem ser baixados em JSON sob a licença CC BY 4.0.
O método é descrito parte por parte: quantos modelos, como são agrupados por competição, quantas variáveis de entrada e que método de calibração transforma a saída do modelo numa porcentagem declarada. A receita vem só de assinaturas: sem publicidade, sem links de afiliado ou de indicação, sem parcerias comerciais com operadores de terceiros, sem comissão de ninguém e sem links que mandem visitantes a qualquer operador de terceiros. E nada aqui é apresentado como certo, porque uma probabilidade não é uma promessa, e um site que dissesse o contrário seria reprovado no seu próprio sexto teste.