Tao Zhexuan apoia!A Olimpíada de Matemática da IA está aqui, com um prêmio de 5 milhões de dólares americanos, à procura de um modelo grande que possa ganhar a medalha de ouro da IMO

Fonte do artigo: qubits

Fonte da imagem: Gerada por Unbounded AI

A Olimpíada Internacional de Matemática da IMO, especialmente criada para IA, está aqui -

São 10 milhões de dólares!

A competição afirma ser “em nome do novo Teste de Turing”, como comparar?

PK frente a frente com os gênios da matemática mais inteligentes da humanidade e ganhar a medalha de ouro do mesmo padrão.

Não subestime este evento, até mesmo o mestre de matemática Tao Zhexuan está aqui, e recomenda-o no site oficial:

Esta competição fornece uma referência para identificar as estratégias de resolução de problemas da IA, que é exatamente o que precisamos agora.

Assim que a notícia saiu, os internautas ficaram bastante animados.

Como disse o presidente da OMI: Que modelo pode competir com a onda mais brilhante de jovens do mundo?

O chamado “sob a recompensa, deve haver um homem corajoso”, a IA com seu próprio caminho é realmente emocionante.

AI participa do IMO com um máximo de US$ 5 milhões

A abreviatura deste concurso é AI-MO.

Sua intenção original é promover a capacidade de raciocínio matemático de grandes modelos de linguagem e incentivar o desenvolvimento de novos modelos de IA que possam corresponder ao mais alto nível de matemática humana (competição IMO).

Porquê escolher a OMI como referência?

Os tópicos do IMO são geralmente divididos em quatro categorias: álgebra, geometria, teoria dos números e combinatória, que não exigem conhecimentos matemáticos avançados, mas exigem que os participantes tenham a maneira certa de pensar e literacia matemática.

As estatísticas mostram que seus medalhistas de ouro têm 50 vezes mais chances de ganhar a Medalha Fields do que a média dos doutorados de Cambridge.

Além disso, metade dos vencedores da Medalha Fields competiram em competições da OMI.

Com base nesta competição, esta competição AI-MO dedicada à IA será aberta no início de 2024.

O comitê organizador exige que os modelos de IA participantes processem as perguntas no mesmo formato dos concorrentes humanos e gerem respostas finais legíveis por humanos, que serão pontuadas por um painel de especialistas usando os padrões IMO.

Os resultados serão anunciados no 65º Congresso da IMO em Bath, Reino Unido, em julho do próximo ano.

No final, a IA que atingir o nível ouro receberá um grande prêmio de US$ 5 milhões.

Os modelos de IA restantes que “alcançaram marcos importantes” compartilharão os prêmios de progresso restantes, com um montante total de US$ 5 milhões.

Vale ressaltar que, para serem elegíveis ao prêmio, os participantes devem cumprir o acordo de compartilhamento público AI-MO, ou seja, o modelo vencedor deve ser de código aberto.

Quanto às regras específicas, a comissão organizadora ainda está a deliberar, e o responsável está neste momento a recrutar membros do conselho consultivo (especialmente matemáticos, especialistas em IA e machine learning) e o diretor para liderar o concurso, todos pagos e podem ser completamente remotos, não se sabendo quais figurões se juntarão.

No entanto, deve notar-se que o AI-MO não é um concurso oficial iniciado pela OMI.

O verdadeiro patrocinador é a XTX Markets, uma instituição financeira não bancária com sede em Londres que se dedica à negociação quantitativa de aprendizado de máquina.

Se nada mais, XTX Markets se concentra em um herói.

Também criou uma bolsa de estudos com a Universidade de Oxford no ano passado para incentivar estudantes do sexo feminino a estudar matemática.

Quanto à competição em si, alguns internautas também iniciaram uma onda de especulações: qual modelo de IA é o mais promissor?

O GPT-4 com o plug-in Wolfram foi o primeiro a ser lançado, mas também foi o primeiro a ser derramado água fria.

No entanto, a OpenAI por trás ainda é favorecida (embora as grandes empresas de tecnologia não sejam o público-alvo da concorrência).

Alguns internautas pessimistas afirmaram diretamente:

É legal, mas ninguém deve ser capaz de fazê-lo em cinco anos.

Ao mesmo tempo, argumenta-se também que:

Não é difícil treinar tal modelo, mas é difícil obter e processar dados, afinal, esses problemas envolvem não só texto, mas também muitas imagens e símbolos com significados complexos.

Tudo será revelado em 2024.

Vale a pena mencionar que a AI-MO não é a primeira IA a desafiar a IMO.

Em 2019, vários investigadores de universidades e instituições como a OpenAI, Microsoft, Universidade de Stanford e Google já tinham lançado um concurso chamado IMO Grand Challenge.

Ninguém teve sucesso no desafio antes

O IMO Grand Challenge também é uma competição criada para encontrar uma IA que possa ganhar a medalha de ouro da IMO.

Vamos dar uma olhada nas 5 regras para IA neste jogo de matemática:

Sobre o formato. A fim de garantir o rigor e a verificabilidade do processo de prova, tanto o problema quanto a prova precisam ser feitos de forma formal (verificável por máquina).

Em outras palavras, o problema IMO será transformado em uma expressão baseada na linguagem de programação Lean e entrada para a IA através do provador do teorema Lean, e a IA também precisará escrever a prova na linguagem de programação Lean.

Sobre Pontuação. Cada pergunta de prova da IA será julgada como verdadeira ou falsa dentro de 10 minutos, pois este também é o tempo para o árbitro do IMO marcar. Ao contrário dos humanos, não existe uma “pontuação parcial” para a IA.

Sobre Recursos. Como os seres humanos, a IA precisa resolver 3 problemas em 4,5 horas por dia (um total de 2 dias), e não há limite para os recursos de computação.

Sobre a reprodutibilidade. A IA deve ser de código aberto, e o modelo deve estar disponível publicamente e ser reproduzível até o final do primeiro dia da IMO. Requer que a IA não possa ser conectada à Internet.

Sobre o Desafio em si. O maior desafio é fazer com que a IA ganhe ouro 🏅 como os humanos.

A competição foi iniciada por 7 pesquisadores e matemáticos de IA:

Daniel Selsam da OpenAI, Leonardo de Moura da Microsoft, Kevin Buzzard do Imperial College, Reid Barton da Universidade de Pittsburgh, Percy Liang da Universidade de Stanford, Sarah Loos do Google AI e Freek Wiedijk da Universidade Radboud.

Agora, quatro anos depois, recebeu a atenção de alguns concorrentes.

No entanto, embora muitos pesquisadores de IA e matemática tenham tentado desafiar este campo, ou um pequeno objetivo no campo, eles ainda estão longe do objetivo final de vencer o campeonato IMO.

Houve até uma sugestão de que deveria haver um “modo simples” para este jogo:

Por exemplo, o pesquisador Xi Wang tentou usar vários solucionadores SMT existentes para fazer perguntas reais da IMO, mas os resultados são medíocres.

Naquela época, a IA existente foi capaz de provar alguns problemas menos difíceis da IMO, como o teorema de Napoleão, que afirma que se os lados de qualquer triângulo são usados como lados para fazer um triângulo regular para fora, sua linha central deve formar um triângulo regular.

No entanto, quando se tratava de provar alguns dos outros problemas reais, como o problema de geometria da IMO 2019, os solucionadores existentes não conseguiam fazê-lo, ou era meia hora a mais.

Por exemplo, os pesquisadores da OpenAI (que ainda estavam na Microsoft na época) Dan Selsam e Jesse Michael Han também estudaram por um tempo sobre “IA para resolver problemas de geometria IMO” e resumiram um blog.

Este blog explica como eles criaram um solucionador de geometria e as etapas para projetá-lo, incluindo:

Representações geométricas, resolução de restrições, seleção de algoritmos, arquitetura solver, desafios e soluções.

As representações geométricas, por exemplo, representam problemas geométricos em um formato que os computadores podem entender e processar, e vice-versa, incluindo o uso de solucionadores geométricos para converter automaticamente linguagens de programação em gráficos fáceis de ler para humanos:

Além disso, também introduz como escolher o algoritmo de solução apropriado de acordo com diferentes tipos de problemas de geometria IMO, etc.

Mas, mesmo assim, o post do blog não dá uma solução específica, apenas afirmando no final que “o solucionador tem o potencial de alcançar o objetivo de ganhar ouro IMO”.

Além disso, os problemas de geometria visados pelos desafiantes acima ocupam apenas um quarto dos tipos de problemas IMO (juntamente com álgebra, combinatória e teoria dos números)…

Embora tenha sido lançado há 4 anos, ainda não existe uma verdadeira IA “all-rounder”, mas como o criador desta ideia, o IMO Grand Challenge ainda faz muitas ondas na indústria.

Alex Gerko admite que o IMO Grand Challenge também foi a oportunidade para ele realizar AI-MO:

É hora de dar ao “AI Challenge IMO” um pouco de emoção no geral!

Claro, o prêmio em dinheiro deste AI-MO realmente atraiu a atenção dos organizadores do IMO Grand Challenge e muitos desafiantes:

Eu me pergunto se realmente haverá uma IA na indústria que pode resolver problemas difíceis de matemática e superar com sucesso muitos humanos para ganhar a medalha de ouro IMO impulsionado pelo dinheiro 💰.

A julgar pela força atual, qual empresa de IA você acha que tem mais probabilidade de assumir a liderança?

Links de referência:
[1]
[2]
[3]