Desmistificando a inteligência artificial: resultados reais importam

Tempo de leitura: 2 minutos
Por Bia Chacu
- em
Balançando a balança com símbolo de IA e conquistas.

São PauloCientistas do Laboratório de Física de Plasma de Princeton e da Universidade de Princeton, ambos do Departamento de Energia dos EUA, investigaram a eficácia do aprendizado de máquina na resolução de certos problemas matemáticos baseados em fluidos, conhecidos como equações diferenciais parciais. Eles concluíram que, embora o aprendizado de máquina seja frequentemente elogiado, seu desempenho é por vezes superestimado. Métodos tradicionais ainda são superiores em diversos casos. Os pesquisadores destacaram erros recorrentes no aprendizado de máquina e argumentaram que precisam existir maneiras claras de medir seu sucesso.

Observações importantes do estudo incluem:

  • Comparações tendenciosas frequentemente beneficiam métodos de aprendizado de máquina em detrimento dos métodos tradicionais.
  • Resultados negativos costumam ser pouco relatados, criando uma visão excessivamente otimista.
  • O aprendizado de máquina é às vezes comparado a padrões numéricos mais fracos, distorcendo a percepção dos benefícios de desempenho.

Expectativas sobre IA versus Realidade

As expectativas em relação à IA são frequentemente muito altas, mas nem sempre correspondem à realidade. Enquanto a aprendizagem de máquina pode ser mais rápida em alguns casos, métodos numéricos tradicionais geralmente são mais precisos e oferecem um melhor equilíbrio entre velocidade e precisão. É crucial compreender essa troca ao avaliar a eficácia de um método. No entanto, muitos artigos acadêmicos não deixam essas trocas claras. Eles costumam comparar técnicas de aprendizagem de máquina com métodos numéricos menos eficientes, o que tende a ocultar o potencial de abordagens mais avançadas.

Publicar apenas resultados positivos pode levar a relatos tendenciosos. Muitas revistas científicas frequentemente desconsideram resultados negativos devido a esses vieses. Os pesquisadores são impulsionados a divulgar descobertas impactantes, o que faz com que se concentrem mais em aperfeiçoar seus modelos do que em compará-los minuciosamente com os melhores métodos disponíveis.

Para aprimorar a pesquisa científica com aprendizado de máquina, é crucial comparar métodos de forma justa. Isso implica testar métodos de ML contra padrões numéricos rigorosos e compartilhar os resultados de forma honesta. As agências de fomento e eventos acadêmicos devem estabelecer diretrizes que incentivem a transparência. Isso inclui exigir explicações claras sobre a escolha de referências básicas e os motivos dessas escolhas.

Este estudo destaca a necessidade de métodos científicos mais rigorosos e cuidadosos para realmente melhorar o uso da inteligência artificial na ciência e engenharia. Ao promover avaliações mais detalhadas e minuciosas, podemos evitar alegações exageradas e alcançar um progresso real.

O estudo é publicado aqui:

http://dx.doi.org/10.1038/s42256-024-00897-5

e sua citação oficial - incluindo autores e revista - é

McGreivy, N., Hakim, A. Weak baselines and reporting biases lead to overoptimism in machine learning for fluid-related partial differential equations. Nat Mach Intell, 2024 DOI: 10.1038/s42256-024-00897-5
Ciência: Últimas notícias
Leia mais:

Compartilhar este artigo

Comentários (0)

Publicar um comentário