CEO da OpenAI afirma que era dos modelos gigantes de IA está chegando ao fim
O CEO da OpenAI, Sam Altman, explicou em evento do MIT que não acredita que os “modelos gigantes” de Inteligência Artificial possam contribuir para mais avanços na área. De acordo com Altman, a relutância pode estar relacionada com o alto custo e diminuição dos retornos diante da escalabilidade do processo.
A retirada desses modelos pode ser impulsionada pelo preço exorbitante e insustentável de treinamento e execução dos processos gráficos necessários para modelos de idiomas grandes (LLMs). A título de exemplo, o ChatGPT precisou de mais de 10.000 GPUs para ser treinado e exige ainda mais recursos para continuar operando.
A dominação de cerca de 88% do mercado de GPUs pela Nvidia com seus dispositivos projetados especificamente para AI e computação de alto desempenho pode custar até US$ 30.603 por unidade, tornando-se um entrave para a escalabilidade dos processos. Ronen Dar, CTO do Run AI, afirmou que “treinar um LLM de última geração pode custar centenas de milhões de dólares”.
Para avançar na área de IA, especialistas afirmam que agora será necessário melhorar os modelos existentes ao invés de pôr energia em construir cada vez mais modelos. O foco precisa ser em melhorar as arquiteturas do modelo, aprimorar a eficiência de dados e avançar nas técnicas algorítmicas, além da escala conhecida. A era da ilimitada quantidade de dados, computação e tamanho de modelos que remodelou o setor na última década está finalmente chegando ao fim.
O evento Transformação 2023 reunirá líderes em São Francisco nos dias 11 e 12 de julho para compartilhar suas experiências no âmbito da IA. Executivos irão partilhar como integraram e otimizaram os investimentos em Inteligência Artificial no mercado, evitando obstáculos comuns.
Embora dúvidas possam surgir sobre a viabilidade da construção de modelos “gigantes” ou quais são os melhores métodos para avançar na área de IA sem depender de GPUs caros, parece consenso que o foco precisa estar em melhorar os modelos existentes através da melhoria das tecnologias algorítmicas e do aumento da eficiência dos dados.
Evento: | Transformação 2023 em San Francisco |
---|---|
Data: | 11-12 de julho |
Tema: | Integrando e otimizando investimentos de Inteligência Artificial (IA) para o sucesso |
CEO da OpenAI: | Sam Altman |
Problema: | Modelos gigantes de IA estão próximos do fim |
Custo: | Treinar um LLM de última geração pode custar centenas de milhões de dólares |
Foco: | Melhorar os modelos existentes através da melhoria das tecnologias algorítmicas e do aumento da eficiência dos dados |
Com informações do site VentureBeat.