Elon Musk comparte una imagen comparativa de la IA y comenta sobre su evolución

Elon Musk compartió una imagen comparativa titulada "IA entonces / IA ahora" y la evaluó con una sola palabra: "¿Preciso?". La imagen muestra que la investigación en aprendizaje automático en el pasado requería diseñar métodos fundamentales, demostrar la efectividad de los modelos y construir modelos probabilísticos. En la era de los grandes modelos, el enfoque de investigación se ha simplificado a tres pasos: aumentar la escala de los Transformers, proporcionar más datos y añadir más GPU, lo que a su vez mejora el rendimiento del modelo. Esto refleja la difícil realidad de la industria de los grandes modelos: antes se investigaban los principios y luego se diseñaban los modelos, mientras que ahora a menudo se amplía la escala antes de investigar el origen de las capacidades.