En la carrera por el dominio de la inteligencia artificial, crece el interés por el próximo gran movimiento de Meta, y después de que el lanzamiento en julio del modelo de texto generativo Llama 2 se estableciera firmemente en el mercado, los observadores de la IA esperan con impaciencia señales de Llama 3
Si damos crédito a los rumores del sector, el gigante tecnológico podría anunciar la continuación de su éxito de código abierto a principios de 2024.
Aunque Meta no ha confirmado oficialmente estos rumores, Mark Zuckerberg arrojó recientemente algo de luz sobre el futuro del LLM (Large Language Model) de Meta al admitir que Llama 3 está en desarrollo. Sin embargo, dijo a
que, si bien la prioridad es mejorar Llama 2 para hacerlo más accesible a los consumidores, un nuevo modelo de inteligencia artificial central todavía está en desarrollo.
«Estamos constantemente entrenando diferentes modelos», dijo en una entrevista de podcast sobre la interacción entre la inteligencia artificial y el metauniverso. «Entrenamos a Llama 2 y lo pusimos a disposición como modelo de código abierto».
Y continuó: «Pero sí, también estamos trabajando en un futuro modelo base, y no hay nueva información ni noticias al respecto. No sé exactamente cuándo se concretará».
Met no ha confirmado oficialmente este rumor, pero el patrón de los ciclos de desarrollo y la importante inversión en hardware sugieren que el lanzamiento no está lejos; Llama 1 y Llama 2 se están entrenando con seis meses de diferencia, y si este ciclo continúa, OpenAI GPT-4 y Llama 2 deberían lanzarse al mercado. La nueva Llama 3, que se considera equivalente, podría lanzarse en la primera mitad de 2024.
El usuario de Reddit llamaShill hace un análisis exhaustivo de los ciclos de desarrollo de los anteriores modelos Meta.
Sostiene que es razonable suponer que Llama 1 va de julio de 2022 a enero de 2023, Llama 2 hasta julio de 2023 y Llama 3 de julio de 2023 a enero de 2024. Estas ideas están en consonancia con la declaración de Mehta sobre la búsqueda incesante de la excelencia en IA y el deseo de demostrar la próxima evolución para rivalizar con las capacidades del GPT-4
Mientras tanto, los foros tecnológicos y las redes sociales están llenos de debates sobre cómo esta nueva iteración devolverá a Meta su ventaja competitiva. La comunidad tecnológica también está determinando los plazos probables en función de la información disponible
Lo que oímos en la reunión social de MetaGenAI:
«Tenemos ordenadores para entrenar a Llama-3 y Llama-4, Llama-3 será comparable a GPT-4».
Cuando Llama-3 sea tan bueno como GPT-4, ¿lo harán de código abierto?
«Sí, lo haremos.
– jason (@agikoala) 25 de agosto de 2023
W’
Por su parte, la asociación con Dell para ofrecer Llama 2 en las instalaciones de los usuarios empresariales es un movimiento estratégico y oportuno que demuestra el compromiso de la empresa con la gestión y la seguridad de los datos personales. Este compromiso es fundamental, ya que Meta se prepara para luchar contra gigantes como OpenAI y Google.
Meta también está incorporando inteligencia artificial en muchos de sus productos, y tiene sentido que se ocupe de estar a la altura; Llama 2 potencia la inteligencia artificial de Meta y otros servicios como el chatbot de Meta, los servicios generativos de Meta y las gafas Meta AI.
En medio de toda esta especulación, Mark Zuckerberg ha hecho algunas afirmaciones intrigantes y crípticas de que Llama 3 será de código abierto. En un podcast reciente con el informático Rex Friedman, Zuckerberg dijo: «Necesitamos un proceso para hacerlo y que sea seguro».
Llama 2 tiene una arquitectura en capas con versiones que ofrecen 7, 13 y 70 mil millones de parámetros, cada una adaptada a distintos niveles de complejidad y potencia de procesamiento. Los parámetros LLM actúan como bloques neuronales que determinan la capacidad del modelo para comprender y generar lenguaje.
Esta potente inteligencia artificial ha sido entrenada en un enorme corpus de 2.000 millones de tokens, lo que confirma su capacidad para navegar y generar texto similar al humano en una amplia gama de temas y contextos
Imagen cortesía de Meta
Esto se debe en parte a los fundamentos del hardware: como informa TCN, Meta mantiene en su centro de datos uno de los dispositivos de entrenamiento de IA más potentes, el Nvidia H100.
Sin embargo, a pesar de todo el bombo y la especulación, la verdad sigue envuelta en un velo de secretismo comercial.
Las intenciones de Met de competir en el campo de la inteligencia artificial dependen en gran medida del tiempo necesario para el entrenamiento, la inversión en hardware y las cuestiones relacionadas con el software de código abierto. Por otro lado, las expectativas van en aumento, al igual que la probabilidad de un lanzamiento de Frame 3 en 2024.
