ByteDance entrena un modelo de inteligencia artificial masivo en un intento por rivalizar con Anthropic
La carrera por modelos de lenguaje masivos intensifica competencia global en inteligencia artificial
ByteDance está desarrollando un modelo de inteligencia artificial que podría rivalizar con el avanzado sistema Mythos de Anthropic, en un esfuerzo por cerrar la brecha con los principales laboratorios de Estados Unidos. Este gigante tecnológico chino se encuentra en las primeras etapas de entrenamiento de un modelo que podría alcanzar…
ByteDance está desarrollando un modelo de inteligencia artificial que podría rivalizar con el avanzado sistema Mythos de Anthropic, en un esfuerzo por cerrar la brecha con los principales laboratorios de Estados Unidos. Este gigante tecnológico chino se encuentra en las primeras etapas de entrenamiento de un modelo que podría alcanzar hasta 10 billones de parámetros, lo que lo convierte en tres veces más grande que el Kimi K3, el modelo chino más grande lanzado hasta ahora.
El proceso de pre-entrenamiento del modelo de ByteDance, que típicamente dura entre tres y seis meses, es fundamental antes de que se realicen ajustes y se prepare para su lanzamiento, siempre que los resultados sean satisfactorios. El tamaño final del modelo se determinará en una fase posterior del proceso.
Aunque Anthropic no divulga el tamaño de sus modelos, las estimaciones del sector sugieren que su modelo más avanzado, Mythos 5, cuenta con alrededor de 8 billones de parámetros, mientras que Fable 5 tiene aproximadamente 5 billones. Es importante destacar que, aunque el conteo de parámetros establece límites fundamentales en cuanto a la capacidad de almacenamiento de información, la efectividad real de un modelo también depende de factores como la calidad de los datos y las técnicas de entrenamiento empleadas.
Los esfuerzos de ByteDance para crear uno de los modelos de inteligencia artificial más grandes del mundo reflejan la ambición de los laboratorios chinos por no solo alcanzar, sino también superar a sus contrapartes estadounidenses en el ámbito de la inteligencia artificial más avanzada.
Recientemente, modelos desarrollados por Moonshot y Alibaba han demostrado un rendimiento sólido en diversas pruebas, posicionándose solo detrás de Fable 5 de Anthropic en ciertas métricas. Cabe mencionar que el modelo Mythos 5 de Anthropic está disponible únicamente para organizaciones autorizadas, tras una prohibición temporal en junio debido a preocupaciones de seguridad.
Fuentes de la industria indican que varios laboratorios chinos están en proceso de entrenar modelos del tamaño de Fable 5, siendo ByteDance el más ambicioso en su búsqueda por desarrollar el modelo más grande y avanzado hasta la fecha. Este desarrollo tiene implicaciones significativas para el mercado de inteligencia artificial en México y LATAM, donde la adopción de tecnologías avanzadas puede transformar diversas industrias y ofrecer nuevas oportunidades de innovación.
