El 4 de marzo de 2024, Anthropic lanzó Claude 3—e hizo una afirmación audaz: Claude 3 Opus superó a GPT-4 en benchmarks principales.

Esto fue enorme. Desde el lanzamiento de GPT-4 un año antes, nada lo había superado consistentemente. Claude 3 Opus lo hizo.

Los tres modelos

Anthropic lanzó una familia:

Claude 3 Haiku: Rápido, asequible, para tareas simples Claude 3 Sonnet: Rendimiento y velocidad balanceados Claude 3 Opus: Más capaz, supera a GPT-4

El enfoque escalonado permitía elegir según necesidades y presupuesto.

Los resultados de benchmarks

Claude 3 Opus superó a GPT-4 en:

• MMLU (conocimiento general)
• Razonamiento de nivel graduado
• Resolución de problemas matemáticos
• Desafíos de código
• Tareas multilingües

Por primera vez, OpenAI no era el líder claro.

Nuevas capacidades

Visión: Los tres modelos podían procesar imágenes Contexto de 200K: Mantenido desde Claude 2.1 Menos rechazos: Menos probable rechazar solicitudes válidas Mejor seguimiento de instrucciones: Hacía más precisamente lo que pedías

¿Dónde están ahora?

Claude 3 demostró que Anthropic era un competidor legítimo de GPT-4. La competencia impulsó a ambas empresas a mejorar más rápido.

El 4 de marzo de 2024 fue el día en que terminó el dominio de modelos de OpenAI—la carrera de IA se volvió verdaderamente competitiva.