Le 4 mars 2024, Anthropic a publié Claude 3—et fait une affirmation audacieuse : Claude 3 Opus bat GPT-4 sur les principaux benchmarks.

C'était énorme. Depuis la sortie de GPT-4 un an plus tôt, rien ne l'avait constamment battu. Claude 3 Opus l'a fait.

Les Trois Modèles

Anthropic a publié une famille :

Claude 3 Haiku : Rapide, abordable, pour les tâches simples Claude 3 Sonnet : Performance et vitesse équilibrées Claude 3 Opus : Le plus capable, bat GPT-4

L'approche en tiers permet aux utilisateurs de choisir selon leurs besoins et budget.

Les Résultats des Benchmarks

Claude 3 Opus a surpassé GPT-4 sur :

• MMLU (connaissances générales)
• Raisonnement niveau master/doctorat
• Résolution de problèmes mathématiques
• Défis de codage
• Tâches multilingues

Pour la première fois, OpenAI n'était plus le leader clair.

Nouvelles Capacités

Vision : Les trois modèles pouvaient traiter des images Contexte 200K : Maintenu depuis Claude 2.1 Refus réduits : Moins susceptible de refuser des requêtes valides Meilleur suivi d'instructions : Faisait plus précisément ce que vous demandiez

Où en Sont-Ils Maintenant ?

Claude 3 a prouvé qu'Anthropic était un concurrent légitime de GPT-4. La concurrence a poussé les deux entreprises à s'améliorer plus rapidement.

Le 4 mars 2024 a été le jour où la domination du modèle d'OpenAI s'est terminée—la course à l'IA est devenue vraiment compétitive.