MMLU
Des questions à choix multiples sur 57 matières, du programme de lycée au niveau professionnel.
Source
Ce qu’il peut avoir sous les yeux en une seule fois, question et réponse comprises.
Motif du retrait : Les noms d'API deepseek-chat et deepseek-reasoner ont été supprimés le 24 juillet 2026, au profit de deepseek-v4-flash et deepseek-v4-pro. Les poids restent publiés sous licence MIT.
1 tests relevés pour ce modèle, regroupés par ce qu'ils mesurent. Chaque chiffre est annoncé par le laboratoire, avec sa source et ses conditions ; une jauge n'est dessinée que quand l'échelle du test a un maximum connu.
Des questions à réponse unique, du niveau lycée au niveau doctorat, où seule la justesse compte.
Des questions à choix multiples sur 57 matières, du programme de lycée au niveau professionnel.
Sourcedeepseek-chat
Le nom exact à écrire dans le code pour appeler ce modèle.