Un jeu de données ouvert et structuré répertoriant les scores de référence des modèles de langage, les limites de la fenêtre de contexte et les tarifs des fournisseurs.
Accédez à des jeux de données JSON structurés comparant les métriques de performance, les coûts des fournisseurs et les capacités des modèles.
Ce dépôt fournit un jeu de données JSON structuré pour évaluer les grands modèles de langage. Les stratèges de contenu et les spécialistes du marketing peuvent examiner les fenêtres de contexte des modèles, les scores de performance et les tarifs de l'API pour sélectionner des modèles rentables. Notez que ce projet est officiellement obsolète et ne reçoit plus de mises à jour actives.
Il regroupe les résultats de benchmarks de performance (tels que MMLU, GPQA et MATH), le nombre de paramètres, les limites de contexte et les tarifs des fournisseurs dans des fichiers JSON validés par un schéma. Le jeu de données organise les enregistrements dans des répertoires dédiés aux modèles, aux fournisseurs et aux benchmarks. Vous pouvez inspecter directement ces fichiers pour créer des outils de comparaison personnalisés ou analyser l'efficacité des modèles.
Il convient aux créateurs de contenu technique, aux ingénieurs de prompt et aux spécialistes des opérations marketing qui ont besoin de données historiques brutes pour comparer les performances des modèles aux coûts de l'API. Il ne convient pas aux utilisateurs non techniques recherchant une plateforme SaaS clé en main ou aux équipes nécessitant des flux de benchmarks en direct et à mise à jour automatique.
Les métadonnées des modèles, les résultats des benchmarks et les détails tarifaires sont stockés dans des répertoires JSON propres et validés par un schéma.
Relie des modèles de langage spécifiques aux tarifs des fournisseurs, aux paramètres de la fenêtre de contexte et aux configurations matérielles.
Enregistre les scores des modèles sur des benchmarks industriels reconnus, notamment MMLU, GPQA, HumanEval et MATH.
Les schémas de saisie des données encouragent des liens de citation vérifiables pour toutes les métriques de performance soumises.
Le contenu du dépôt est téléchargeable et consultable gratuitement. Le seul coût impliqué est le temps et l'infrastructure d'hébergement nécessaires pour exécuter vos propres scripts d'analyse personnalisés ou visionneurs Web.
879 missions ouvertes à distance en entraînement d’IA, mises à jour le 15 novembre 2026 ; la plupart paient $20–$175 de l’heure. 8 d’entre elles demandent des francophones. Zekai les liste gratuitement ; la candidature se fait sur la plateforme de l’employeur.
Non, le dépôt est officiellement obsolète. Les corrections de données sont désormais orientées vers la section communautaire de llm-stats.
Vous pouvez comparer les tailles de fenêtres de contexte et les tarifs aux scores de référence pour choisir le LLM adapté à la génération de textes longs.
Voir Zekai en premier dans Google