مجموعة بيانات مفتوحة ومنهجية تربط بين درجات تقييم نماذج اللغة، وحدود نافذة السياق، وأسعار المزودين.
احصل على مجموعات بيانات JSON منظمة تقارن بين مقاييس الأداء، وتكاليف المزودين، وقدرات النماذج.
يوفر هذا المستودع مجموعة بيانات JSON منظمة لتقييم نماذج اللغة الكبيرة. يمكن لمستراتيجي المحتوى والمسوقين فحص نوافذ سياق النماذج، ودرجات الأداء، وأسعار API لاختيار نماذج ذات كفاءة من حيث التكلفة. لاحظ أن هذا المشروع مهمل رسمياً ولم يعد يتلقى تحديثات نشطة.
يجمع نتائج تقييمات الأداء (مثل MMLU، وGPQA، وMATH)، وعدد المعاملات، وحدود السياق، وأسعار البائعين داخل ملفات JSON موثقة المخطط. تنظم مجموعة بيانات السجلات عبر مجلرات مخصصة للنماذج، والمزودين، والتقييمات. يمكنك فحص هذه الملفات مباشرة بناءً على أدوات مقارنة مخصصة أو تحليل كفاءة النماذج.
إنه مناسب لمنشئي المحتوى التقني، ومهندسي الأوامر (Prompts)، وأخصائيي عمليات التسويق الذين يحتاجون إلى بيانات تاريخية خام لمقارنة أداء النموذج مقابل تكاليف API. وهو غير مناسب للمستخدمين غير التقنيين الذين يبحثون عن منصة SaaS جاهزة أو الفرق التي تتطلب خلاصات تقييم حية ومحدثة تلقائياً.
تُخزن بيانات النماذج الوصفية، ونتائج التقييمات، وتفاصيل الأسعار في مجلدات JSON نظيفة ومتحقق من مخططها.
يربط نماذج اللغات المحددة بأسعار المزودين، ومعلمات نافذة السياق، وتكوينات الأجهزة.
يسجل درجات النماذج عبر تقييمات الصناعة الراسخة بما في ذلك MMLU، وGPQA، وHumanEval، وMATH.
تشجع مخططات إدخال البيانات على روابط استشهاد قابلة للتحقق لجميع مقاييس الأداء المُقدمة.
محتوى المستودع مجاني للتنزيل والفحص. التكلفة الوحيدة المترتبة هي الوقت وبنية الاستضافة التحتية المطلوبة لتشغيل نصوص التحليل الخاصة بك أو عارضات الويب.
877 وظيفة مفتوحة عن بعد في تدريب الذكاء الاصطناعي، آخر تحديث ١٦ نوفمبر ٢٠٢٦؛ أجر معظمها $20–$175 في الساعة. منها 2 وظائف تطلب متحدثين بالعربية. يعرضها ذكائي مجانًا، والتقديم يتم على منصة جهة التوظيف.
لا، المستودع مهمل رسمياً. يتم توجيه تصحيحات البيانات الآن إلى قسم مجتمعات llm-stats.
يمكنك مقارنة أحجام نافذة السياق والأسعار مقابل درجات التقييم لاختيار نموذج LLM المناسب لتوليد النصوص الطويلة.
شاهد Zekai أولاً في جوجل