أدوات ذكاء اصطناعي مقيّمة لمهنتك
اربح مع ذكائي
🤝 أنت في مكتبة المصادر المجانية والمفتوحة — أدوات بناها المجتمع يمكنك استخدامها دون دفع. مفهوم مختلف عن دليل أدوات الذكاء الاصطناعي المُقيَّم لدينا.
الرئيسية › مجاني ومفتوح المصدر › أطباء وطب › llm-as-a-verifier
✦ مجاني ومفتوح المصدرأطباء وطب

llm-as-a-verifier

إطار عمل للتقييم الدقيق لتقييم واختيار وتتبع مخرجات الوكلاء الذكيين دون إعادة تدريب.

التحقق الدقيق من الوكلاء والتقييم خطوة بخطوة

ترتيب مخرجات الوكلاء المرشحة ومراقبة تقدم التنفيذ باستخدام نماذج تسجيل تعتمد على الاحتمالات اللوغاريتمية (logprob).

مجاني للأبد · مفتوح المصدر · MIT
✓ Light setup✓ يعمل في المتصفح✓ تعاون فوري
7.8
ZEKAI
أداة التحقق من مسار الوكيل.
مجاني ومفتوح المصدر · أطباء وطب
سهولة الإعداد6
الفائدة8
الصيانة9.5
المجتمع7.5
★ 3,322
غيت هَب
Oct 2026
آخر تحديث
MIT
الرخصة
🛠 لا تريد الاستضافة بنفسك؟ يمكننا إعداده لك →
⚡ إجابة سريعة

أداة llm-as-a-verifier هي إطار عمل بلغة Python يستخدم تسجيل توزيع الاحتمالات اللوغاريتمية لتقييم وترتيب مسارات الوكلاء الذكيين. وهي مناسبة للمطورين الذين يبنون سير عمل للوكلاء ويحتاجون إلى توسيع النطاق وقت الاختبار، واختيار المخرجات، وتتبع التقدم خطوة بخطوة دون الحاجة إلى ضبط دقيق نماذج جديدة. يمكن لباحثي الذكاء الاصطناعي الطبي استخدامها لترتيب مسارات الوكلاء السريريين على معايير قياسية مثل MedAgentBench.

يعمل على
Cross-platform
الاستضافة
Self-host
اللغات
Python
الرخصة
MIT

ما هو

تقوم الأداة بتقييم مسارات الوكلاء متعددة الخطوات باستخدام نماذج مكافأة ثنائية، وتتبع التقدم أحادي الخطوة، ودورات المحور الاحتمالي (Probabilistic Pivot Tournaments). وهي تحسب توقعات درجات دقيقة من الاحتمالات اللوغاريتمية لـ LLM عبر معايير تقييم مخصصة. يمكنك استخدام نماذج أضعف مثل DeepSeek V4.1 Flash للتحقق من المسارات التي تولدها أنظمة أكبر.

لمن هو

تتناسب هذه الأداة مع مطوري الذكاء الاصطناعي وباحثي المعلوماتية الطبية الذين يبنون أنظمة وكلاء متعددة الخطوات ويريدون التحقق التلقائي وقت الاختبار. وهي مثالية للفرق التي تشغل معايير قياسية للوكلاء مثل MedAgentBench أو SWE-Bench Verified. وهي غير مخصصة لدعم القرار السريري للمستخدم النهائي دون التكامل في تدفق عمل أكبر للمطورين.

أهم الميزات

دورة المحور الاحتمالي

ترتيب N من مسارات الوكلاء باستخدام مقارنات ثنائية مخفضة بدلاً من مصفوفات دورية كاملة.

التسجيل الدقيق للاحتمالات اللوغاريتمية

يحسب درجات التوقع عبر توزيع الاحتمالات اللوغاريتمية الكامل لرموز التقييم لاختيار المرشحين.

تتبع التقدم في الوقت الفعلي

يراقب تنفيذ خطوات الوكيل مباشرة باستخدام ProgressTracker لتحديد العمليات الفاشلة مبكراً.

تقييم المعايير المخصصة

يقبل قواميس المعايير المحددة من قبل المستخدم لتقييم مجالات مثل الاستدلال السريري أو إصلاحات التعليمات البرمجية.

كيف تبدأ

جاهز للعمل في 3 خطوات

1
قم بتثبيت الحزمة عبر pip باستخدام 'pip install llm-verifier'.
2
قم بتكوين مفاتيح API الخاص بك أو قم بتشغيل خادم vLLM محلي يعيد احتمالات رموز logprob.
3
استدعِ 'llm_verifier.select()' مع بيان المشكلة الخاص بك، ومسارات المرشحين، والمعايير.
بصراحة

حكمنا الصادق

ما يميّزه

  • ترتيب مسارات الوكلاء بكفاءة باستخدام مقارنات ثنائية O(Nk).
  • يوفر تتبعاً مباشراً خطوة بخطوة لإيقاف عمليات الوكيل الفاشلة مبكراً.
  • يعمل عبر واجهات برمجة التطبيقات للنماذج المملوكة ونطاقات vLLM المستضافة ذاتياً.
  • لا يتطلب تدريباً إضافياً أو ضبطاً دقيقاً لنماذج التحقق.

أين يقصّر

  • يتطلب الوصول إلى واجهات برمجة التطبيقات للنماذج الخارجية أو إعدادات GPU المحلية التي تعيد احتمالات رموز logprob.
  • تؤدي التقييمات المتكررة للمرشحين إلى استخدام كبير لرموز API أو عبء حوسبي.
  • يتطلب برمجة Python لدمج سير عمل التسجيل في خطوط أنابيب الوكلاء الموجودة.
التكلفة

التسعير والرخصة

أداة llm-as-a-verifier مجانية ومفتوحة المصدر تحت رخصة MIT. وتأتي التكلفة الأساسية من استخدام رموز API للنموذج أو تشغيل خادم GPU الخاص بك لتوليد الاحتمالات اللوغاريتمية.

عمل مدفوع

وظائف للناطقين بالعربية

877 وظيفة مفتوحة عن بعد في تدريب الذكاء الاصطناعي، آخر تحديث ١٦ نوفمبر ٢٠٢٦؛ أجر معظمها $20–$175 في الساعة. منها 2 وظائف تطلب متحدثين بالعربية. يعرضها ذكائي مجانًا، والتقديم يتم على منصة جهة التوظيف.

شاهد كل الأدوار المفتوحة →
قارن

البدائل

🎁 بدائل مجانية ومفتوحة المصدر
المزيد

استخدمه، أو دعنا نُعِدّه لك

📄 دليل PDF مجاني: llm-as-a-verifier لـ أطباء وطب
دليل بلغة بسيطة لإنجاز أول نتيجة لك. يُرسَل إلى بريدك.
🔔 64 شخصاً يريدون شرحاً كاملاً بالفيديو — أضف صوتك
🛠 لا تريد إعداده بنفسك؟
سنقوم بتثبيت llm-as-a-verifier واستضافته وإعداده لك — وتدريب فريقك.
دعنا ننجزه لك ↗
أسئلة

الأسئلة الشائعة

هل يمكنني تشغيل هذا باستخدام LLM مستضاف محلياً؟

نعم، يمكنك توصيله بخادم متوافق مع OpenAI مثل vllm serve شريطة أن يعيد احتمالات رموز logprob.

كيف تقللت هذه الأداة من تكاليف التقييم لاختيار الأفضل من بين N؟

تستخدم دورة المحور الاحتمالي لترتيب المرشحين في مقارنات O(Nk) بدلاً من عمليات التحقق الدورية الكاملة O(N^2).

هل يمكن لنموذج أصغر التحقق من مخرجات نموذج أكبر؟

نعم، تظهر المعايير القياسية في README أن أدوات التحقق الأصغر مثل DeepSeek V4.1 Flash تنجح في ترتيب مخرجات النماذج الأكبر مثل Claude Opus.

الرادار

أحدث أخبار الذكاء الاصطناعي

✉️ حقيبة الأدوات المجانية الأسبوعية
أفضل الأدوات المجانية والمفتوحة المصدر الجديدة لـ أطباء وطب — رسالة قصيرة أسبوعياً، بلغتك.
مجاني · رسالة واحدة أسبوعياً · إلغاء الاشتراك في أي وقت
اربح المال من تدريب الذكاء الاصطناعي ←

شاهد Zekai أولاً في جوجل