Python'da ROUGE ve BLEU ile metin özetleme modellerini değerlendirin.
ROUGE ve BLEU metrikleri için çok dilli değerlendirme çerçevesi.
sumeval, metin özetleme modelleri için tasarlanmış saf bir Python değerlendirme çerçevesidir. ROUGE ve BLEU metriklerinin iyi test edilmiş uygulamalarını sunarak veri bilimciler ve sigortacılıkta dil modelleri geliştiren geliştiriciler için uygun hale getirir.
Araç, resmi Perl ROUGE-1.5.5.pl ve SacréBLEU betikleriyle eşleşen ROUGE-1, ROUGE-2, ROUGE-L, ROUGE-BE ve BLEU puanlarını hesaplar. Dile özgü tokenizer'lar ve bağımlılıklarla birlikte İngilizce, Japonca ve Çinceyi kutudan çıktığı gibi destekler.
Poliçe belgeleri veya tazminatlar için metin özetleme sistemleri geliştiren veya denetleyen Python geliştiricileri ve ML mühendisleri için uygundur. Yönetilen bir SaaS platformu arayan ekipler veya programcı olmayanlar için uygun değildir.
Dile özgü tokenization ile İngilizce, Japonca ve Çince metinler için puanları hesaplayın.
ROUGE puanları orijinal Perl betiğine karşı test edilmiştir ve BLEU, SacréBLEU kullanır.
JSON çıktı biçimlendirmesiyle doğrudan komut satırından değerlendirmeler çalıştırın.
Daha derin anlamsal değerlendirme için spaCy kullanan ROUGE-BE puanlarını hesaplayın.
Lisansı altında ücretsiz ve open-source'dur, ücretli bir barındırılan seçeneği yoktur. Tek maliyet, kendiniz çalıştırmak ve gerekli Python bağımlılıklarını yönetmektir.
880 açık uzaktan yapay zeka eğitimi işi, 16 Kasım 2026 tarihinde güncellendi; çoğu saatlik $20–$175 ödüyor. Bunların 2 tanesi Türkçe konuşanlar için. Zekai ücretsiz listeler; başvuru işverenin platformunda yapılır.
Evet, ek bağımlılıklarla Japonca ve Çinseyi destekler ve temel sınıf diğer dillere genişletmeye izin verir.
BLEU, resmi WMT değerlendirme betikleriyle tutarlılığı sağlamak için SacréBLEU kullanılarak hesaplanır.
Google'da önce Zekai'yi gör