TR-MMLU — Benchmark Boyut Detayı

TR-MMLU: Yüksel et al. (2024) tarafından geliştirilen Türkçe MMLU varyantı. 9 lise/üniversite dersi (Biyoloji, Kimya, Coğrafya, Tarih, Matematik,…

İlgili sayfalar

  • Anasayfa
  • Liderlik tablosu
  • Türkçe LLM kataloğu
  • Model karşılaştırma
  • Metodoloji + açık veri
  • Doğrulama raporu (hizmet)
  • Neden açık kaynak ve yerel AI?
  • Hızlı başlangıç

Benchmark boyutları

  • Türkçe LLM Benchmark Merkezi, Açık Veri (tümü)
  • TurkishMMLU (Yüksel) — Benchmark Boyut Detayı
  • Benchmark Sonucu Gönder, YerelAI'ya Katkı Ver
  • Benchmark Gönder V2, Yeni Nesil Katkı
  • Benchmark Metodolojisi, Açık Veri, Tekrarlanabilir
  • Benchmark Boyutları — Ölçülen + Atıflı Skorlar
  • Belebele (TR) — Benchmark Boyut Detayı
  • Maliyet (1M token) — Benchmark Boyut Detayı
  • Token/saniye — Benchmark Boyut Detayı