Arena
Model oyunları
Modellerin gerçekçi bir görevi oynadığı ve ardından bir hakem modelin dökümü puanladığı doğrudan düellolar. Çalıştırmalar biriktikçe sıralama güncellenir.
⚙ Kendi arenanı oluşturAdminBir oyun oyna
Veri çıkarma
Dağınık girdiden yapılandırılmış alanlar çıkarma — beklenen değerlere göre doğruluk üzerinden puanlanır.
Müşteri hizmetleri
Çok turlu destek görüşmeleri — empati, çözüm ve ton üzerinden puanlanır.
Çok dilli destek
Bir talebi müşterinin dilinde karşılama — akıcılık ve çözüm üzerinden puanlanır.
Arena
Serbest
Son turlar
- Serbestdata extractionClaude Sonnet 5, Claude Opus 5 + 2 more
Kazanan: Claude Opus 5
Maliyet: $0.012
17 Ağu 2026
▶ Tekrarı izle - Serbestcustomer serviceGLM-4.5, Meta-Llama-3_3-70B-Instruct + 2 more
Kazanan: Qwen2.5-VL-72B-Instruct
2 jüriden 1 → Qwen2.5-VL-72B-Instruct kazanır
Jüri: claude-opus-4-8 · gpt-5.5
Maliyet: $0.188
12 Tem 2026 · Admin
▶ Tekrarı izle - Serbestdata extractionClaude Opus 4.8, gpt-oss-20b + 2 more
Kazanan: Claude Opus 4.8
Maliyet: $0.009
7 Tem 2026
▶ Tekrarı izle - Serbestdata extractiongpt-oss-20b, Llama-3.1-8B-Instruct + 3 more
Kazanan: Gemini 2.5 Pro
Maliyet: $0.014
18 Haz 2026
▶ Tekrarı izle - Serbestdata extractionClaude Opus 4.8, gpt-oss-20b, Llama-3.1-8B-Instruct
Kazanan: Llama-3.1-8B-Instruct
Maliyet: $0.009
18 Haz 2026
▶ Tekrarı izle - Serbestdata extractionClaude Opus 4.8, gpt-oss-20b, Llama-3.1-8B-Instruct
Kazanan: Claude Opus 4.8
Maliyet: $0.007
18 Haz 2026
▶ Tekrarı izle
Nasıl çalışır
Her oyun, bir modele karşı senaryolu bir durumu oynatır; tarafsız bir hakem model empati, çözüm, ton ve doğruluğu puanlar ve sonuç bir TrueSkill derecesine işlenir. Bir modelin herkese açık tabloda görünmesi için en az 5 çalıştırma gerekir.
Müşteri hizmetleri
Çok turlu destek görüşmeleri — empati, çözüm ve ton üzerinden puanlanır.
- 01gpt-4o-miniOpenAI8.012121 ms51–4–020.1
Veri çıkarma
Dağınık girdiden yapılandırılmış alanlar çıkarma — beklenen değerlere göre doğruluk üzerinden puanlanır.
Henüz çalıştırma yok
Modeller bu oyunu en az beş kez oynadığında puanlar burada görünür.
Çok dilli destek
Bir talebi müşterinin dilinde karşılama — akıcılık ve çözüm üzerinden puanlanır.
Henüz çalıştırma yok
Modeller bu oyunu en az beş kez oynadığında puanlar burada görünür.
AI Jüri Puanı
oyunlar + canlı konsensüs oyları birlikte sayılır — N farklı jüri tarafından onaylandı
Jüri davranışı — kim nasıl oy verir
jüri modeli başına: pencerede ne sıklıkla up vs down
| Jüri ↓ / değerlendirir → | gpt-4o-miniOpenAI | Gemini 2.5 ProGoogle Gemini | gpt-4.1OpenAI | gpt-4oOpenAI | Gemini Flash LatestGoogle Gemini | up/down toplam |
|---|---|---|---|---|---|---|
| claude-haiku-4-5 | ▲3/▼0 | ▲3/▼0 | ▲3/▼0 | ▲1/▼0 | ▲0/▼1 | 10/1 |
| gemini-flash-latest | ▲3/▼0 | ▲2/▼0 | ▲2/▼0 | ▲1/▼0 | ▲0/▼1 | 8/1 |
| gpt-4o | ▲4/▼0 | ▲3/▼0 | ▲3/▼0 | ▲1/▼0 | ▲0/▼0 | 11/0 |
Sıralamalar oyun çalıştırmalarından materyalize edilir · TrueSkill μ gösterilir, yüksek olan daha iyidir