Görevler · Uzun bağlam

task-133-version-mapping

Görev tanımının prompt metni aşağıdadır; gizli doğrulayıcılar (verify, oracle, reference çözümler) yayınlanmaz. Her sütun bir model ve effort ikilisinin n=1 sonucudur (ilk geçerli deneme); renk tek başına anlam taşımaz.

n=114 ikili: 12 ölçüldü · 2 ölçülmedi

Görev tanımı

Bu depo (exportsvc) bir disa aktarim servisidir. Istemcilerden gelen bazi protokol adlari icin /export cevabindaki `schema`
alani yanlis cikiyor (ornek: p10 ve p12 istemcileri v1 aliyor, 'p007' ve bosluklu ya da buyuk harfli adlar da hatali olabilir).
Surum esleme politikasi docs/versioning.md icinde yazili. Politikayi tum protokol adlari ve takma adlar icin uygulayacak sekilde
hatayi kok nedeninde duzelt. Yalniz exportsvc/ altindaki .py dosyalari degisebilir; docs/, tests/ ve dosya kumesi degismez.
Gorunur test: `python3 -B -m unittest discover -s tests`. Gorunur test hatayi yakalamaz.

Kaynak: fixtures/task-133-version-mapping/PROMPT.md · yalnız prompt metni; doğrulayıcılar yayınlanmaz.

Model seçici yükleniyor; bu ara görüntüde varsayılan sütunlar görünür.

claude-haiku-5-5varsayılan

Geçti

Süre
37,9 sn
Çıktı token
8.353
Maliyet (USD, koşu başı)
<0,01
Modelin değişiklikleri (diff)

Diff kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).

Son mesaj

Mesaj kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).

claude-opus-5-5high

Geçti

Süre
33,6 sn
Çıktı token
2.295
Maliyet (USD, koşu başı)
0,14
Modelin değişiklikleri (diff)

Diff kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).

Son mesaj

Mesaj kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).

claude-sonnet-5-5medium

Geçti

Süre
22,5 sn
Çıktı token
1.580
Maliyet (USD, koşu başı)
0,05
Modelin değişiklikleri (diff)

Diff kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).

Son mesaj

Mesaj kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).

deepseek-v4.1-flashtek ayar

Geçti

Süre
2,1 dk
Çıktı token
4.107
Maliyet (USD, koşu başı)
ölçülmedi (diğer)
Modelin değişiklikleri (diff)

Diff kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).

Son mesaj

Mesaj kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).

Ölçülmeyen sütunların sebebi sütun üstünde yazar. Diff ve son mesaj açılır-kapanır başlıkların altındadır; ham dosyalar indirilebilir. Maliyet = koşu başı ortalama, API liste fiyatı eşdeğeri (abonelik faturası değil); EVREN ücretsiz katmanında fiyat tanımsız olduğundan ölçülmedi yazar. Veri: Nasıl ölçüldü?