Görevler · Uzun bağlam
task-133-version-mapping
Görev tanımının prompt metni aşağıdadır; gizli doğrulayıcılar (verify, oracle, reference çözümler) yayınlanmaz. Her sütun bir model ve effort ikilisinin n=1 sonucudur (ilk geçerli deneme); renk tek başına anlam taşımaz.
Görev tanımı
Bu depo (exportsvc) bir disa aktarim servisidir. Istemcilerden gelen bazi protokol adlari icin /export cevabindaki `schema` alani yanlis cikiyor (ornek: p10 ve p12 istemcileri v1 aliyor, 'p007' ve bosluklu ya da buyuk harfli adlar da hatali olabilir). Surum esleme politikasi docs/versioning.md icinde yazili. Politikayi tum protokol adlari ve takma adlar icin uygulayacak sekilde hatayi kok nedeninde duzelt. Yalniz exportsvc/ altindaki .py dosyalari degisebilir; docs/, tests/ ve dosya kumesi degismez. Gorunur test: `python3 -B -m unittest discover -s tests`. Gorunur test hatayi yakalamaz.
Kaynak: fixtures/task-133-version-mapping/PROMPT.md · yalnız prompt metni; doğrulayıcılar yayınlanmaz.
Model seçici yükleniyor; bu ara görüntüde varsayılan sütunlar görünür.
Geçti
- Süre
- 1,4 dk
- Çıktı token
- 7.283
- Maliyet (USD, koşu başı)
- 0,58
Modelin değişiklikleri (diff)
Diff kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).
Son mesaj
Mesaj kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).
ölçülmedihücre bütçe sınırı (1 USD) model işini bitirmeden kesti; model başarısızlığı değil, yeniden koşu bekliyor
- Süre
- ölçülmedi
- Çıktı token
- ölçülmedi
- Maliyet (USD, koşu başı)
- ölçülmedi (diğer)
Bu ikilinin bu görevde geçerli koşusu yok; diff ve mesaj yayınlanmaz.
Geçti
- Süre
- 37,9 sn
- Çıktı token
- 8.353
- Maliyet (USD, koşu başı)
- <0,01
Modelin değişiklikleri (diff)
Diff kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).
Son mesaj
Mesaj kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).
Geçti
- Süre
- 33,6 sn
- Çıktı token
- 2.295
- Maliyet (USD, koşu başı)
- 0,14
Modelin değişiklikleri (diff)
Diff kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).
Son mesaj
Mesaj kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).
Geçti
- Süre
- 12,8 sn
- Çıktı token
- 1.234
- Maliyet (USD, koşu başı)
- 0,09
Modelin değişiklikleri (diff)
Diff kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).
Son mesaj
Mesaj kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).
Geçti
- Süre
- 4,5 dk
- Çıktı token
- 28.536
- Maliyet (USD, koşu başı)
- 0,90
Modelin değişiklikleri (diff)
Diff kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).
Son mesaj
Mesaj kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).
Geçti
- Süre
- 18,1 sn
- Çıktı token
- 1.800
- Maliyet (USD, koşu başı)
- 0,11
Modelin değişiklikleri (diff)
Diff kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).
Son mesaj
Mesaj kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).
Geçti
- Süre
- 18 sn
- Çıktı token
- 1.657
- Maliyet (USD, koşu başı)
- 0,06
Modelin değişiklikleri (diff)
Diff kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).
Son mesaj
Mesaj kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).
Geçti
- Süre
- 14,5 sn
- Çıktı token
- 1.222
- Maliyet (USD, koşu başı)
- 0,05
Modelin değişiklikleri (diff)
Diff kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).
Son mesaj
Mesaj kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).
Geçti
- Süre
- 22,5 sn
- Çıktı token
- 1.580
- Maliyet (USD, koşu başı)
- 0,05
Modelin değişiklikleri (diff)
Diff kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).
Son mesaj
Mesaj kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).
Geçti
- Süre
- 2,1 dk
- Çıktı token
- 4.107
- Maliyet (USD, koşu başı)
- ölçülmedi (diğer)
Modelin değişiklikleri (diff)
Diff kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).
Son mesaj
Mesaj kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).
Kaldı
- Süre
- 1,3 dk
- Çıktı token
- 7.359
- Maliyet (USD, koşu başı)
- ölçülmedi (diğer)
Modelin değişiklikleri (diff)
Diff kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).
Son mesaj
Mesaj kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).
ölçülmedikota/429 (rate_limit): 1 satır paydaya girmedi
- Süre
- ölçülmedi
- Çıktı token
- ölçülmedi
- Maliyet (USD, koşu başı)
- ölçülmedi (diğer)
Bu ikilinin bu görevde geçerli koşusu yok; diff ve mesaj yayınlanmaz.
Geçti
- Süre
- 9,1 dk
- Çıktı token
- 8.907
- Maliyet (USD, koşu başı)
- ölçülmedi (diğer)
Modelin değişiklikleri (diff)
Diff kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).
Son mesaj
Mesaj kaydı yok (ölçülmedi, sebep: artefakt dosyası yok).
Ölçülmeyen sütunların sebebi sütun üstünde yazar. Diff ve son mesaj açılır-kapanır başlıkların altındadır; ham dosyalar indirilebilir. Maliyet = koşu başı ortalama, API liste fiyatı eşdeğeri (abonelik faturası değil); EVREN ücretsiz katmanında fiyat tanımsız olduğundan ölçülmedi yazar. Veri: Nasıl ölçüldü?