Coding Bench · Veri

Tüm koşular ve ölçümler

Aynı görevin tekrarları dahil, doğrulanmış depo koşuları ve Ajan Atölyesi pilotu. İki seri ayrı: birinde depo değişikliği, diğerinde model yanıtı test edildi.

240 geçerli depo koşusu · 24 geçerli pilot koşusu · 46 değerlendirme dışı kayıt

Geçerli koşularda kayıt kapsamı: süre 264/264, girdi 264/264, çıktı 264/264, toplam token 264/264, maliyet 209/264.

310 kayıt · 1–25 gösteriliyor

Diğer ölçümler için tabloyu yana kaydır.

Görev / koşuModel / araçSonuç
task-003-atomic-scopeDepo koşusu · #1Hazırlık katkısı: Claude Sonnet 5claude-fable-5-2high · Claude Code CLIGeçti19,942 sn646.0967.2021.20447554.508$0,172659Koşucu API eşdeğeri
task-003-atomic-scopeDepo koşusu · #1Hazırlık katkısı: Claude Sonnet 5claude-fable-5-2max · Claude Code CLIGeçti63,703 sn871.2729.4965.3134.06886.089$0,378774Koşucu API eşdeğeri
task-003-atomic-scopeDepo koşusu · #1Hazırlık katkısı: Claude Sonnet 5claude-haiku-5-5varsayilan · Claude Code CLIGeçti9,923 sn1297.4256.9411.557490105.935$0,003142Koşucu API eşdeğeri
task-003-atomic-scopeDepo koşusu · #1Hazırlık katkısı: Claude Sonnet 5claude-opus-5-5high · Claude Code CLIGeçti10,327 sn643.3845.55894915749.897$0,072145Koşucu API eşdeğeri
task-003-atomic-scopeDepo koşusu · #1Hazırlık katkısı: Claude Sonnet 5claude-opus-5-5low · Claude Code CLIGeçti8,773 sn861.1854.443664766.300$0,061093Koşucu API eşdeğeri
task-003-atomic-scopeDepo koşusu · #1Hazırlık katkısı: Claude Sonnet 5claude-opus-5-5max · Claude Code CLIGeçti74,023 sn12107.8439.4007.5725.887124.827$0,248257Koşucu API eşdeğeri
task-003-atomic-scopeDepo koşusu · #1Hazırlık katkısı: Claude Sonnet 5claude-opus-5-5medium · Claude Code CLIGeçti11,448 sn1078.7764.2561.05711784.099$0,070983Koşucu API eşdeğeri
task-003-atomic-scopeDepo koşusu · #1Hazırlık katkısı: Claude Sonnet 5claude-sonnet-5-5high · Claude Code CLIGeçti11,422 sn644.0414.38383313749.263$0,030278Koşucu API eşdeğeri
task-003-atomic-scopeDepo koşusu · #1Hazırlık katkısı: Claude Sonnet 5claude-sonnet-5-5low · Claude Code CLIKaldı6,754 sn644.4784.319396049.199$0,025696Koşucu API eşdeğeri
task-003-atomic-scopeDepo koşusu · #1Hazırlık katkısı: Claude Sonnet 5claude-sonnet-5-5medium · Claude Code CLIKaldı7,965 sn643.2425.077499048.824$0,029634Koşucu API eşdeğeri
task-003-atomic-scopeDepo koşusu · #1Hazırlık katkısı: Claude Sonnet 5deepseek-v4.1-flashtek ayar · EVREN HTTP APIGeçti59,052 sn4.3843.264—5921824.976—
task-003-atomic-scopeDepo koşusu · #1Hazırlık katkısı: Claude Sonnet 5gemma-4-31btek ayar · EVREN HTTP APIGeçti49,094 sn3.2131.952—1.7491.4234.962—
task-003-atomic-scopeDepo koşusu · #1Hazırlık katkısı: Claude Sonnet 5glm-5.3tek ayar · EVREN HTTP APIDeğerlendirme dışıİstek sınırı336,415 sn935——195631.130—
task-003-atomic-scopeDepo koşusu · #2Hazırlık katkısı: Claude Sonnet 5glm-5.3tek ayar · EVREN HTTP APIGeçti265,44 sn3.038——6653923.703—
task-003-atomic-scopeDepo koşusu · #1Hazırlık katkısı: Claude Sonnet 5qwen3.8-flash-nexttek ayar · EVREN HTTP APIGeçti26,568 sn4.528——9123815.440—
task-010-romanDepo koşusu · #1Hazırlık katkısı: Claude Sonnet 5claude-fable-5-2high · Claude Code CLIGeçti25,664 sn648.1905.7982.09425256.088$0,186214Koşucu API eşdeğeri
task-010-romanDepo koşusu · #1Hazırlık katkısı: Claude Sonnet 5claude-fable-5-2max · Claude Code CLIDeğerlendirme dışıBütçe sınırı163,808 sn649.15918.16115.80511.52783.131$1,013155Koşucu API eşdeğeri
task-010-romanDepo koşusu · #1Hazırlık katkısı: Claude Sonnet 5claude-haiku-5-5varsayilan · Claude Code CLIGeçti11,936 sn1083.5926.5072.30326692.412$0,00329Koşucu API eşdeğeri
task-010-romanDepo koşusu · #9Hazırlık katkısı: Claude Sonnet 5claude-haiku-5-5varsayilan · Claude Code CLIGeçti14,473 sn1089.8163.2443.01936896.089$0,003057Koşucu API eşdeğeri
task-010-romanDepo koşusu · #1Hazırlık katkısı: Claude Sonnet 5claude-opus-5-5high · Claude Code CLIGeçti29,45 sn1298.2967.0173.270234108.595$0,141243Koşucu API eşdeğeri
task-010-romanDepo koşusu · #1Hazırlık katkısı: Claude Sonnet 5claude-opus-5-5low · Claude Code CLIGeçti28,974 sn861.2984.8611.430567.597$0,07978Koşucu API eşdeğeri
task-010-romanDepo koşusu · #1Hazırlık katkısı: Claude Sonnet 5claude-opus-5-5max · Claude Code CLIGeçti235,01 sn24326.02631.11227.69913.955384.861$0,868177Koşucu API eşdeğeri
task-010-romanDepo koşusu · #1Hazırlık katkısı: Claude Sonnet 5claude-opus-5-5medium · Claude Code CLIGeçti21,854 sn861.7924.3771.4354167.612$0,076106Koşucu API eşdeğeri
task-010-romanDepo koşusu · #1Hazırlık katkısı: Claude Sonnet 5claude-sonnet-5-5high · Claude Code CLIGeçti17,617 sn862.7344.8821.8394669.463$0,044207Koşucu API eşdeğeri
task-010-romanDepo koşusu · #1Hazırlık katkısı: Claude Sonnet 5claude-sonnet-5-5low · Claude Code CLIGeçti11,558 sn861.0085.9261.181068.123$0,041631Koşucu API eşdeğeri
Sayfa 1 / 13

Boş değer sıfır değildir. USD sütunu koşucunun bildirdiği API fiyat karşılığını veya resmî API tarifesiyle hesaplanan tahmini gösterir. Fatura veya abonelik bedeli değil. Kayıtları görev ve seri aynıyken kıyasla.

Yapbil Benchmark · Anla DeneVeri tarihi: 20 Kasım 2026 · Şema sürümü: ölçülmedi, sebep: ham dosya yok