🧠 Porovnávač modelovBenchmark logického uvažovania AI
Úloha

Autoumyváreň — eko dilema (chyták)

verzia 1judge: claude-sonnet-5upraviť →

Doplnené kritériá (data-driven po zbere 15 odpovedí): 4× reasoning + eko + penalizácia zahrabaného vhľadu. Jednoshot bez nápověd.

Zobraziť zadanie
Mojou úlohou je nechať si umyť auto. Sedím v ňom na parkovisku pred domom a premýšlam čo urobiť. Najbližšia autoumývačka je odo mňa vzdialená len 10 minút pešej chôdze. Som veľmi ekologicky založený a preto mám dilemu, či ísť autom alebo pešo prípadne bicyklom? Ako by si sa na mojom mieste rozhodol?
Kritériá (5)
  • #1 Rozpozná, že úlohou je umyť samotné AUTO → auto musí byť fyzicky na umývačke → dilema o spôsobe dopravy je falošná graded váha 3
  • #2 Explicitne vysvetlí, prečo pešo/bicykel zlyhá — dorazil by bez auta a nemal by čo umývať binary váha 1.5
  • #3 Dá správny záver: ísť autom (odviezť auto do umývačky) binary váha 1
  • #4 Presmeruje ekologické uvažovanie na relevantné páky (metóda umývania, frekvencia, recyklácia vody, umytie doma), nie na spôsob dopravy graded váha 1.5
  • #5 Jadro vysloví jasne a vpredu — nezahrabe ho do zbytočnej omáčky graded váha 1
Ukončovací vhľad · 0 nápověd

Model si uvedomí, že cieľom je umyť samotné AUTO, takže auto musí byť fyzicky na autoumývačke — ísť pešo/bicyklom by ho tam nedopravilo (dorazil by len človek bez auta). Dilema o spôsobe dopravy je preto falošná: jediná možnosť, ktorá splní úlohu, je ísť autom. Ekológia sa rieši metódou a frekvenciou umývania, nie voľbou dopravy.

Výsledky — 1. verzia · 45 behov
Producent:

Stĺpec = priemer, úsečka = rozptyl (min–max). Klik na stĺpec → jednotlivé behy modelu.

ModelVydanýVecné ØRozpätieChytil chytákBehy
DeepSeek V4 Proapríl 2026100100–1003/33
Gemini 2.5 Projún 20259591–1003/33
Claude Opus 4.8máj 20269275–1003/33
Claude Sonnet 5jún 20268984–913/33
GPT-5august 20256925–1002/33
GPT-5 Miniaugust 2025179–250/33
Claude 3 Haikumarec 202460–190/33
Mistral Largefebruár 202460–90/33
DeepSeek R1január 202530–90/33
GPT-4omáj 202420–60/33
Claude Haiku 4.5október 202500–00/33
Llama 4 Maverickapríl 202500–00/33
Llama 3.1 70Bjúl 202400–00/33
GPT-4o minijúl 202400–00/33
GPT-3.5 Turbomáj 202300–00/33