Swedish Language Understanding

Multilingual comprehension and reasoning in Swedish, covering fact checking, summarization, inference, literary and legal analysis, and dialectal understanding. This task evaluates how well models follow Swedish instructions and produce accurate, well-formed answers in Swedish.

100
Duration
1m 22s
Input Tokens
1282
Output Tokens
529
Cost
$0.00
Context
Input
Förklara varför sammansatta ord som 'glasklar' och 'brandkår' är särskilt utmanande för automatiska system att förstå.
Expected output
Dessa ord har icke-transparent semantik där betydelsen inte följer direkt från komponenterna. 'Glasklar' betyder 'kristallklar' (inte 'klar som glas'), 'brandkår' betyder 'räddningstjänst' (bredare än bara brandbekämpning). AI-system behöver kulturell och idiomatisk kunskap, inte bara grammatisk analys av sammansättningens delar.
Model output
Sammansatta ord som ”glasklar” och ”brandkår” är extra utmanande för automatiska system eftersom betydelsen inte alltid är direkt genomskinlig från delarna. ”Glasklar” betyder snarare ”kristallklar” och ”brandkår” syftar på räddningstjänst och inte enbart på eld. För att förstå sådana ord krävs både kulturell och semantisk kunskap som går utöver rent morfologisk analys.