Swedish Language Understanding

Multilingual comprehension and reasoning in Swedish, covering fact checking, summarization, inference, literary and legal analysis, and dialectal understanding. This task evaluates how well models follow Swedish instructions and produce accurate, well-formed answers in Swedish.

80
Duration
13s
Input Tokens
591
Output Tokens
281
Cost
$0.00
Context
Input
Vilken linje får fler avgångar och hur mycket ökar de? Svara på svenska.
Expected output
Gröna linjen får 15 % fler avgångar i rusningstid.
Model output
Enbart **gröna linjen** nämns i kontexten, och dess avgångar **ökar med 15 % under rusningstid** från 1 september 2025. Ingen annan linjes förändringar eller exakta antal avgångar anges, så en jämförelse med andra linjer är inte möjlig. Ökningen gäller endast rusningstrafik.