Swedish Language Understanding

Multilingual comprehension and reasoning in Swedish, covering fact checking, summarization, inference, literary and legal analysis, and dialectal understanding. This task evaluates how well models follow Swedish instructions and produce accurate, well-formed answers in Swedish.

40
Duration
16s
Input Tokens
1260
Output Tokens
974
Cost
$0.00
Context
Input
Ge tre exempel från texten på hur svenska språkspecifika fenomen skapar tolkningsutmaningar, och rangordna dem efter svårighetsgrad.
Expected output
1. Lättast: Dubbelmarkering av bestämdhet ('det stora huset') - regelbaserat men unikt. 2. Medel: Pronominell referens ('den godkände dem') - kräver grammatisk genus-förståelse. 3. Svårast: Semantiskt opaka sammansättningar ('glasklar', 'brandkår') - kräver kulturell och idiomatisk kunskap utöver grammatik.
Model output
1. Dekomponering av transparenta sammansatta ord (t.ex. “vardagslivskompetens”): talaren måste först identifiera grundkomponenterna innan betydelsen byggs upp.
2. Definithetsmarkering med både artikel och böjning (t.ex. “det stora huset”): kräver förståelse av svensk dubbelmarkering jämfört med engelska.
3. Pronominella referenser “den” vs. “dem” (t.ex. “godkände den dem utan invändningar”): svårast eftersom man måste avgöra subjekt- och objektreferenser korrekt.