Swedish Language Understanding

Multilingual comprehension and reasoning in Swedish, covering fact checking, summarization, inference, literary and legal analysis, and dialectal understanding. This task evaluates how well models follow Swedish instructions and produce accurate, well-formed answers in Swedish.

40
Duration
10s
Input Tokens
1320
Output Tokens
625
Cost
$0.00
Context
Input
Ge tre exempel från texten på hur svenska språkspecifika fenomen skapar tolkningsutmaningar, och rangordna dem efter svårighetsgrad.
Expected output
1. Lättast: Dubbelmarkering av bestämdhet ('det stora huset') - regelbaserat men unikt. 2. Medel: Pronominell referens ('den godkände dem') - kräver grammatisk genus-förståelse. 3. Svårast: Semantiskt opaka sammansättningar ('glasklar', 'brandkår') - kräver kulturell och idiomatisk kunskap utöver grammatik.
Model output
1. Sammansatta ord med icke-transparent betydelse (t.ex. 'brandkår' eller 'glasklar') - Kräver kulturell/semantisk kunskap utöver grammatik
2. Pronominella referenser (t.ex. 'den' vs 'dem' i kommittéexemplet) - Kräver djup syntaktisk analys
3. Dubbel definithetsmarkering (artikel + böjningsändelse som i 'det stora huset') - Systematisk men unik för svenskan