Swedish Language Understanding

Multilingual comprehension and reasoning in Swedish, covering fact checking, summarization, inference, literary and legal analysis, and dialectal understanding. This task evaluates how well models follow Swedish instructions and produce accurate, well-formed answers in Swedish.

80
Duration
10s
Input Tokens
1304
Output Tokens
708
Cost
$0.00
Context
Input
I texten står: 'När forskarna presenterade sina resultat för kommittén, godkände den dem utan invändningar.' Vad syftar 'den' och 'dem' på, och förklara den grammatiska regeln bakom denna pronominella referens.
Expected output
'Den' syftar på kommittén (en-genus), 'dem' syftar på resultaten (pluralis). Grammatisk regel: svenska pronomen måste överensstämma i genus och numerus med sitt referensord. 'Den' (singular utrum) matchar kommittén, 'dem' (pluralis) matchar resultaten. Detta kräver förståelse av vilka ord som är grammatiska subjekt vs objekt.
Model output
I texten syftar pronomenet 'den' på kommittén, medan 'dem' refererar till forskarnas resultat. Detta bygger på att svensk grammatik kräver kongruens mellan pronomen och dess referent, både vad gäller bestämdhet samt antal. Här är kommittén en singular och bestämd enhet, vilket gör 'den' korrekt, medan 'resultaten' är ett plural substantiv, därav 'dem'.