Swedish Language Understanding

Multilingual comprehension and reasoning in Swedish, covering fact checking, summarization, inference, literary and legal analysis, and dialectal understanding. This task evaluates how well models follow Swedish instructions and produce accurate, well-formed answers in Swedish.

60
Duration
9s
Input Tokens
1305
Output Tokens
306
Cost
$0.00
Context
Input
I texten står: 'När forskarna presenterade sina resultat för kommittén, godkände den dem utan invändningar.' Vad syftar 'den' och 'dem' på, och förklara den grammatiska regeln bakom denna pronominella referens.
Expected output
'Den' syftar på kommittén (en-genus), 'dem' syftar på resultaten (pluralis). Grammatisk regel: svenska pronomen måste överensstämma i genus och numerus med sitt referensord. 'Den' (singular utrum) matchar kommittén, 'dem' (pluralis) matchar resultaten. Detta kräver förståelse av vilka ord som är grammatiska subjekt vs objekt.
Model output
I meningen 'När forskarna presenterade sina resultat för kommittén, godkände den dem utan invändningar' syftar 'den' på 'kommittén' och 'dem' på 'resultaten'. Den grammatiska regeln bakom denna pronominella referens handlar om att pronomen i svenska texter kan syfta tillbaka på tidigare nämnda substantiv. 'Den' är en bestämd form i singular och syftar här på den tidigare nämnda kommittén (som är singular), medan 'dem' syftar på 'resultaten' som är i plural. Detta kräver att läsaren kan tolka och koppla pronomenen till rätt referenter baserat på kontext och meningsstruktur.