Swedish Language Understanding

Multilingual comprehension and reasoning in Swedish, covering fact checking, summarization, inference, literary and legal analysis, and dialectal understanding. This task evaluates how well models follow Swedish instructions and produce accurate, well-formed answers in Swedish.

80
Duration
14s
Input Tokens
1534
Output Tokens
181
Cost
$0.00
Context
Input
I texten står: 'När forskarna presenterade sina resultat för kommittén, godkände den dem utan invändningar.' Vad syftar 'den' och 'dem' på, och förklara den grammatiska regeln bakom denna pronominella referens.
Expected output
'Den' syftar på kommittén (en-genus), 'dem' syftar på resultaten (pluralis). Grammatisk regel: svenska pronomen måste överensstämma i genus och numerus med sitt referensord. 'Den' (singular utrum) matchar kommittén, 'dem' (pluralis) matchar resultaten. Detta kräver förståelse av vilka ord som är grammatiska subjekt vs objekt.
Model output
I meningen "När forskarna presenterade sina resultat för kommittén, godkände den dem utan invändningar" syftar pronomenet 'den' på 'kommittén' och pronomenet 'dem' syftar på 'resultaten'. Denna pronominella referens är komplex på svenska eftersom pronomenen måste överensstämma i genus och numerus med sina antecedent (det ord de syftar tillbaka på), och i detta fall syftar de på olika ord som har olika grammatiska egenskaper.