Swedish Language Understanding

Multilingual comprehension and reasoning in Swedish, covering fact checking, summarization, inference, literary and legal analysis, and dialectal understanding. This task evaluates how well models follow Swedish instructions and produce accurate, well-formed answers in Swedish.

60
Duration
11s
Input Tokens
1211
Output Tokens
221
Cost
$0.00
Context
Input
I mötesprotokoll finns meningen: 'Erik har rätt om leverantörerna som arbetar med oss förstår kraven som gäller från nästa månad som kommer att vara strängare.' Vilka två tolkningar är möjliga för relativsatsen 'som kommer att vara strängare'?
Expected output
Tolkning 1: Kraven som gäller från nästa månad kommer att vara strängare (kraven blir strängare). Tolkning 2: Nästa månad som kommer att vara strängare (månaden blir strängare/tuffare). Tvetydigheten uppstår genom att relativpronomenet 'som' kan referera till antingen 'kraven' eller 'nästa månad'.
Model output
Det är möjligt att relativsatsen syftar på antingen de leverantörer som från och med nästa månad kommer att ha hårdare krav eller på de krav som kommer att bli mer stränga. Två tolkningar är alltså att den antingen refererar till leverantörerna själva eller till de krav eller regler som ska bli mer stränga i framtiden.