Swedish Language Understanding

Multilingual comprehension and reasoning in Swedish, covering fact checking, summarization, inference, literary and legal analysis, and dialectal understanding. This task evaluates how well models follow Swedish instructions and produce accurate, well-formed answers in Swedish.

80
Duration
5s
Input Tokens
1439
Output Tokens
149
Cost
$0.00
Context
Input
I mötesprotokoll finns meningen: 'Erik har rätt om leverantörerna som arbetar med oss förstår kraven som gäller från nästa månad som kommer att vara strängare.' Vilka två tolkningar är möjliga för relativsatsen 'som kommer att vara strängare'?
Expected output
Tolkning 1: Kraven som gäller från nästa månad kommer att vara strängare (kraven blir strängare). Tolkning 2: Nästa månad som kommer att vara strängare (månaden blir strängare/tuffare). Tvetydigheten uppstår genom att relativpronomenet 'som' kan referera till antingen 'kraven' eller 'nästa månad'.
Model output
De två möjliga tolkningarna är:
1. Det är kraven som kommer att vara strängare (från och med nästa månad)
2. Det är nästa månad som kommer att vara strängare (vilket är en mindre logisk men grammatiskt möjlig tolkning)