Swedish Language Understanding

Multilingual comprehension and reasoning in Swedish, covering fact checking, summarization, inference, literary and legal analysis, and dialectal understanding. This task evaluates how well models follow Swedish instructions and produce accurate, well-formed answers in Swedish.

Duration

42s

Input Tokens

1288

Output Tokens

328

Cost

$0.00

Context

Input

Identifiera tre ironiska påståenden i SL:s kundmeddelande och förklara vad som gör dem ironiska.

Expected output

1. Bussar kommer i klungor för att förarna är 'sociala' (ironiserar över dålig schemaläggning), 2. Rulltrappor är 'allergiska' mot vissa vardagar (ironiserar över tekniska problem), 3. 'Trasig aircondition' är miljösatsning på naturlig ventilation (ironiserar över bristande underhåll). Ironin är att positiva förklaringar ges för uppenbara systemfel.

Model output

1. 'Våra förare är väldigt sociala och bara längtar efter varandras sällskap' - Ironiskt eftersom det förklarar en uppenbar bussförsening (bussar som kommer i klungor) med en positiv social egenskap snarare än att erkänna ett logistikproblem.

2. 'Vår miljömedvetna satsning på naturlig luftcirkulation' - Ironiskt eftersom det framställs som en miljövänlig lösning när det i verkligheten handlar om trasig aircondition som gör resor obekväma i värmen.

3. 'Våra förseningar är en del av den svenska kulturskatten 'lagom'' - Ironiskt eftersom det förklarar servicebrister (förseningar) som en positiv kulturell egenskap ('lagom') snarare än ett problem som behöver lösas.