Swedish Language Understanding

Multilingual comprehension and reasoning in Swedish, covering fact checking, summarization, inference, literary and legal analysis, and dialectal understanding. This task evaluates how well models follow Swedish instructions and produce accurate, well-formed answers in Swedish.

80
Duration
1m 2s
Input Tokens
1225
Output Tokens
714
Cost
$0.00
Context
Input
Identifiera tre ironiska påståenden i SL:s kundmeddelande och förklara vad som gör dem ironiska.
Expected output
1. Bussar kommer i klungor för att förarna är 'sociala' (ironiserar över dålig schemaläggning), 2. Rulltrappor är 'allergiska' mot vissa vardagar (ironiserar över tekniska problem), 3. 'Trasig aircondition' är miljösatsning på naturlig ventilation (ironiserar över bristande underhåll). Ironin är att positiva förklaringar ges för uppenbara systemfel.
Model output
1. Bussarna anländer i klungor om tre efter lång väntan – det ironiska är att den mänskliga faktorn, 'att förarna är väldigt sociala', används som ursäkt istället för en effektiv tidtabell. 
2. Rulltrapporna är 'trasiga' eftersom de är allergiska mot vissa dagar – en absurd medicinsk förklaring som omvandlar ett tekniskt fel till något humoristiskt. 
3. Det som kallas 'trasig aircondition' framställs som en miljömedveten satsning på naturlig ventilation – ironin ligger i att en uppenbar brist i komfort paketeras som ett medvetet och positivt val.