Swedish Language Understanding

Multilingual comprehension and reasoning in Swedish, covering fact checking, summarization, inference, literary and legal analysis, and dialectal understanding. This task evaluates how well models follow Swedish instructions and produce accurate, well-formed answers in Swedish.

80
Duration
42s
Input Tokens
1377
Output Tokens
507
Cost
$0.00
Context
Input
Identifiera tre ironiska påståenden i SL:s kundmeddelande och förklara vad som gör dem ironiska.
Expected output
1. Bussar kommer i klungor för att förarna är 'sociala' (ironiserar över dålig schemaläggning), 2. Rulltrappor är 'allergiska' mot vissa vardagar (ironiserar över tekniska problem), 3. 'Trasig aircondition' är miljösatsning på naturlig ventilation (ironiserar över bristande underhåll). Ironin är att positiva förklaringar ges för uppenbara systemfel.
Model output
1. Påståendet om att bussarna kommer i klungor för att förarna är sociala är ironiskt eftersom det i själva verket är ett resultat av dålig planering eller trafikproblem.

2. Att säga att rulltrapporna är allergiska mot vissa dagar är ironiskt eftersom rulltrappor inte kan ha allergier, vilket är en humoristisk förklaring till deras trasighet.

3. Att kalla trasiga luftkonditioneringssystem för 'naturligt ventilerade bussar' och att det är en miljömedveten satsning är ironiskt eftersom det i själva verket är en brist på funktionell utrustning.