Swedish Language Understanding

Multilingual comprehension and reasoning in Swedish, covering fact checking, summarization, inference, literary and legal analysis, and dialectal understanding. This task evaluates how well models follow Swedish instructions and produce accurate, well-formed answers in Swedish.

80
Duration
14s
Input Tokens
1453
Output Tokens
455
Cost
$0.00
Context
Input
Identifiera tre ironiska påståenden i SL:s kundmeddelande och förklara vad som gör dem ironiska.
Expected output
1. Bussar kommer i klungor för att förarna är 'sociala' (ironiserar över dålig schemaläggning), 2. Rulltrappor är 'allergiska' mot vissa vardagar (ironiserar över tekniska problem), 3. 'Trasig aircondition' är miljösatsning på naturlig ventilation (ironiserar över bristande underhåll). Ironin är att positiva förklaringar ges för uppenbara systemfel.
Model output
Tre ironiska påståenden i SL:s kundmeddelande är:

1. "Det visar sig att våra förare är väldigt sociala och bara längtar efter varandras sällskap!" - Detta är ironiskt eftersom det förlöjligar ett verkligt problem (bussar som kommer i klungor) genom att ge en uppenbart falsk förklaring. Ironin ligger i att SL framställer ett serviceproblem som något positivt och avsiktligt, när det egentligen är ett organisatoriskt misslyckande.

2. "Det som vissa felaktigt kallar 'trasig aircondition' är faktiskt vår miljömedvetna satsning på naturlig luftcirkulation." - Ironin består i att SL omdefinierar ett tekniskt fel (trasig AC) som ett medvetet miljöval. Det är särskilt ironiskt eftersom de försöker framställa en dålig reseupplevelse (varma bussar) som något positivt och planerat.

3. "Vi vet också att er klocka ibland går fel när ni kollar tidtabellen." - Detta är ironiskt eftersom SL lägger ansvaret för förseningar på resenärernas klockor istället för att erkänna sina egna brister. Ironin förstärks av påståendet att tidtabellen är ungefärlig beroende på allt från trafik till "månens faser", vilket driver med SL:s egen opålitlighet.