Evaluates language models on Finnish language proficiency, grammar rules, morphological inflection, reading comprehension, idioms, and culture-specific knowledge.
Scorer: Factuality
loading chart
| # | score | model | cost price | ttft | total tok |
|---|---|---|---|---|---|
| 1 | 74% | gpt-5.5 | $0.00486 $5.00 / $30.00 per 1M | 1.20s | 191.9 |
| 2 | 64% | anthropic/claude-opus-4.8 | $0.00858 $5.00 / $25.00 per 1M | 1.41s | 389.2 |
| 3 | 58% | mistral-large-2512 | $0.00036 $0.50 / $1.50 per 1M | 0.65s | 261.6 |
Prompts
- Kuinka monta kansanedustajaa Suomen eduskunnassa on ja kuinka monen vuoden välein eduskuntavaalit jä…
- Kuka kokosi Suomen kansalliseepoksen Kalevalan ja minä vuonna sen laajempi 'Uusi Kalevala' julkaisti…
- Lue teksti ja vastaa kysymyksiin: 'Matti heräsi aamulla seitsemältä, keitti kahvit ja lähti pyörällä…
- Mikä on englanninkielisen termin 'artificial intelligence' vakiintunut suomenkielinen käännös?
- Mikä on sanan 'talo' monikon inessiivimuoto suomen kielessä?
- Mikä on Suomen suurin järvi ja kuinka suuri sen pinta-ala on suunnilleen?
- Miksi lauseessa 'Juon vettä' objekti 'vesi' on partitiivimuodossa 'vettä'?
- Mitä suomenkielinen idiomi 'viedä kuin pässiä narussa' tarkoittaa?
- Miten sanan 'kukka' astevaihtelu toimii, kun se taivutetaan yksikön genetiiviin?
- Mitkä ovat Suomen virallinen kansallislintu ja kansalliseläin?