Famous phrases benchmark
- Authors
- Jórunnardóttir, Alfa Magdalena B
- Item identifier
- http://hdl.handle.net/20.500.12537/416
- Project URL
- https://stigatafla.is/
- Demo URL
- https://stigatafla.is/
- Date issued
- 2026-09-09
- Size
- 907 entries
- Language(s)
- Icelandic
- Description
- Famous phrases benchmark is a benchmark for evaluating the capabilities of language models when it comes to Icelandic language and culture. The benchmark is used on the Miðeind leaderboard (stigatafla.is), where examples from the benchmark and further information can be found. The benchmark contains 907 entries, where each entry includes a well-known Icelandic phrase from a film or TV show, a slogan, or a quote from an Icelandic saga. The benchmark involves getting a model to explain where the example comes from. The benchmark can be accessed for research purposes by contacting the project contacts or at stigatafla@mideind.is. Frægir frasar er mælipróf til að meta færni mállíkana þegar kemur að íslensku máli og menningu. Mæliprófið er notað á stigatöflu Miðeindar (stigatafla.is), þar sem finna má dæmi úr prófinu og frekari upplýsingar. Í mæliprófinu eru 907 færslur þar sem hver færsla inniheldur þekktan íslenskan frasa úr kvikmynd eða þætti, slagorð eða tilvitnun úr Íslendingasögu. Mæliprófið felst í því að fá líkan til að útskýra hvaðan dæmið kemur. Mæliprófið er ekki gefið út opið til að forðast að það endi í þjálfunargögnum líkananna. Hægt er að nálgast mæliprófið til rannsókna með því að hafa samband við tengiliði verkefnis eða á stigatafla@mideind.is.
- Publisher
- Miðeind ehf.
- Acknowledgement
-
Icelandic Student Innovation Fund
Project code: 2603-0554
Project name: Erfiðari mælipróf fyrir íslensku
- Subject(s)
- benchmark
- Collection(s)
-