Projekt · Dnr 2020-02523 · Källa: Vinnova

SuperLim: en svensk testmängd för språkmodeller

Koordinator
RISE RESEARCH INSTITUTES OF SWEDEN AB, RISE SICS
Projekttid
2020-09-01 till 2021-07-06 (avslutat)
Beviljat bidrag
1 999 916 SEK
Diarienummer
2020-02523

Beskrivning

Målet för SuperLim har varit att producera testmängder för att utvärdera kvaliteten och identifiera ojämlikheter hos svenska språkmodeller, samt möjliggöra jämförelser mellan dem. Projektet har levererat över förväntan 13 testmängder för att undersöka olika aspekter av språkförståelse. Dessa utgör grunden i, och ett viktigt steg mot, ett svenskt ramverk för utveckling och jämförelse av språkmodeller. Flera strategier har använts för att ta fram resurserna som ingår i samlingen. En del existerande resurser har omformatterats och återanvänts. Några resurser som ingår i (Super)GLUE har maskinöversätts och sedan manuellt korrigerats. Några resurser är helt nya och skapades specifikt för SuperLim. Några resurser fick vi som frivilliga bidrag från externa parter, eftersom projektet har fått en stor nationell spridning och mobiliserade ett stort intresse inom privat och offentlig sektor.

Öppna hos Vinnova

Hittar Vinnova inte sidan? Sök på diarienumret hos Vinnova.

Liknande

  1. Stärkt resiliens i tråddragningsindustrin genom säker försörjning av smörjmedel och formningsverktyg

    Örebro universitet · 2026-08-17 · 1 290 000 SEK · Projekt

    Projektets mål är att stärka svensk tråddragningsindustris försörjningsrobusthet vid störningar i internationella leveranskedjor. Projektet kartlägger kritiska beroenden och sårbarheter för smörjmedel och dragskivor samt identifierar tekniska och organisatoriska åtgärder, såsom alternativa leverantö…

  2. ATTEST: Utrustning för malbarhetstest för att uppskatta attrition av sten

    Luleå tekniska universitet · 2023-11-06 · 1 000 000 SEK · Projekt

    Projektet utvecklade och utvärderade en ny prototyp för attritionsmalningstester på små prover, med fokus på autogenmalning. Målen uppnåddes till stor del och instrumentet visade tillförlitliga resultat jämförbara med etablerade metoder. Samtidigt identifierades förbättringsområden, vilket ger under…

  3. Kompetensnav Tillförlitlig Elektronikhårdvara

    RISE IVF AB · 2015-08-01 · 425 000 SEK · Projekt

    Målet för projektet var att kartlägga och göra allmänt tillgängligt vilka kompetenser och resurser som finns hos svenska aktörer för att säkerställa tillförlitligheten av elektronikhårdvara med fokus på tillförlitlighet med inriktning på klimatisk miljötålighet samt att guida intresserade till att h…

  4. Upphandling av IT-resurser- Ramavtal

    Statens fastighetsverk · 2025-03-19 · sista anbudsdag 2025-04-21 · 220 000 000 SEK · Upphandling

    Då de egna resurserna inom verksamheten är få sätter detta ramarna för hur omfattande olika initiativ kan göras. Externa resurser kan från tid till annan komma att engageras i kortare och längre uppdrag. Det kan röra sig om engångsinsatser i enstaka projekt eller helhetsåtaganden där leverantören ta…

  5. Upphandling av IT-resurser- Ramavtal

    Statens fastighetsverk · 2025-04-03 · sista anbudsdag 2025-04-28 · 220 000 000 SEK · Upphandling

    Då de egna resurserna inom verksamheten är få sätter detta ramarna för hur omfattande olika initiativ kan göras. Externa resurser kan från tid till annan komma att engageras i kortare och längre uppdrag. Det kan röra sig om engångsinsatser i enstaka projekt eller helhetsåtaganden där leverantören ta…