Norsk AI-barometer

Hvor godt løser AI norske arbeidsoppgaver?

Hver uke gir Aprex 12 språkmodeller de samme 48 arbeidsoppgavene på bokmål og nynorsk. Vi måler hvor godt de løser dem, hva det koster og hvor lang tid det tar, og publiserer metoden sammen med tallene.

Sist oppdatert: 29. september 2026

Resultater

Siste måling

Plassering, poeng per type arbeid, kostnad og svartid for hver modell.

Første måling er ikke publisert ennå.

Tabellen er klar, men den fylles først når den første kjøringen har bestått kontrollene og er gjennomgått. Da ser du totalpoeng med usikkerhet, poeng per type arbeid, kostnad og svartid for hver modell.

48 oppgaver × 3 kjøringer · 12 modeller

Resultater per modell
PlassModellTotalpoengUttrekkKundesvarOppsum­meringRegelverkKlassi­fiseringNynorskKostnad per 100 oppgaverSvartid, median
–GPT-6 AstraOpenAIVenter––––––––
–Claude Opus 5.5AnthropicVenter––––––––
–Gemini 3.1 ProGoogleVenter––––––––
–Grok 4.7xAIVenter––––––––
–Mistral Medium 3.5MistralVenter––––––––
–DeepSeek V4 ProDeepSeekVenter––––––––
–Qwen 3.8 MaxAlibabaVenter––––––––
–Muse Spark 1.3MetaVenter––––––––
–GPT-6 LunaOpenAIRimeligVenter––––––––
–Claude Sonnet 5AnthropicRimeligVenter––––––––
–Gemini 3.8 FlashGoogleRimeligVenter––––––––
–Mistral Large 3MistralRimeligVenter––––––––

Poeng er 0–100, der alle seks typer arbeid teller likt. Tallet under totalpoengen er et 95 prosent konfidensintervall. Modeller med overlappende intervall regnes som like gode. Kostnad er målt pris hos leverandøren, uten mva.

Hva vi måler

Seks typer arbeid som går igjen i norske bedrifter.

Hver type har åtte oppgaver. Alle typene teller likt i totalpoengen.

01

Dokumentuttrekk

Hente riktige felt fra fakturaer, kontrakter og skjemaer, også felt som må regnes ut.

Poeng per felt mot fasit
02

Kundesvar

Svare kunder riktig og høflig med bare de opplysningene modellen har fått, uten å love noe.

Sjekkliste og dommere
03

Oppsummering

Skille beslutninger fra diskusjon, og få med hvem som skal gjøre hva innen når.

Sjekkliste og dommere
04

Regelverk

Svare riktig på konkrete spørsmål om norsk lov, med riktig hjemmel.

Sjekkliste mot lovteksten
05

Klassifisering

Sortere henvendelser etter faste definisjoner, også når de ligner hverandre.

Poeng per svar mot fasit
06

Nynorsk

Skrive korrekt og naturlig nynorsk uten bokmålsord.

Sjekkliste og dommere
Metode

Slik tester vi.

Testen følger en fast protokoll, så tallene kan sammenlignes fra uke til uke.

  1. 01

    Samme oppgaver

    Alle modellene får de samme 48 oppgavene og den samme instruksen. Ingenting tilpasses den enkelte modellen.

  2. 02

    Samme betingelser

    Modellene kjøres gjennom samme tjeneste, uten verktøy og uten nettsøk, med lik tidsgrense. Hver oppgave kjøres 3 ganger.

  3. 03

    Poeng mot fasit

    Felt, datoer og beløp sjekkes automatisk mot fasit. Tekstsvar får poeng for det som må være med, og trekk for feil, løfter og feil målform.

  4. 04

    Dommere fra andre leverandører

    Der kvalitet ikke kan måles med sjekkliste, vurderer to modeller fra andre leverandører svaret. Vurderingen deres teller høyst 40 prosent.

  5. 05

    Kontroll før publisering

    Hver oppgave er testet med fasit, et omformulert riktig svar og et feil svar før den brukes. Etter kjøringen går et menneske gjennom avvikene.

  6. 06

    Åpne tall

    Hver måling publiseres med usikkerhet, kostnad, svartid og en CSV-fil med alle tall.

Modellene

Hvem som testes.

Toppmodellene viser hva som er mulig. De rimelige modellene viser hva du får for pengene. Listen oppdateres når leverandørene lanserer nye modeller.

Toppmodeller

  • GPT-6 AstraOpenAI
  • Claude Opus 5.5Anthropic
  • Gemini 3.1 ProGoogle
  • Grok 4.7xAI
  • Mistral Medium 3.5Mistral
  • DeepSeek V4 ProDeepSeek
  • Qwen 3.8 MaxAlibaba
  • Muse Spark 1.3Meta

Rimelige modeller

  • GPT-6 LunaOpenAI
  • Claude Sonnet 5Anthropic
  • Gemini 3.8 FlashGoogle
  • Mistral Large 3Mistral
Eksempeloppgaver

Se hva modellene får.

Én offentlig oppgave per type, med fasit. De fleste oppgavene holdes skjult, så modellene ikke kan trenes på dem. Alt innhold er fiktivt.

DokumentuttrekkForfallsdato står ikke i fakturaen og må regnes ut. Tilbudsnummer, ordrenummer og kundenummer er lagt inn for å forvirre.Bokmål

Oppgave

Hent ut opplysningene fra fakturaen under. Svar bare med JSON med disse feltene: leverandor, fakturanummer, fakturadato (ÅÅÅÅ-MM-DD), forfallsdato (ÅÅÅÅ-MM-DD), belop_eks_mva (tall), mva (tall), belop_inkl_mva (tall), kid.

FAKTURA
Fjellvik Rør AS
Org.nr. 000 000 000 MVA (fiktivt)
Havnegata 12, 3100 Tønsberg

Kunde: Solbakken Bakeri AS
Kundenr. 10442
Ordrenr. 7781

Fakturanr.: 2026-0457
Fakturadato: 3. oktober 2026
Betalingsbetingelser: 14 dager netto
Gjelder: Utbedring av lekkasje, jf. tilbud 2026-0412

Beskrivelse                Antall   Pris       Sum
Arbeid rørlegger (timer)   6        1 450,00   8 700,00
Deler og materiell         1        3 800,00   3 800,00

Sum eks. mva                                  12 500,00
Mva 25 %                                       3 125,00
Å betale                                      15 625,00

Betales innen forfall. KID: 004571044215
Spørsmål om fakturaen? Skriv til regnskap@example.com

Fasit

{
  "leverandor": "Fjellvik Rør AS",
  "fakturanummer": "2026-0457",
  "fakturadato": "2026-10-03",
  "forfallsdato": "2026-10-17",
  "belop_eks_mva": 12500,
  "mva": 3125,
  "belop_inkl_mva": 15625,
  "kid": "004571044215"
}
KundesvarÅ bruke riktige fakta fra notatene og å la være å love kompensasjon selv om kunden er irritert.Bokmål

Oppgave

Skriv et svar på e-posten fra kunden. Bruk bare opplysningene i de interne notatene, og ikke lov noe som ikke står der. Maks 150 ord.

E-POST FRA KUNDEN
Emne: Hvor blir det av pakken?
Hei. Jeg bestilte en kaffemaskin for over en uke siden (ordre 48213) og har fortsatt ikke fått den. Dette er ikke greit. Hvis den ikke kommer snart, vil jeg ha pengene tilbake.
Hilsen Ingrid Aasen

INTERNE NOTATER
- Ordre 48213 ble sendt 24. september med Posten.
- Sporingsnummer: 70700000048213 (fiktivt).
- Forventet levering: 29. september.
- Forsinkelsen skyldes at varen var i restordre hos leverandøren.
- Retur: Kunden kan returnere uåpnet vare innen 30 dager etter mottak og få full refusjon.
- Vi har ikke fullmakt til å gi rabatt eller annen kompensasjon.

Fasit

Hei Ingrid,

Takk for at du sa ifra, og beklager at kaffemaskinen har latt vente på seg. Varen var dessverre i restordre hos leverandøren vår, men ordre 48213 ble sendt med Posten 24. september. Forventet levering er 29. september, og du kan følge pakken med sporingsnummer 70700000048213.

Skulle du likevel ønske å returnere maskinen, kan du sende den tilbake uåpnet innen 30 dager etter at du har mottatt den, og få hele beløpet refundert.

Ta gjerne kontakt hvis du har flere spørsmål.

Vennlig hilsen
Kundeservice
OppsummeringÅ skille beslutninger fra diskusjon og støy, og å ta med ansvar og frister.Bokmål

Oppgave

Oppsummer referatet under for en leder som ikke var på møtet. Maks 100 ord. Ta med alle beslutninger, og hvem som skal gjøre hva innen når. Ikke framstill forslag som ble avvist, som om de ble vedtatt.

REFERAT, PROSJEKTMØTE NETTBUTIKK, 1. OKTOBER
Til stede: Kari Lund (prosjektleder), Jonas Berg (utvikler), Sara Nilsen (markedsføring)

1. Lansering. Testene viste feil i betalingsløsningen. Lanseringen flyttes fra 20. oktober til 14. november. Vedtatt.
2. Språk. Sara foreslo å lansere på engelsk samtidig. Kari mente det var for tidlig. Forslaget ble ikke vedtatt, men tas opp igjen i januar.
3. Nynorsk. Nettbutikken skal ha nynorsk versjon fra lansering. Vedtatt. Sara skaffer oversetter innen 15. oktober.
4. Betaling. Jonas retter feilen i betalingsløsningen og leverer ny testversjon innen 24. oktober.
5. Diverse. Jonas nevnte at kontorkaffen er dårlig. Ingen beslutning.
Neste møte: 8. oktober.

Fasit

Lanseringen av nettbutikken er flyttet fra 20. oktober til 14. november fordi testene fant feil i betalingsløsningen. Nettbutikken skal ha nynorsk versjon fra lansering.

Oppgaver:
- Jonas retter betalingsfeilen og leverer ny testversjon innen 24. oktober.
- Sara skaffer oversetter til nynorsk innen 15. oktober.

Forslaget om engelsk versjon ble ikke vedtatt og tas opp igjen i januar. Neste møte er 8. oktober.
RegelverkAt fristen løper fra første dag i måneden etter oppsigelsen, og ikke fra oppsigelsesdagen.Bokmål

Oppgave

En ansatt i et aksjeselskap uten tariffavtale har jobbet der i åtte måneder. Arbeidsavtalen sier ingenting om oppsigelsestid eller prøvetid. Den ansatte leverer skriftlig oppsigelse 12. mars. Hvilken dag er siste dag i oppsigelsestiden, og hvilken bestemmelse i arbeidsmiljøloven bygger du på? Svar kort, maks 80 ord.

Fasit

Siste dag i oppsigelsestiden er 30. april. Når ikke annet er avtalt skriftlig eller i tariffavtale, er oppsigelsesfristen én måned etter arbeidsmiljøloven § 15-3 første ledd. Etter fjerde ledd løper fristen fra og med første dag i måneden etter at oppsigelsen ble levert, altså fra 1. april til og med 30. april.

Kilde: Arbeidsmiljøloven § 15-3 (Lovdata)

KlassifiseringPresis sortering etter gitte definisjoner, inkludert en melding på nynorsk og to som ligner hverandre (m8 og m10).Bokmål

Oppgave

Sorter hver melding i nøyaktig én kategori.

Kategorier:
- bestilling: kunden vil kjøpe noe eller endre en bestilling
- reklamasjon: kunden klager på feil eller mangel ved en vare eller tjeneste som er levert
- faktura: spørsmål om faktura, betaling eller purring
- support: kunden trenger hjelp til å bruke et produkt som virker
- oppsigelse: kunden vil avslutte et abonnement eller en avtale
- spam: uønsket reklame eller svindelforsøk

Svar bare med JSON der nøkkelen er meldingsnummeret og verdien er kategorien, for eksempel {"m1": "faktura"}.

m1: Hei, vi ønsker å bestille 20 kasser kopipapir til levering neste uke.
m2: Stolen vi fikk i går har en sprekk i setet. Hva gjør vi?
m3: Dere har sendt purring på en faktura vi betalte 2. september. Kan dere sjekke?
m4: Hvordan kobler jeg skriveren til det nye wifi-nettet?
m5: Vi vil avslutte serviceavtalen fra neste måned.
m6: GRATULERER! Du har vunnet en telefon. Klikk her for å hente premien.
m7: Kan vi endre bestillingen fra i går til 30 kasser i stedet for 20?
m8: Kaffemaskinen dere installerte forrige uke lekker vann. Kan dere sende noen?
m9: Eg vil seie opp abonnementet vårt på kaffi og vatn frå 1. desember.
m10: Fakturaen for reparasjonen er for høy. Dere har fakturert tre timer, men teknikeren var her i én time.

Fasit

{
  "m1": "bestilling",
  "m2": "reklamasjon",
  "m3": "faktura",
  "m4": "support",
  "m5": "oppsigelse",
  "m6": "spam",
  "m7": "bestilling",
  "m8": "reklamasjon",
  "m9": "oppsigelse",
  "m10": "faktura"
}
NynorskKorrekt nynorsk. Bokmålsord i svaret gir trekk.Nynorsk

Oppgave

Skriv om kunngjeringa under til korrekt nynorsk. Behald innhaldet og tonen. Svar berre med den nye teksten.

Vi har oppdatert åpningstidene våre. Fra mandag 6. oktober holder butikken åpent fra klokken 09 til 17 på hverdager. Hvis du har spørsmål, kan du ringe oss eller sende en e-post. Vi ser frem til å høre fra deg.

Fasit

Vi har oppdatert opningstidene våre. Frå måndag 6. oktober held butikken ope frå klokka 09 til 17 på kvardagar. Viss du har spørsmål, kan du ringje oss eller sende ein e-post. Vi ser fram til å høyre frå deg.
Endringslogg

Hva som er endret.

  1. Barometeret er lansert med testprotokoll 0.2, tolv modeller og seks offentlige eksempeloppgaver. Første måling er ikke kjørt ennå.

FAQ

Spørsmål og svar

Hva er Norsk AI-barometer?
En ukentlig test fra Aprex AS av hvordan ledende språkmodeller løser vanlige norske arbeidsoppgaver på bokmål og nynorsk. Resultatene viser poeng, kostnad og svartid per modell.
Hvilke modeller testes?
12 modeller fra 8 leverandører: GPT-6 Astra, Claude Opus 5.5, Gemini 3.1 Pro, Grok 4.7, Mistral Medium 3.5, DeepSeek V4 Pro, Qwen 3.8 Max, Muse Spark 1.3 som toppmodeller, og GPT-6 Luna, Claude Sonnet 5, Gemini 3.8 Flash, Mistral Large 3 som rimelige modeller. Endringer i listen står i endringsloggen.
Hvor ofte oppdateres barometeret?
Testen kjøres hver uke. Resultatene publiseres når kjøringen har bestått de automatiske kontrollene og Aprex har gått gjennom avvikene.
Hvordan får svarene poeng?
Hver oppgave gir 0–100 poeng. Uttrekk og klassifisering sjekkes felt for felt mot fasit. Tekstsvar får poeng fra en sjekkliste, og for kundesvar, oppsummering og nynorsk vurderer også to dommermodeller fra andre leverandører kvaliteten. Dommerne teller høyst 40 prosent.
Kan modellene ha sett oppgavene før?
Eksempeloppgavene på denne siden er offentlige. De fleste oppgavene holdes skjult og sendes bare til leverandører som ikke trener modellene på dataene.
Hvorfor viser dere kostnad og svartid?
Fordi den beste modellen ikke alltid er det beste valget. For mange oppgaver er en rimeligere og raskere modell god nok. Kostnaden er målt pris hos leverandøren og blandes ikke inn i poengene.
Kan jeg bruke tallene?
Ja. Oppgi Aprex som kilde og lenk til denne siden. Hver måling har en CSV-fil med alle tall.
Begrensninger

Hva tallene ikke sier

Resultatene gjelder disse oppgavene og de modellversjonene som var tilgjengelige den uken de ble målt. De sier ikke hvilken modell som er best til alt. Aprex bruker selv modeller fra flere av leverandørene. Leverandørene har ingen innflytelse på metoden og får ikke se resultatene før de publiseres.

Hvilken modell passer deres oppgaver?

Barometeret viser et snitt. Fortell hva dere vil bruke AI til, så hjelper vi dere med å velge og teste riktig modell på deres egne oppgaver.

Fortell hva dere vil teste →