Blindtest · 10.08.2026

Fem talesystemer, 1 314 blinde sammenligninger

Name: Kvad blindtest 2026: parvise sammenligninger av norsk tekst-til-tale
Creator: Kvad
Published: 2026-08-10

Kvad Delta mot Cartesia, Azure, ElevenLabs og Google, dømt blindt av 185 norske lyttere. Her ligger hele datagrunnlaget, inkludert kategorien vi ikke vant.

Kvad gjennomførte 10. august 2026 en blind lyttetest der fem tekst-til-tale-systemer for norsk ble sammenlignet parvis: Kvad Delta, Cartesia Sonic 3.5, Microsoft Azure, ElevenLabs Flash v2.5 og Google Chirp 3 HD. 185 personer startet testen, 159 av dem avga minst én gyldig stemme, og til sammen ble det avgitt 1 314 gyldige parvise sammenligninger fordelt på ni kategorier norsk tale. Kvad Delta vant 76,3 prosent av sammenligningene systemet deltok i (556 av 729), høyest av de fem. Den svakeste kategorien for Kvad var opplest nyhetstekst, med 49,3 prosent (36 av 73) — i praksis uavgjort.

Hvem står bak testen

Testen er utformet, gjennomført og publisert av Kvad, som selv er ett av de fem systemene i den. Det er grunnen til at hele datasettet, alle testsetningene og alle eksklusjonskriteriene ligger åpent på denne siden: du skal kunne etterprøve tallene i stedet for å ta vårt ord for dem.

Hovedtall

185

Startet testen

1 314

Gyldige sammenligninger

76,3 %

Samlet vinnrate, Kvad Delta

Kategorier norsk tale

185 personer registrerte seg og startet testen. 159 av dem avga minst én gyldig stemme, og 138 fullførte hele økten på ni par. Resultatene under bygger på alle 1 314 gyldige stemmene. Ingen er ekskludert.

Metodikk

Hver deltaker fikk høre to klipp av samme setning, lest av to forskjellige systemer, uten å få vite hvilke. Deltakeren valgte det klippet som hørtes mest naturlig norsk ut, og gikk videre til neste par. En fullført økt besto av ni par, ett fra hver kategori.

Systemer i testen: Fem systemer, alle med sin beste tilgjengelige norske stemme på testtidspunktet: Kvad Delta, Cartesia Sonic 3.5, Microsoft Azure, ElevenLabs Flash v2.5 og Google Chirp 3 HD.
Klipp og setninger: Ni kategorier, én kanonisk norsk testsetning per kategori, generert av alle fem systemene. 45 klipp totalt. Samme tekst, samme rekkefølge på ordene, ingen manuell etterredigering av lyden.
Format: Parvis A/B, blindt. Systemnavn ble aldri vist, og rekkefølgen A/B ble tilfeldig trukket for hvert par. Deltakeren kunne spille av begge klippene så mange ganger hen ville før valget.
Rekruttering: Åpen påmelding blant norsktalende. Ingen betaling, ingen forhåndsscreening på lyttererfaring. Deltakerne visste at testen kom fra Kvad, men ikke hvilket klipp som var vårt.

De ni testsetningene

Alle fem systemene leste nøyaktig disse setningene. Kategoriene er valgt fordi de treffer der norsk talesyntese vanligvis ryker: tonelag, tall, stedsnavn, sammensetninger og engelske lånord i norsk setning.

Tall og pengertall-penger: «Prisen er 149,95 kroner, en økning på 3,5 prosent siden i fjor.»
Stedsnavnstedsnavn: «Fra Geiranger via Trondheim til Hammerfest og Bardufoss.»
Kundeservicenaturlig-kundeservice: «Takk for at du ringer. For at jeg skal hjelpe deg raskest mulig, trenger jeg fødselsdatoen og postnummeret ditt.»
Blandet norsk-engelskblandet-engelsk: «Last ned appen og logg inn med BankID for å komme i gang.»
Sammensatte ordsammensatte-ord: «Fylkeskommunen behandlet barnehagesøknaden og trafikksikkerhetstiltakene.»
Lydboknaturlig-lydbok: «Det var en gang en liten by ved havet, hvor alle kjente alle — helt til den dagen de fremmede kom.»
Samtalenaturlig-samtale: «Hei! Skal vi ta en kaffe i morgen, eller passer det bedre på fredag?»
Dato og klokkeslettdato-klokke: «Toget går fra spor 3 klokken 14.30, og er framme i Bergen 19.05.»
Nyhetsopplesningnaturlig-nyhet: «Regjeringen la i dag frem forslaget til nytt statsbudsjett, med økte bevilgninger til helse og utdanning.»

Eksklusjonskriterier

Tre forhold ville gjort en stemme ugyldig. Alle stemmer ble sjekket mot alle tre, og ingen av dem slo ut:

Kontrollpar: Et par der begge klippene kom fra samme system. Velger man «forskjell» der det ikke finnes noen, klikker man i blinde.
Manglende avspilling: En stemme avgitt uten at begge klippene faktisk var spilt av minst én gang.
For rask beslutning: En stemme avgitt raskere enn det tar å høre begge klippene ferdig.

Resultat: 0 av 1 314 stemmer forkastet. Alle stemmer i datasettet er kontrollert mot kriteriene over, ikke bare antatt gyldige.

Brukte deltakerne faktisk tid?

Et blindtestresultat er bare verdt noe hvis folk lyttet. Tre tall fra loggen, som alle ligger i det nedlastbare datasettet:

18,6 s

Snitt beslutningstid per par

15,0 s

Median beslutningstid

2,64

Avspillinger per stemme i snitt

Full hode-mot-hode-matrise

Alle 20 systempar, uavkortet. Les rad mot kolonne: prosenten er hvor ofte radens system vant over kolonnens i direkte A/B-sammenligning, og tallet under er stemmene bak (radens seire mot kolonnens).

Hode-mot-hode-resultater mellom fem tekst-til-tale-systemer. Hver celle viser radsystemets vinnprosent mot kolonnesystemet, og antall seire mot tap.
System	Kvad Delta	Cartesia Sonic 3.5	Microsoft Azure	ElevenLabs Flash v2.5	Google Chirp 3 HD
Kvad Delta	Samme system	62%114–69	79%144–38	83%151–31	81%147–35
Cartesia Sonic 3.5	38%69–114	Samme system	77%75–23	68%67–31	79%77–20
Microsoft Azure	21%38–144	23%23–75	Samme system	51%50–48	58%56–41
ElevenLabs Flash v2.5	17%31–151	32%31–67	49%48–50	Samme system	53%51–46
Google Chirp 3 HD	19%35–147	21%20–77	42%41–56	47%46–51	Samme system

55 % og over: tydelig seier for raden
45–55 %: for jevnt til å skille systemene
45 % og under: tydelig tap for raden

Samlet vinnrate

Andel vunne sammenligninger av alle kampene systemet deltok i, uansett motstander og kategori.

Kvad Delta556 / 729 seire av kamper76,3 %
Cartesia Sonic 3.5288 / 476 seire av kamper60,5 %
Microsoft Azure167 / 475 seire av kamper35,2 %
ElevenLabs Flash v2.5161 / 475 seire av kamper33,9 %
Google Chirp 3 HD142 / 473 seire av kamper30,0 %

Resultat per kategori

Kvad Delta sin vinnrate innenfor hver kategori, mot alle fire konkurrenter samlet. 50 prosent er nullpunktet: der er Kvad verken bedre eller dårligere enn systemene det måles mot.

0 %50 % · myntkast100 %

Tall og pengertall-penger64 av 71 sammenligninger90,1 %
Stedsnavnstedsnavn63 av 75 sammenligninger84,0 %
Kundeservicenaturlig-kundeservice72 av 88 sammenligninger81,8 %
Blandet norsk-engelskblandet-engelsk71 av 90 sammenligninger78,9 %
Sammensatte ordsammensatte-ord63 av 80 sammenligninger78,8 %
Lydboknaturlig-lydbok55 av 72 sammenligninger76,4 %
Samtalenaturlig-samtale68 av 91 sammenligninger74,7 %
Dato og klokkeslettdato-klokke64 av 89 sammenligninger71,9 %
Nyhetsopplesningnaturlig-nyhetuavgjort36 av 73 sammenligninger49,3 %

Sterkest: 90,1 % · svakest: 49,3 %. Søylene er farget etter samme regel som krysstabellen over: grønn er tydelig seier, grå er for jevnt til å skille.

Kategorien vi ikke vant

Nyhetsopplesning · naturlig-nyhet

49,3 %

36 av 73 sammenligninger

50 % · myntkast

I opplest nyhetstekst vant Kvad Delta 36 av 73 sammenligninger. Det er ikke et tap, men det er heller ingen seier — det er et myntkast, og den eneste av de ni kategoriene der vi ikke skiller oss fra konkurrentene.

Vår hypotese, som dataene ikke beviser

Nyhetsopplesning er den mest konvensjonaliserte norske taleformen som finnes: jevnt tempo, flat følelse, forutsigbar frasering. Det er også registeret de store engelskspråklige modellene har mest av i treningsdataene sine. Der andre kategorier belønner naturlig, uforutsigbar norsk prosodi, belønner denne kategorien det motsatte, og forspranget vårt forsvinner.

Hvorfor tallet står her

En test der den som tester vinner alt, er ikke en test. Vi publiserer denne kategorien like tydelig som de åtte andre, med samme datagrunnlag, fordi et resultat du ikke kan etterprøve er verdiløst — også når det er i vår favør.

Setningen som ble lest

«Regjeringen la i dag frem forslaget til nytt statsbudsjett, med økte bevilgninger til helse og utdanning.»

Last ned datasettet

Hele grunnlaget for tallene på denne siden ligger åpent som JSON. Én rad per stemme, med kategori, testsetning, de to systemene som ble sammenlignet, hvilket som vant og tapte, beslutningstid i millisekunder og antall avspillinger.

Datasettet inneholder ingen personopplysninger: ingen navn, ingen e-postadresser, ingen deltaker- eller sesjons-ID-er, og ingenting som kan knytte enkeltstemmer til en person.

Last ned votes-anonymized.json

JSON · 1 314 rader · alle stemmer, ingen filtrering

Samme data, kortversjon

Krysstabellen på produktsiden bygger på nøyaktig disse tallene. Der ligger den som ett av flere argumenter for Delta-modellen; her ligger hele grunnlaget.

Se Kvad Delta på produktsiden →