Raskere og mer presis KI i Cobrief

De siste ukene har vi jobbet mye med KI-en i Cobrief. Vi har sett på hvilken modell som gjør hvilken jobb, hva modellene får lese, og hvordan vi ber dem om svar. Resultatet er en agent som er raskere og får gjort mer, og svar og uttrekk som treffer bedre.

Kort oppsummert

Agenten svarer over tre ganger så raskt og får gjort nesten dobbelt så mye med den samme KI-kapasiteten.
Egne vurderingskriterier gir flere riktige svar, på halve tiden.
Vareplukk velger riktig produkt oftere og fyller inn riktig pris.
Kvalifikasjonskrav og frister hentes ut enda mer presist og detaljert.
Briefen er kortere og gjentar ikke det du ser ellers på siden.

Agenten: raskere, og mer for pengene

Agenten har fått en ny språkmodell. Vi testet den mot den forrige modellen på ekte samtaler før vi byttet. Agenten bruker nå i snitt rundt 30 sekunder på en oppgave, mot nesten to minutter før.

Den bruker også langt mindre regnekraft per oppgave. For dere betyr det at agenten får gjort nesten dobbelt så mye før KI-kapasiteten i planen er brukt opp. Dere kan altså skrive flere tilbudssvar, gå gjennom flere dokumenter og stille flere spørsmål for det samme.

Egne vurderingskriterier: flere riktige svar på halve tiden

Med egne vurderingskriterier stiller dere de samme spørsmålene til hvert anbud, for eksempel om dere har sertifiseringene som kreves, eller hvor lang avtalen er. Cobrief leser konkurransegrunnlaget og svarer.

Flere svar er helt riktige og komplette. Vi har målt svarene mot fasitsvar på 18 komplette anbud.
Store anbud går mye bedre. Når anbudet får plass, leser KI-en nå hele dokumentpakken, ikke bare utdrag. På store anbud med opptil 190 dokumenter gir det halvparten flere helt riktige svar.
Svarene kommer på halve tiden.

Vareplukk: riktigere produkt og pris

Vareplukk fyller ut prisskjemaet i anbudet med produkter fra produktregisteret deres. Vi har bygget utfyllingen om fra bunnen av, og den ser nå også etter billigere produkter som er like gode.

Riktig produkt oftere. KI-en velger riktig produkt i 84 % av radene i testene våre.
Riktig pris. Prisen er riktig i 98 % av radene i testene våre.
Tom rad når ingenting passer. Finnes det ikke et produkt som oppfyller kravene, står raden tom, i stedet for at den får et produkt som ikke passer.

Kvalifikasjonskrav: ett krav per rad, enda mer presist

Cobrief henter ut kvalifikasjonskravene fra kunngjøringen og dokumentene, så dere raskt ser om dere kan levere. Nå er uttrekket enda mer presist og detaljert.

Ett krav per rad. Dokumentasjonen står sammen med kravet den hører til, og hvert krav står én gang.
Skarpere skille mot kontraktsvilkår. Kontraktsvilkår, som krav om lærlinger eller lønn, holdes adskilt fra kvalifikasjonskravene.
Tallene står ordrett. Terskler, antall og sertifikater står slik oppdragsgiver skrev dem, for eksempel «ikke eldre enn 6 måneder».
Flere krav kommer med, også krav som står i egne kravdokumenter.
Lenken er enda mer presis. Klikker du på et krav, kommer du enda oftere rett til stedet i dokumentet der det står.

Frister: presise datoer, også fra fritekst

Mange frister står bare i teksten i kunngjøringen, ikke i datofeltene. Det gjelder særlig kunngjøringer fra TED. Cobrief leser nå hele teksten. I testene våre får vi alle tilbudsfristene og de andre fristene for leverandøren riktig i 97 % av anbudene. Flytter oppdragsgiver en frist med en ny kunngjøring eller en rettelse, får dere den nye datoen.

Kortere brief

Briefen er nå på under 100 ord. Den gjentar ikke frist, verdi og varighet, som dere ser andre steder på siden. Plassen går heller til det som skiller anbudet fra andre. Omfang står i bransjens egne enheter, for eksempel antall konsulenter eller kilometer vei.

Slik har vi jobbet

For hver funksjon har vi laget egne tester med ekte anbud og fasitsvar skrevet fra hele dokumentpakken. Hver endring er målt mot fasiten før den går ut. En del av anbudene holder vi utenfor mens vi justerer, så vi ser at forbedringene også holder på anbud vi ikke har tilpasset oss etter.

Så velger vi den modellen som gir best resultat for hver jobb, i stedet for én modell til alt. Når det kommer nye modeller, kan vi teste dem med en gang.

Endringene er allerede ute i Cobrief. Har dere spørsmål eller tilbakemeldinger, ta gjerne kontakt.