Hurtigere og mere præcis AI i Cobrief

De seneste uger har vi arbejdet meget med AI'en i Cobrief. Vi har set på, hvilken model der laver hvilket job, hvad modellerne får at læse, og hvordan vi beder dem om svar. Resultatet er en agent, der er hurtigere og når mere, og svar og udtræk, der rammer bedre.

Kort fortalt

Agenten svarer over tre gange så hurtigt og når næsten dobbelt så meget med den samme AI-kapacitet.
Egne vurderingskriterier giver flere rigtige svar, på den halve tid.
Produktpluk vælger det rigtige produkt oftere og udfylder den rigtige pris.
Egnethedskrav og frister trækkes endnu mere præcist og detaljeret ud.
Briefen er kortere og gentager ikke det, du allerede ser andre steder på siden.

Agenten: hurtigere, og mere for pengene

Agenten har fået en ny sprogmodel. Vi testede den mod den tidligere model på rigtige samtaler, før vi skiftede. Agenten bruger nu i gennemsnit omkring 30 sekunder på en opgave, mod næsten to minutter før.

Den bruger også langt mindre regnekraft per opgave. For jer betyder det, at agenten når næsten dobbelt så meget, før AI-kapaciteten i jeres plan er brugt. I kan altså skrive flere tilbudssvar, gennemgå flere dokumenter og stille flere spørgsmål for det samme.

Egne vurderingskriterier: flere rigtige svar på den halve tid

Med Egne vurderingskriterier stiller I de samme spørgsmål til hvert udbud, for eksempel om I har de krævede certificeringer, eller hvor længe kontrakten løber. Cobrief læser udbudsmaterialet og svarer.

Flere svar er helt rigtige og fuldstændige. Vi har målt svarene mod facitsvar for 18 komplette udbud.
Store udbud går meget bedre. Når udbuddet kan være der, læser AI'en nu hele dokumentpakken, ikke kun uddrag. På store udbud med op til 190 dokumenter giver det halvdelen flere helt rigtige svar.
Svarene kommer på den halve tid.

Produktpluk: rigtigere produkt og pris

Produktpluk udfylder prisskemaet i udbuddet med produkter fra jeres produktregister. Vi har bygget funktionen om fra bunden, og den leder nu også efter billigere produkter, der er lige så gode.

Rigtigt produkt oftere. AI'en vælger det rigtige produkt i 84 % af rækkerne i vores test.
Rigtig pris. Prisen er rigtig i 98 % af rækkerne i vores test.
Tom række, når intet passer. Findes der ikke et produkt, der opfylder kravene, står rækken tom i stedet for at få et produkt, der ikke passer.

Egnethedskrav: ét krav per række, endnu mere præcist

Cobrief trækker egnethedskravene ud af udbudsbekendtgørelsen og dokumenterne, så I hurtigt kan se, om I kan levere. Nu er udtrækket endnu mere præcist og detaljeret.

Ét krav per række. Dokumentationen står sammen med det krav, den hører til, og hvert krav står én gang.
Skarpere skel til kontraktvilkår. Kontraktvilkår, som krav om lærlinge eller løn, holdes adskilt fra egnethedskravene.
Tallene står ordret. Tærskler, antal og certifikater står, som ordregiveren skrev dem, for eksempel "ikke ældre end 6 måneder".
Flere krav kommer med, også krav, der står i separate kravdokumenter.
Linket er endnu mere præcist. Klikker du på et krav, kommer du endnu oftere direkt til det sted i dokumentet, hvor det står.

Frister: præcise datoer, også fra fritekst

Mange frister står kun i teksten i bekendtgørelsen, ikke i datofelterne. Det gælder især bekendtgørelser fra TED. Cobrief læser nu hele teksten. I vores test får vi alle tilbudsfrister og de øvrige frister for leverandøren rigtige i 97 % af udbuddene. Flytter ordregiveren en frist med en ny bekendtgørelse eller en berigtigelse, får I den nye dato.

Kortere brief

Briefen er nu på under 100 ord. Den gentager ikke frist, værdi og varighed, som I kan se andre steder på siden. Pladsen går i stedet til det, der adskiller udbuddet fra andre. Omfang står i branchens egne enheder, for eksempel antal konsulenter eller kilometer vej.

Sådan har vi arbejdet

For hver funktion har vi bygget egne test med rigtige udbud og facitsvar skrevet ud fra hele dokumentpakken. Hver ændring måles mod facit, før den går ud. En del af udbuddene holder vi uden for, mens vi justerer, så vi kan se, at forbedringerne også holder på udbud, vi ikke har tilpasset os efter.

Derefter vælger vi den model, der giver det bedste resultat for hvert job, i stedet for én model til det hele. Når der kommer nye modeller, kan vi teste dem med det samme.

Ændringerne er allerede ude i Cobrief. Har I spørgsmål eller feedback, er I velkomne til at kontakte os.