Snellere en preciezere AI in Cobrief

De afgelopen weken hebben we hard gewerkt aan de AI in Cobrief. We hebben gekeken welk model welk werk doet, wat de modellen te lezen krijgen en hoe we ze om antwoorden vragen. Het resultaat is een agent die sneller is en meer gedaan krijgt, en antwoorden en uitlezingen die beter raak zijn.

In het kort

De agent antwoordt ruim drie keer zo snel en doet met dezelfde AI-capaciteit bijna twee keer zoveel.
Eigen beoordelingscriteria geven meer juiste antwoorden, in de helft van de tijd.
Productselectie kiest vaker het juiste product en vult de juiste prijs in.
Geschiktheidseisen en termijnen worden nog nauwkeuriger en gedetailleerder uitgelezen.
De briefing is korter en herhaalt niet wat je al elders op de pagina ziet.

De agent: sneller, en meer voor je geld

De agent heeft een nieuw taalmodel gekregen. Voor de overstap hebben we het op echte gesprekken vergeleken met het vorige model. De agent doet nu gemiddeld zo'n 30 seconden over een taak, tegen bijna twee minuten eerder.

Hij gebruikt ook veel minder rekenkracht per taak. Voor jullie betekent dit dat de agent bijna twee keer zoveel gedaan krijgt voordat de AI-capaciteit in jullie abonnement op is. Jullie kunnen dus meer inschrijvingsteksten schrijven, meer documenten doornemen en meer vragen stellen voor hetzelfde geld.

Eigen beoordelingscriteria: meer juiste antwoorden in de helft van de tijd

Met eigen beoordelingscriteria stellen jullie elke aanbesteding dezelfde vragen, bijvoorbeeld of jullie de gevraagde certificeringen hebben of hoe lang het contract loopt. Cobrief leest de aanbestedingsstukken en geeft antwoord.

Meer antwoorden zijn volledig juist en compleet. We hebben de antwoorden gemeten tegen modelantwoorden voor 18 complete aanbestedingen.
Grote aanbestedingen gaan veel beter. Als de aanbesteding past, leest de AI nu het hele documentpakket en niet alleen fragmenten. Bij grote aanbestedingen met tot 190 documenten levert dat 50 % meer volledig juiste antwoorden op.
De antwoorden komen in de helft van de tijd.

Productselectie: het juiste product en de juiste prijs

Productselectie vult de prijslijst in de aanbesteding in met producten uit jullie productregister. We hebben de functie van de grond af opnieuw gebouwd, en hij zoekt nu ook naar goedkopere producten die net zo goed zijn.

Vaker het juiste product. De AI kiest in onze tests in 84 % van de regels het juiste product.
De juiste prijs. De prijs klopt in onze tests in 98 % van de regels.
Lege regel als niets past. Is er geen product dat aan de eisen voldoet, dan blijft de regel leeg in plaats van dat er een product in komt dat niet past.

Geschiktheidseisen: één eis per regel, nog nauwkeuriger

Cobrief leest de geschiktheidseisen uit de aankondiging en de documenten, zodat jullie snel zien of jullie kunnen leveren. Het uitlezen is nu nog nauwkeuriger en gedetailleerder.

Eén eis per regel. De gevraagde bewijsstukken staan bij de eis waar ze bij horen, en elke eis staat er één keer.
Scherper onderscheid met contractvoorwaarden. Contractvoorwaarden, zoals eisen over leerlingen of lonen, worden apart gehouden van de geschiktheidseisen.
Cijfers staan er letterlijk. Drempels, aantallen en certificaten staan er zoals de aanbestedende dienst ze schreef, bijvoorbeeld "niet ouder dan 6 maanden".
Meer eisen worden gevonden, ook eisen in aparte eisendocumenten.
De link is nog preciezer. Klik je op een eis, dan kom je nog vaker direct op de plek in het document waar die staat.

Termijnen: precieze data, ook uit vrije tekst

Veel termijnen staan alleen in de tekst van de aankondiging, niet in de datumvelden. Dat geldt vooral voor aankondigingen op TED. Cobrief leest nu de volledige tekst. In onze tests krijgen we alle inschrijvingstermijnen en de andere termijnen voor de inschrijver goed in 97 % van de aanbestedingen. Verschuift de aanbestedende dienst een termijn met een nieuwe aankondiging of een rectificatie, dan krijgen jullie de nieuwe datum.

Een kortere briefing

De briefing telt nu minder dan 100 woorden. Hij herhaalt de termijn, waarde en looptijd niet, die jullie elders op de pagina zien. De ruimte gaat in plaats daarvan naar wat de aanbesteding onderscheidt van andere. De omvang staat in de eigen eenheden van de branche, bijvoorbeeld aantal consultants of kilometers weg.

Zo hebben we gewerkt

Voor elke functie hebben we eigen tests gebouwd met echte aanbestedingen en modelantwoorden die zijn geschreven op basis van het volledige documentpakket. Elke wijziging wordt daartegen gemeten voordat die live gaat. Een deel van de aanbestedingen houden we apart terwijl we bijstellen, zodat we zien dat de verbeteringen ook standhouden bij aanbestedingen waar we niet op hebben afgestemd.

Daarna kiezen we voor elke taak het model dat het beste resultaat geeft, in plaats van één model voor alles. Komen er nieuwe modellen uit, dan kunnen we die meteen testen.

De wijzigingen staan al live in Cobrief. Hebben jullie vragen of feedback, neem dan gerust contact met ons op.