Van eis naar geverifieerd bewijs

Hoe vaak worden verificaties in feite niet goed uitgevoerd, of niet expliciet genoeg? Naar mijn ervaring te vaak. En je merkt het: stakeholders twijfelen nog steeds of het ontwerp of de uitvoering wel echt beheerst is als het gaat om het aantonen dat eisen zijn gehaald.

Soms komt dat doordat de eisen niet goed zijn opgeschreven. Daar schreef ik over in "Het risico zit in eisen". Maar er is een tweede reden die minstens zo reëel is: ontwerpende en uitvoerende partijen weten dat ze voldoen, maar dat is niet expliciet uit hun documenten te halen.

Daar helpt REF bij. REF neemt de administratieve last weg en doet voor de partij die de verificaties moet leveren twee dingen: het ondersteunt de verificatie zelf en het laat duidelijk zien waar nog iets ontbreekt. Zo kom je praktisch sneller én tot betere verificaties. Dat is makkelijk voor opdrachtgevers en makkelijk voor opdrachtnemers.

Opdrachtgevers kunnen REF ook gebruiken als auditinstrument. Ze kunnen binnenkomende stukken scannen die ter toetsing of acceptatie worden ingediend, en zien waar lage verificatiescores op risico’s wijzen. Een lage score betekent niet automatisch dat een eis niet is gehaald. Het betekent dat het niet aantoonbaar is uit het document dat voor je ligt.

Elke eis moet uiteindelijk door dezelfde toets: is hieraan daadwerkelijk voldaan? Het beantwoorden daarvan lijkt meer op documentenspeurwerk dan op engineering. Testrapporten, inspectieverslagen, berekeningen en ontwerpdocumenten staan verspreid over mappen en tellen elk honderden pagina’s. Bewijs vinden voor een eis is langdurig speurwerk, in elke projectfase, met echte gevolgen als het niet nauwkeurig gebeurt.

Zelfs als het bewijs in de documentatie aanwezig is, schaalt het handmatig vinden ervan en het beoordelen of het voldoende is niet bij duizenden eisen.

REF pakt het anders aan.

01 | Wat REF doet

De Requirements Evidence Finder gebruikt kunstmatige intelligentie om een eisenverificatie zelfstandig uit te voeren, of met een engineer in de loop. Voor elke eis zoekt REF kandidaat-bewijsplaatsen, beoordeelt de sterkte van de match en geeft een score die aangeeft hoe zeker het bewijs is.

REF beoordeelt ook claims over documenten heen. Het ontdekt tegenstrijdigheden tussen oplossingen of beweringen in de documenten die het vindt.

REF voert fasebewuste verificaties uit: bewijs in de ontwerpfase wordt anders beoordeeld dan in de realisatiefase, waar bewijs gemeten en waargenomen moet zijn volgens vooraf vastgestelde maatstaven en normen.

02 | Een score, geen oordeel

REF laat het bewijs zien, de sterkte van de koppeling en hoe zeker die is. De beoordeling komt met een score en een uitleg, en het eindoordeel laat REF aan jou. Zwakke matches worden gemarkeerd met opmerkingen voor nader onderzoek door een engineer. Sterke koppelingen worden gerapporteerd voor auditdoeleinden, en jij bevestigt de resultaten bij het exporteren.

Het door de engineer goedgekeurde register weegt zwaar. Alle documenten worden beoordeeld, het sterkste bewijs wordt naar voren gebracht, problemen worden helder gerapporteerd en ook positieve scores worden vastgelegd, met een bron en uitleg.

03 | Wat je terugkrijgt

Voor elke eis geeft REF terug:

• Het bewijs en het brondocument, met een uitleg van de claim, ook bij een gap of tegenstrijdigheid
• Een score voor matchsterkte en zekerheid
• Scoreverklaringen en gap-analyses bij problemen
• Een fase-afhankelijke indicator voor de toereikendheid
• Punten die zijn gemarkeerd voor menselijke beoordeling waar het bewijs onduidelijk of afwezig is

De uitvoer sluit direct aan op je verificatieregister, met elke koppeling herleidbaar naar de bron.

04 | Wat er niet meer doorheen glipt

Hoewel REF tijd bespaart, is dat niet het belangrijkste. Door de hoeveelheid documenten en bewijs in verificatieprocessen glippen kleine problemen er doorheen. REF vangt op wat anders door de mazen zou glippen. Het vindt het bewijs, controleert het in context en rapporteert. Jij bepaalt nog steeds wat voldoende is, werkt de onduidelijke gevallen door en draagt de verantwoordelijkheid voor het register dat naar de opdrachtgever gaat.

05 | Onderdeel van een bredere workflow

In het Basewise-platform staat REF aan het einde van de keten. DRE haalt eisen uit bronbestanden en RQA controleert hun kwaliteit. Verifiëren tegen eisen die al goed zijn geformuleerd helpt REF om betere matches te leveren.

Benieuwd wat REF vindt in je eigen projectdocumentatie? Vraag een demo aan en we laten het je zien.