Eén van de bureaus waarmee wij regelmatig samenwerken heeft de afgelopen jaren gewerkt aan een AI tool voor gedragsanalyses en interventie-ontwikkeling en BIT IenW gaat de uitdaging van een pilot aan. De komende vier maanden gaan we oefenen. Dat zit zo:
- De tool bevat een database van duizenden wetenschappelijke artikelen en grijze literatuur en wordt wekelijks aangevuld.
- De servers staan in Europa en prompts en geupload achtergrondmateriaal blijven vertrouwelijk. Al blijft natuurlijk gelden dat we geen vertrouwelijke zaken uploaden.
- Wat de tool doet is rekenen aan de verwachte effectiviteit van maatregelen om verschillende mogelijke doelgedragingen te bereiken. Ook heel fijn: De uitkomsten bevatten foutenmarges.
- De tool is zowel intern (op trainingsset van effect data) als extern (op reeks effectdata die niet in de trainingsset zaten) gevalideerd.
- Deze week gaan we in conclaaf om evaluatievragen te formuleren en om onderling praktische afspraken te maken.
Wat weten we al?
- Dit gaat minder goed werken dan AI voor het oplossen van wiskundige problemen. Daarbij geldt dat bij wiskunde automatische bewijsverificatie mogelijk is op van de grondbeginselen van de wiskunde en de fundamentele regels van de logica (zie ook link). Voor gedrag heb je te maken met de onvoorspelbaarheid van sociale en politieke factoren in de echte wereld.
- Tijd en geld gaat met name zitten in het uittesten van interventies in die echte wereld. Dat kan AI nog niet van ons overnemen. Al zou het al geweldig zijn om een betrouwbare voorselectie van kansrijke maatregelen met AI te verkrijgen.
- De AI uitkomsten moeten voor een mensenbrein herleidbaar zijn om vertrouwen te generen. Fijn dus dat de effectberekeningen gepaard gaan met een lijstje literatuurverwijzingen om een soort van comfortverhogende check mogelijk te maken.
bron: Volkskrant

Geen opmerkingen:
Een reactie posten