Rijksmap › Ministerie van Binnenlandse Zaken en Koninkrijksrelaties › rapport

Externe beoordeling beleidsdoorlichting Bureau ICT-toetsing (BIT)

2019-11-22 · Onderzoeken en evaluaties: Universiteit Leiden, Instituut Bestuurskunde · standaard Regeling Periodiek Evaluatieonderzoek (RPE) · Toezicht & onderzoek

Open het rapport bij de bron Toon dit rapport in de interactieve Rijksmap

Waar gaat dit rapport over?

AI-samenvatting

De kwaliteit van de beleidsdoorlichting van het Bureau ICT-toetsing (BIT) over de periode 2017-2018 is beoordeeld door een onafhankelijk deskundige, zoals de Regeling Periodiek Evaluatieonderzoek vereist. Het oordeel: de door Twynstra Gudde uitgevoerde doorlichting is onder grote tijdsdruk tot stand gekomen, het onderliggende evaluatiemateriaal is niet dekkend en de analyse van de doelmatigheid is in opzet en uitwerking matig. Door onnauwkeurig gebruik van vaktermen en het ontbreken van een stelselmatige analyse van het instrumentarium zijn de uitspraken over doeltreffendheid en doelmatigheid beperkt onderbouwd; de conclusies zouden genuanceerder en voorzichtiger moeten. Aanbevolen wordt om bij een volgende doorlichting eerder te beginnen en vooraf een evalueerbaarheids- of haalbaarheidstoets uit te voeren op de beschikbaarheid van basismateriaal.

Risicothema's

Governance en verslaggevingDigitale disruptie, nieuwe technologie en AI

Waarom deze indeling: Governance: het oordeel betreft de kwaliteit en onderbouwing van een verantwoordingsinstrument (de beleidsdoorlichting) en de naleving van de RPE-eisen. Digital: het doorgelichte BIT toetst ICT-projecten van de rijksoverheid; externe ontwikkelingen als de krappe ICT-arbeidsmarkt en digitalisering bleven onderbelicht.

Toegekend met een AI-model (Fable 5) op basis van de zestien thema's van Risk in Focus; niet door mensen gevalideerd. Om de labels beter te onderbouwen gaan we ze gefaseerd herbeoordelen met een tweede, onafhankelijk model van een andere aanbieder (OpenAI naast Anthropic); vanwege tokenlimieten gebeurt dat stapsgewijs. Ziet u een fout? Laat het weten.

Waar hoort dit rapport bij?

Ministerie: Ministerie van Binnenlandse Zaken en Koninkrijksrelaties
Onderdeel volgens het rapport: Bureau ICT-toetsing (BIT)
Bron: Onderzoeken en evaluaties: Universiteit Leiden, Instituut Bestuurskunde
Toegepaste standaard: Regeling Periodiek Evaluatieonderzoek (RPE)
Datum: 2019-11-22

Bronnen

Het rapport zelf: originele publicatie
Omschrijving: samenvatting door een AI-model (Fable 5) op basis van de publicatie
Risicolabels: toegekend met een AI-model (Fable 5) volgens de zestien thema's van Risk in Focus (ECIIA), niet door mensen gevalideerd
Bijgewerkt: augustus 2026