diff --git a/pr-preview/pr-480/index.html b/pr-preview/pr-480/index.html
index 665340c4fd..2c6d224a37 100644
--- a/pr-preview/pr-480/index.html
+++ b/pr-preview/pr-480/index.html
@@ -95,7 +95,7 @@
     <div data-md-component="skip">
       
         
-        <a href="#het-algoritmekader" class="md-skip">
+        <a href="#algoritmekader" class="md-skip">
           Ga naar inhoud
         </a>
       
@@ -734,9 +734,9 @@
   
 
 
-<h1 id="het-algoritmekader">Het algoritmekader</h1>
+<h1 id="algoritmekader">Algoritmekader</h1>
 <div class="header-container">
-    <div class="subheader">Wetten en regels, tips en hulpmiddelen voor verantwoord gebruik van algoritmes. 
+    <div class="subheader">Wetten en regels, tips en hulpmiddelen voor verantwoord gebruik van algoritmes door de overheid. 
     <span class="version-container">
       <span class="version-label">bètaversie</span>
       <div class="hover-info">
@@ -753,42 +753,37 @@ <h1 id="het-algoritmekader">Het algoritmekader</h1>
     <div class="float-box">
     <h3><b>Onderwerpen</b></h3>
     <ul>
-      <li><a href="onderwerpen/bias-en-non-discriminatie/">Bias en non-discriminatie</a></li>
-      <li><a href="onderwerpen/governance/">Governance</a></li>
-      <li><a href="onderwerpen/transparantie/">Transparantie</a></li>    
-      <li><a href="onderwerpen/privacy-en-gegevensbescherming/">Privacy & gegevensbescherming</a></li>
-      <li><a href="onderwerpen/publieke-inkoop/">Publieke inkoop</a></li>
+      <li><a href="onderwerpen/bias-en-non-discriminatie/">Discriminerende effecten van algoritmes</a></li>   
+      <li><a href="onderwerpen/privacy-en-gegevensbescherming/">Privacy en persoonsgegevens beschermen</a></li>
+      <li><a href="onderwerpen/publieke-inkoop/">Publieke inkoop van algoritmes</a></li>
     </ul>
-    <a href="onderwerpen/" class="show-more"><b>Bekijk alle onderwerpen</b></a>
+    <a href="onderwerpen/" class="show-more"><b>Alle onderwerpen</b></a>
   </div>
   </div>
 
   <div class="float-child styled-list">
     <a class="glightbox" href="afbeeldingen/rollen.jpg" data-type="image" data-width="auto" data-height="auto" data-desc-position="bottom"><img src="afbeeldingen/rollen.jpg" alt="Afbeelding 2" class="block-image"></a>
     <div class="float-box">
-    <h3><b>Informatie per rol</b></h3>
+    <h3><b>Waar beginnen?</b></h3>
     <ul>
-      <li><a href="rollen/beleid-en-advies/">Beleid en advies</a></li>
-      <li><a href="rollen/jurist/">Jurist</a></li>
-      <li><a href="rollen/ontwikkelaar/">Ontwikkelaar</a></li>
-      <li><a href="rollen/projectleider/">Projectleider</a></li>
+      <li><a href="overhetalgoritmekader/soorten-algoritmes/">Wat is een algoritme?</a></li>
+      <li><a href="rollen/'>Rollen</a></li>
+      <li><a href="levenscyclus/">Levenscyclus van algoritmes</a></li>
+       <li><a href="onderwerpen/governance/">Governance van algoritmes binnen je organisatie</a></li>
     </ul>
-    <a href="rollen/" class="show-more"><b>Bekijk alle rollen</b></a>
+
   </div>
   </div>
 
   <div class="float-child styled-list">
     <a class="glightbox" href="afbeeldingen/monitoring.jpg" data-type="image" data-width="auto" data-height="auto" data-desc-position="bottom"><img src="afbeeldingen/monitoring.jpg" alt="Afbeelding 4" class="block-image"></a>
     <div class="float-box">
-    <h3><b>Levenscyclus</b></h3>
+    <h3><b>Eerste deadline: 2 februari 2025</b></h3>
     <ul>
-      <li><a href="levenscyclus/probleemanalyse/">Probleemanalyse</a></li>
-      <li><a href="levenscyclus/ontwerp/">Ontwerpen</a></li>
-      <li><a href="levenscyclus/dataverkenning-en-datapreparatie/">Dataverkenning & datapreparatie</a></li>    
-      <li><a href="levenscyclus/ontwikkelen/">Ontwikkelen</a></li>
-      <li><a href="levenscyclus/monitoring-en-beheer/">Monitoring & beheer</a></li>  
+      <li><a href="voldoen-aan-wetten-en-regels/ai-verordening/">Tijdlijn AI-verordening</a></li>
+      <li><a href="https://ai-verordening-beslishulp.apps.digilab.network/">Beslishulp AI-verordening</a></li>
     </ul>
-    <a href="levenscyclus/" class="show-more"><b>Bekijk de hele levenscyclus</b></a>
+
   </div>
   </div>
 
@@ -797,9 +792,9 @@ <h3><b>Levenscyclus</b></h3>
     <div class="float-box">
     <h3><b>Voldoen aan wetten en regels</b></h3>
     <ul>
-      <li><a href="voldoen-aan-wetten-en-regels/vereisten/">Vereisten</a></li>
-      <li><a href="voldoen-aan-wetten-en-regels/maatregelen/">Aanbevolen maatregelen</a></li>
-      <li><a href="voldoen-aan-wetten-en-regels/hulpmiddelen/">Aanbevolen hulpmiddelen</a></li>
+      <li><a href="voldoen-aan-wetten-en-regels/vereisten/">Overzicht vereisten voor de overheid</a></li>
+      <li><a href="voldoen-aan-wetten-en-regels/maatregelen/">Overzicht aanbevolen maatregelen</a></li>
+      <li><a href="voldoen-aan-wetten-en-regels/hulpmiddelen/">Overzicht aanbevolen hulpmiddelen</a></li>
     </ul>
     </div>
   </div>
@@ -828,7 +823,7 @@ <h3><b>Voldoen aan wetten en regels</b></h3>
     <span class="md-icon" title="Laatst geüpdatet">
       <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
     </span>
-    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">26 november 2024</span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
   </span>
 
     
diff --git a/pr-preview/pr-480/levenscyclus/dataverkenning-en-datapreparatie/index.html b/pr-preview/pr-480/levenscyclus/dataverkenning-en-datapreparatie/index.html
index f4d1faea57..c95e78340a 100644
--- a/pr-preview/pr-480/levenscyclus/dataverkenning-en-datapreparatie/index.html
+++ b/pr-preview/pr-480/levenscyclus/dataverkenning-en-datapreparatie/index.html
@@ -27,7 +27,7 @@
     
     
       
-        <title>Dataverkenning en datapreparatie - Algoritmekader (bèta)</title>
+        <title>Fase 3, dataverkenning en datapreparatie - Algoritmekader (bèta)</title>
       
     
     
@@ -97,7 +97,7 @@
     <div data-md-component="skip">
       
         
-        <a href="#vereisten" class="md-skip">
+        <a href="#fase-3-dataverkenning-en-datapreparatie" class="md-skip">
           Ga naar inhoud
         </a>
       
@@ -132,7 +132,7 @@
         <div class="md-header__topic" data-md-component="header-topic">
           <span class="md-ellipsis">
             
-              Dataverkenning en datapreparatie
+              Fase 3, dataverkenning en datapreparatie
             
           </span>
         </div>
@@ -595,7 +595,7 @@
   <span class="md-ellipsis">
     
   
-    Organisatieverantwoordelijkheden
+    Fase 0, organisatieverantwoordelijkheden
   
 
     
@@ -622,7 +622,7 @@
   <span class="md-ellipsis">
     
   
-    Probleemanalyse
+    Fase 1, probleemanalyse
   
 
     
@@ -649,7 +649,7 @@
   <span class="md-ellipsis">
     
   
-    Ontwerp
+    Fase 2, ontwerp
   
 
     
@@ -676,6 +676,8 @@
       <input class="md-nav__toggle md-toggle" type="checkbox" id="__toc">
       
       
+        
+      
       
         <label class="md-nav__link md-nav__link--active" for="__toc">
           
@@ -683,7 +685,7 @@
   <span class="md-ellipsis">
     
   
-    Dataverkenning en datapreparatie
+    Fase 3, dataverkenning en datapreparatie
   
 
     
@@ -700,7 +702,7 @@
   <span class="md-ellipsis">
     
   
-    Dataverkenning en datapreparatie
+    Fase 3, dataverkenning en datapreparatie
   
 
     
@@ -716,6 +718,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -767,7 +771,7 @@
   <span class="md-ellipsis">
     
   
-    Ontwikkelen
+    Fase 4, ontwikkelen
   
 
     
@@ -794,7 +798,7 @@
   <span class="md-ellipsis">
     
   
-    Verificatie en validatie
+    Fase 5, verificatie en validatie
   
 
     
@@ -821,7 +825,7 @@
   <span class="md-ellipsis">
     
   
-    Implementatie
+    Fase 6, implementatie
   
 
     
@@ -848,7 +852,7 @@
   <span class="md-ellipsis">
     
   
-    Monitoring en beheer
+    Fase 7, monitoring en beheer
   
 
     
@@ -875,7 +879,7 @@
   <span class="md-ellipsis">
     
   
-    Uitfaseren
+    Fase 8, uitfaseren
   
 
     
@@ -1038,6 +1042,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -1097,8 +1103,7 @@
   
 
 
-  <h1>Dataverkenning en datapreparatie</h1>
-
+<h1 id="fase-3-dataverkenning-en-datapreparatie">Fase 3: Dataverkenning en datapreparatie</h1>
 <p>In deze fase worden relevante datasets geïdentificeerd en wanneer nodig wordt nieuwe data verzameld. 
 In deze fase zal ook de ontwikkelomgeving (verder) worden ingericht indien nodig. 
 Het is van belang dat voorafgaand aan verzameling is vastgesteld dat de benodigde data mag worden verwerkt en dat de juiste maatregelen worden getroffen, zodra de data kan worden verwerkt. 
@@ -1143,7 +1148,7 @@ <h2 id="maatregelen">Maatregelen</h2>
     <span class="md-icon" title="Laatst geüpdatet">
       <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
     </span>
-    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">12 december 2024</span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
   </span>
 
     
diff --git a/pr-preview/pr-480/levenscyclus/implementatie/index.html b/pr-preview/pr-480/levenscyclus/implementatie/index.html
index d5e446f699..cb1d090542 100644
--- a/pr-preview/pr-480/levenscyclus/implementatie/index.html
+++ b/pr-preview/pr-480/levenscyclus/implementatie/index.html
@@ -27,7 +27,7 @@
     
     
       
-        <title>Implementatie - Algoritmekader (bèta)</title>
+        <title>Fase 6, implementatie - Algoritmekader (bèta)</title>
       
     
     
@@ -97,7 +97,7 @@
     <div data-md-component="skip">
       
         
-        <a href="#vereisten" class="md-skip">
+        <a href="#fase-6-implementatie" class="md-skip">
           Ga naar inhoud
         </a>
       
@@ -132,7 +132,7 @@
         <div class="md-header__topic" data-md-component="header-topic">
           <span class="md-ellipsis">
             
-              Implementatie
+              Fase 6, implementatie
             
           </span>
         </div>
@@ -595,7 +595,7 @@
   <span class="md-ellipsis">
     
   
-    Organisatieverantwoordelijkheden
+    Fase 0, organisatieverantwoordelijkheden
   
 
     
@@ -622,7 +622,7 @@
   <span class="md-ellipsis">
     
   
-    Probleemanalyse
+    Fase 1, probleemanalyse
   
 
     
@@ -649,7 +649,7 @@
   <span class="md-ellipsis">
     
   
-    Ontwerp
+    Fase 2, ontwerp
   
 
     
@@ -676,7 +676,7 @@
   <span class="md-ellipsis">
     
   
-    Dataverkenning en datapreparatie
+    Fase 3, dataverkenning en datapreparatie
   
 
     
@@ -703,7 +703,7 @@
   <span class="md-ellipsis">
     
   
-    Ontwikkelen
+    Fase 4, ontwikkelen
   
 
     
@@ -730,7 +730,7 @@
   <span class="md-ellipsis">
     
   
-    Verificatie en validatie
+    Fase 5, verificatie en validatie
   
 
     
@@ -757,6 +757,8 @@
       <input class="md-nav__toggle md-toggle" type="checkbox" id="__toc">
       
       
+        
+      
       
         <label class="md-nav__link md-nav__link--active" for="__toc">
           
@@ -764,7 +766,7 @@
   <span class="md-ellipsis">
     
   
-    Implementatie
+    Fase 6, implementatie
   
 
     
@@ -781,7 +783,7 @@
   <span class="md-ellipsis">
     
   
-    Implementatie
+    Fase 6, implementatie
   
 
     
@@ -797,6 +799,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -848,7 +852,7 @@
   <span class="md-ellipsis">
     
   
-    Monitoring en beheer
+    Fase 7, monitoring en beheer
   
 
     
@@ -875,7 +879,7 @@
   <span class="md-ellipsis">
     
   
-    Uitfaseren
+    Fase 8, uitfaseren
   
 
     
@@ -1038,6 +1042,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -1097,8 +1103,7 @@
   
 
 
-  <h1>Implementatie</h1>
-
+<h1 id="fase-6-implementatie">Fase 6: Implementatie</h1>
 <p>In deze fase wordt het algoritme in de praktijk gebracht en duurzaam geïntegreerd in het bedrijfsproces. 
 In de praktijk worden veelal eerst een pilot uitgevoerd voor een afgebakende periode of over een beperkt aan zaken. 
 In deze situatie, een pilot, wordt tijdelijk productiedata verwerkt. 
@@ -1143,7 +1148,7 @@ <h2 id="maatregelen">Maatregelen</h2>
     <span class="md-icon" title="Laatst geüpdatet">
       <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
     </span>
-    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">12 december 2024</span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
   </span>
 
     
diff --git a/pr-preview/pr-480/levenscyclus/index.html b/pr-preview/pr-480/levenscyclus/index.html
index b7a6e67538..a22f234d9d 100644
--- a/pr-preview/pr-480/levenscyclus/index.html
+++ b/pr-preview/pr-480/levenscyclus/index.html
@@ -595,7 +595,7 @@
   <span class="md-ellipsis">
     
   
-    Organisatieverantwoordelijkheden
+    Fase 0, organisatieverantwoordelijkheden
   
 
     
@@ -622,7 +622,7 @@
   <span class="md-ellipsis">
     
   
-    Probleemanalyse
+    Fase 1, probleemanalyse
   
 
     
@@ -649,7 +649,7 @@
   <span class="md-ellipsis">
     
   
-    Ontwerp
+    Fase 2, ontwerp
   
 
     
@@ -676,7 +676,7 @@
   <span class="md-ellipsis">
     
   
-    Dataverkenning en datapreparatie
+    Fase 3, dataverkenning en datapreparatie
   
 
     
@@ -703,7 +703,7 @@
   <span class="md-ellipsis">
     
   
-    Ontwikkelen
+    Fase 4, ontwikkelen
   
 
     
@@ -730,7 +730,7 @@
   <span class="md-ellipsis">
     
   
-    Verificatie en validatie
+    Fase 5, verificatie en validatie
   
 
     
@@ -757,7 +757,7 @@
   <span class="md-ellipsis">
     
   
-    Implementatie
+    Fase 6, implementatie
   
 
     
@@ -784,7 +784,7 @@
   <span class="md-ellipsis">
     
   
-    Monitoring en beheer
+    Fase 7, monitoring en beheer
   
 
     
@@ -811,7 +811,7 @@
   <span class="md-ellipsis">
     
   
-    Uitfaseren
+    Fase 8, uitfaseren
   
 
     
@@ -1009,6 +1009,11 @@ <h1 id="levenscyclus-algoritmes-en-ai">Levenscyclus algoritmes en AI</h1>
 <div class="grid cards" style="margin-top:32px;">
 <ul>
 <li>
+<p><a href="over-de-levenscyclus/"><strong>Over de levenscyclus</strong></a></p>
+<hr />
+<p>De levenscyclus helpt je te bepalen wat je wanneer moet doen. Hoe ziet dit eruit in een plaatje? En waarom 8 fasen?</p>
+</li>
+<li>
 <p><a href="organisatieverantwoordelijkheden/"><strong>Fase 0: Organisatieverantwoordelijkheden</strong></a></p>
 <hr />
 <p>Voordat je start met de ontwikkeling of het gebruik van een algoritme, zul je moeten zorgen dat je organisatie voldoende ingericht is om algoritmes te gebruiken of te ontwikkelen.</p>
@@ -1077,7 +1082,7 @@ <h1 id="levenscyclus-algoritmes-en-ai">Levenscyclus algoritmes en AI</h1>
     <span class="md-icon" title="Laatst geüpdatet">
       <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
     </span>
-    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">12 december 2024</span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
   </span>
 
     
diff --git a/pr-preview/pr-480/levenscyclus/monitoring-en-beheer/index.html b/pr-preview/pr-480/levenscyclus/monitoring-en-beheer/index.html
index b7275dfe47..3868b27b4d 100644
--- a/pr-preview/pr-480/levenscyclus/monitoring-en-beheer/index.html
+++ b/pr-preview/pr-480/levenscyclus/monitoring-en-beheer/index.html
@@ -27,7 +27,7 @@
     
     
       
-        <title>Monitoring en beheer - Algoritmekader (bèta)</title>
+        <title>Fase 7, monitoring en beheer - Algoritmekader (bèta)</title>
       
     
     
@@ -97,7 +97,7 @@
     <div data-md-component="skip">
       
         
-        <a href="#vereisten" class="md-skip">
+        <a href="#fase-7-monitoring-en-beheer" class="md-skip">
           Ga naar inhoud
         </a>
       
@@ -132,7 +132,7 @@
         <div class="md-header__topic" data-md-component="header-topic">
           <span class="md-ellipsis">
             
-              Monitoring en beheer
+              Fase 7, monitoring en beheer
             
           </span>
         </div>
@@ -595,7 +595,7 @@
   <span class="md-ellipsis">
     
   
-    Organisatieverantwoordelijkheden
+    Fase 0, organisatieverantwoordelijkheden
   
 
     
@@ -622,7 +622,7 @@
   <span class="md-ellipsis">
     
   
-    Probleemanalyse
+    Fase 1, probleemanalyse
   
 
     
@@ -649,7 +649,7 @@
   <span class="md-ellipsis">
     
   
-    Ontwerp
+    Fase 2, ontwerp
   
 
     
@@ -676,7 +676,7 @@
   <span class="md-ellipsis">
     
   
-    Dataverkenning en datapreparatie
+    Fase 3, dataverkenning en datapreparatie
   
 
     
@@ -703,7 +703,7 @@
   <span class="md-ellipsis">
     
   
-    Ontwikkelen
+    Fase 4, ontwikkelen
   
 
     
@@ -730,7 +730,7 @@
   <span class="md-ellipsis">
     
   
-    Verificatie en validatie
+    Fase 5, verificatie en validatie
   
 
     
@@ -757,7 +757,7 @@
   <span class="md-ellipsis">
     
   
-    Implementatie
+    Fase 6, implementatie
   
 
     
@@ -784,6 +784,8 @@
       <input class="md-nav__toggle md-toggle" type="checkbox" id="__toc">
       
       
+        
+      
       
         <label class="md-nav__link md-nav__link--active" for="__toc">
           
@@ -791,7 +793,7 @@
   <span class="md-ellipsis">
     
   
-    Monitoring en beheer
+    Fase 7, monitoring en beheer
   
 
     
@@ -808,7 +810,7 @@
   <span class="md-ellipsis">
     
   
-    Monitoring en beheer
+    Fase 7, monitoring en beheer
   
 
     
@@ -824,6 +826,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -875,7 +879,7 @@
   <span class="md-ellipsis">
     
   
-    Uitfaseren
+    Fase 8, uitfaseren
   
 
     
@@ -1038,6 +1042,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -1097,8 +1103,7 @@
   
 
 
-  <h1>Monitoring en beheer</h1>
-
+<h1 id="fase-7-monitoring-en-beheer">Fase 7: Monitoring en beheer</h1>
 <p>Het algoritme wordt in deze fase voortdurend gemonitord om ervoor te zorgen dat het blijft presteren zoals verwacht en kan worden gebruikt door gebruikers. 
 Eventuele afwijkingen of degradatie van prestaties worden gesignaleerd en er worden maatregelen getroffen om dit te herstellen. 
 Dit is van belang vanuit een technisch perspectief (presteert het model nog wel waar het voor ontworpen is), maar ook vanuit een juridische en ethische blik (functioneert het model nog wel rechtmatig en zijn er geen onvoorziene nadelige effecten op mens en maatschappij). 
@@ -1108,7 +1113,7 @@ <h1>Monitoring en beheer</h1>
 Een wijziging in onderliggende systemen kan er bijvoorbeeld voor zorgen dat het algoritme niet meer wordt voorzien van de noodzakelijk data om de benodigde output te genereren. 
 Het beheerteam zorgt ervoor dat dergelijke situaties worden voorkomen of opgelost. Er kunnen ook incidenten worden gemeld door gebruikers die worden opgelost door het beheerteam.  </p>
 <h2 id="vereisten">Vereisten</h2>
-<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">aia-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/index.html">aia-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/index.html">Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">aia-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/index.html">aia-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/index.html">Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">aia-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/index.html">aia-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/index.html">Documentatie over hoog-risico-AI-systemen wordt 10 jaar bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/index.html">aia-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/index.html">Logs van hoog-risico-AI-systemen worden zes maanden bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/index.html">aia-18</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/index.html">Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/index.html">aia-22</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/index.html">De werking van hoog-risico-AI-systemen wordt gemonitord</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/index.html">aia-23</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/index.html">Logs voor hoog-risico-AI-systemen worden bewaard door de gebruiksverantwoordelijke</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/index.html">aia-25</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/index.html">Gebruiksverantwoordelijken controleren de registratie van het hoog-risico AI-systeem in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">aia-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">Mensen over wie besluiten worden genomen door een hoog-risico-AI-systemen, krijgen op verzoek informatie over deze besluiten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/index.html">aia-29</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/index.html">AI-modellen voor algemene doeleinden zijn voorzien van voldoende technische documentatie en informatie</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/index.html">aia-30</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/index.html">Aanbieders van AI-modellen voor algemene doeleinden met een systeemrisico treffen extra maatregelen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/index.html">aia-31</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/index.html">Als AI-modellen voor algemene doeleinden met systeemrisico’s ernstige incidenten veroorzaken, wordt dit gedocumenteerd en gerapporteerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/index.html">aia-32</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/index.html">AI-modellen voor algemene doeleinden met systeemrisico’s zijn voldoende beveiligd tegen cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/index.html">aia-34</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/index.html">Hoog-risico-AI-systemen zijn voorzien van een monitoringsysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/index.html">aia-35</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/index.html">Ernstige incidenten door hoog-risico-AI-systemen worden gemeld aan de toezichthouder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/index.html">aia-36</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/index.html">Klokkenluiders kunnen veilig melden dat een organisatie zich niet houdt aan de AI-verordening</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html">arc-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html">Informatie over algoritmes wordt gedocumenteerd volgens de Archiefwet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/index.html">avg-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/index.html">Organisaties zijn transparant over het verwerken van persoonsgegevens</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/index.html">awb-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/index.html">Organisaties kunnen duidelijk uitleggen waarom en hoe algoritmes leiden tot een besluit</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/index.html">bzk-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/index.html">Impactvolle algoritmes en hoog-risico-AI-systemen staan in het Nederlandse Algoritmeregister</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/index.html">grw-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/index.html">Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/index.html">grw-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/index.html">Algoritmes discrimineren niet</a></td></tr></tbody></table>
+<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">aia-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/index.html">aia-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/index.html">Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">aia-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/index.html">aia-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/index.html">Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">aia-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/index.html">aia-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/index.html">Documentatie over hoog-risico-AI-systemen wordt 10 jaar bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/index.html">aia-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/index.html">Logs van hoog-risico-AI-systemen worden zes maanden bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/index.html">aia-18</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/index.html">Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/index.html">aia-22</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/index.html">De werking van hoog-risico-AI-systemen wordt gemonitord</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/index.html">aia-23</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/index.html">Logs voor hoog-risico-AI-systemen worden bewaard door de gebruiksverantwoordelijke</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/index.html">aia-25</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/index.html">Gebruiksverantwoordelijken controleren de registratie van het hoog-risico AI-systeem in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">aia-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">Mensen over wie besluiten worden genomen door een hoog-risico-AI-systemen, krijgen op verzoek informatie over deze besluiten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/index.html">aia-29</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/index.html">AI-modellen voor algemene doeleinden zijn voorzien van voldoende technische documentatie en informatie</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/index.html">aia-30</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/index.html">Aanbieders van AI-modellen voor algemene doeleinden met een systeemrisico treffen extra maatregelen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/index.html">aia-31</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/index.html">Als AI-modellen voor algemene doeleinden met systeemrisico’s ernstige incidenten veroorzaken, wordt dit gedocumenteerd en gerapporteerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/index.html">aia-32</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/index.html">AI-modellen voor algemene doeleinden met systeemrisico’s zijn voldoende beveiligd tegen cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/index.html">aia-34</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/index.html">Hoog-risico-AI-systemen zijn voorzien van een monitoringsysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/index.html">aia-35</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/index.html">Ernstige incidenten door hoog-risico-AI-systemen worden gemeld aan de toezichthouder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/index.html">aia-36</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/index.html">Klokkenluiders kunnen veilig melden dat een organisatie zich niet houdt aan de AI-verordening</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/index.html">aia-39</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/index.html">Hoog-risico-AI-systemen zijn getest.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html">arc-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html">Informatie over algoritmes wordt gedocumenteerd volgens de Archiefwet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/index.html">avg-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/index.html">Organisaties zijn transparant over het verwerken van persoonsgegevens</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/index.html">awb-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/index.html">Organisaties kunnen duidelijk uitleggen waarom en hoe algoritmes leiden tot een besluit</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/index.html">bzk-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/index.html">Impactvolle algoritmes en hoog-risico-AI-systemen staan in het Nederlandse Algoritmeregister</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/index.html">grw-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/index.html">Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/index.html">grw-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/index.html">Algoritmes discrimineren niet</a></td></tr></tbody></table>
 
 <h2 id="maatregelen">Maatregelen</h2>
 <div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Maatregelen</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/index.html">org-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/index.html">Controleer en verbeter regelmatig de kwaliteit van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/index.html">owp-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/index.html">Beschrijf de rollen en verantwoordelijkheden voor het ontwikkelen en gebruiken van algoritmes</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/index.html">owp-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/index.html">Inventariseer welke grondrechten het algoritme kan schenden en maak een belangenafweging</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-model-verwerkersovereenkomst-onderdeel-aanbesteding/index.html">owp-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-model-verwerkersovereenkomst-onderdeel-aanbesteding/index.html">Een model-verwerkersovereenkomst is onderdeel van de aanbesteding als persoonsgegevens worden verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-14-verwerkersovereenkomst-onderdeel-aanbesteding/index.html">owp-14</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-14-verwerkersovereenkomst-onderdeel-aanbesteding/index.html">Maak het opstellen van een verwerkersovereenkomst onderdeel van de aanbesteding als persoonsgegevens worden verwerkt.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-04-bewaartermijnen-persoonsgegevens/index.html">dat-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-04-bewaartermijnen-persoonsgegevens/index.html">Geef data zoals persoonsgegevens een bewaartermijn met een vernietigingsprocedure</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/index.html">dat-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/index.html">Gebruik duurzame datacenters</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-03-privacyrisico/index.html">owk-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-03-privacyrisico/index.html">Analyseer de privacy-risico’s en neem maatregelen om deze risico’s laag te houden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-04-logging/index.html">owk-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-04-logging/index.html">Maak logbestanden waarin staat wie wanneer toegang had tot de data en de code</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/index.html">ver-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/index.html">Controleer regelmatig of het algoritme werkt zoals het bedoeld is</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/index.html">ver-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/index.html">Toets het algoritme op bias</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-02-aselecte-steekproeven/index.html">imp-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-02-aselecte-steekproeven/index.html">Doe aselecte steekproeven om algoritmes met 'risicogestuurde selectie’ te controleren</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/index.html">imp-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/index.html">Richt de juiste menselijke controle in van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-04-publiceren-algoritmeregister/index.html">imp-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-04-publiceren-algoritmeregister/index.html">Publiceer impactvolle algoritmes en hoog-risico-AI-systemen in het Algoritmeregister</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-07-klacht-bezwaar-beroep/index.html">imp-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-07-klacht-bezwaar-beroep/index.html">Richt een proces in zodat burgers of andere belanghebbenden een klacht, bezwaar of beroep kunnen indienen over het gebruik van het algoritme en monitor dit proces.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-01-backups-maken/index.html">mon-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-01-backups-maken/index.html">Maak back-ups van algoritmes</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/index.html">mon-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/index.html">Beveilig de software</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/index.html">mon-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/index.html">Maak een noodplan voor beveiligingsincidenten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-04-evalueer-bij-veranderingen-in-data/index.html">mon-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-04-evalueer-bij-veranderingen-in-data/index.html">Monitor regelmatig op veranderingen in de data. Bij veranderingen evalueer je de prestaties en output van het algoritme.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/index.html">mon-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/index.html">Meten, monitoren en rapporteren van milieu-impact van algoritmes</a></td></tr></tbody></table>
@@ -1139,7 +1144,7 @@ <h2 id="maatregelen">Maatregelen</h2>
     <span class="md-icon" title="Laatst geüpdatet">
       <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
     </span>
-    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">12 december 2024</span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
   </span>
 
     
diff --git a/pr-preview/pr-480/levenscyclus/ontwerp/index.html b/pr-preview/pr-480/levenscyclus/ontwerp/index.html
index d1c87bae44..763cffc913 100644
--- a/pr-preview/pr-480/levenscyclus/ontwerp/index.html
+++ b/pr-preview/pr-480/levenscyclus/ontwerp/index.html
@@ -27,7 +27,7 @@
     
     
       
-        <title>Ontwerp - Algoritmekader (bèta)</title>
+        <title>Fase 2, ontwerp - Algoritmekader (bèta)</title>
       
     
     
@@ -97,7 +97,7 @@
     <div data-md-component="skip">
       
         
-        <a href="#vereisten" class="md-skip">
+        <a href="#fase-2-ontwerp" class="md-skip">
           Ga naar inhoud
         </a>
       
@@ -132,7 +132,7 @@
         <div class="md-header__topic" data-md-component="header-topic">
           <span class="md-ellipsis">
             
-              Ontwerp
+              Fase 2, ontwerp
             
           </span>
         </div>
@@ -595,7 +595,7 @@
   <span class="md-ellipsis">
     
   
-    Organisatieverantwoordelijkheden
+    Fase 0, organisatieverantwoordelijkheden
   
 
     
@@ -622,7 +622,7 @@
   <span class="md-ellipsis">
     
   
-    Probleemanalyse
+    Fase 1, probleemanalyse
   
 
     
@@ -649,6 +649,8 @@
       <input class="md-nav__toggle md-toggle" type="checkbox" id="__toc">
       
       
+        
+      
       
         <label class="md-nav__link md-nav__link--active" for="__toc">
           
@@ -656,7 +658,7 @@
   <span class="md-ellipsis">
     
   
-    Ontwerp
+    Fase 2, ontwerp
   
 
     
@@ -673,7 +675,7 @@
   <span class="md-ellipsis">
     
   
-    Ontwerp
+    Fase 2, ontwerp
   
 
     
@@ -689,6 +691,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -740,7 +744,7 @@
   <span class="md-ellipsis">
     
   
-    Dataverkenning en datapreparatie
+    Fase 3, dataverkenning en datapreparatie
   
 
     
@@ -767,7 +771,7 @@
   <span class="md-ellipsis">
     
   
-    Ontwikkelen
+    Fase 4, ontwikkelen
   
 
     
@@ -794,7 +798,7 @@
   <span class="md-ellipsis">
     
   
-    Verificatie en validatie
+    Fase 5, verificatie en validatie
   
 
     
@@ -821,7 +825,7 @@
   <span class="md-ellipsis">
     
   
-    Implementatie
+    Fase 6, implementatie
   
 
     
@@ -848,7 +852,7 @@
   <span class="md-ellipsis">
     
   
-    Monitoring en beheer
+    Fase 7, monitoring en beheer
   
 
     
@@ -875,7 +879,7 @@
   <span class="md-ellipsis">
     
   
-    Uitfaseren
+    Fase 8, uitfaseren
   
 
     
@@ -1038,6 +1042,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -1097,8 +1103,7 @@
   
 
 
-  <h1>Ontwerp</h1>
-
+<h1 id="fase-2-ontwerp">Fase 2: Ontwerp</h1>
 <p>In de ontwerpfase wordt het conceptuele ontwerp van het algoritme uitgedacht. 
 Het is van belang om belangrijke uitgangspunten en beleid, zoals doelarchitectuur en de datastrategie, van de betreffende organisatie meteen te verwerken in het ontwerp en dat het applicatielandschap en de databronnen in beeld wordt gebracht. 
 In deze fase worden doorgaans veel werkzaamheden verzet, zoals business- en informatieanalyse, om een goed beeld te krijgen hoe aan de beoogde doelstellingen kan worden voldaan met een passende oplossing.  </p>
@@ -1114,7 +1119,7 @@ <h1>Ontwerp</h1>
 <p>Nadat een besluit is genomen over het definitieve ontwerp van het algoritme, kan worden gestart met het inrichten van de ontwikkelomgeving (indien nodig), de dataverkenning, datapreparatie. 
 Dit besluit betekent dat een akkoord wordt gegeven voor het type algoritme en de beoogde werking.  </p>
 <h2 id="vereisten">Vereisten</h2>
-<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/index.html">aia-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/index.html">Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">aia-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">aia-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/index.html">aia-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/index.html">Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">aia-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/index.html">aia-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/index.html">Documentatie over hoog-risico-AI-systemen wordt 10 jaar bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/index.html">aia-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/index.html">Logs van hoog-risico-AI-systemen worden zes maanden bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/index.html">aia-19</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/index.html">Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">aia-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">Mensen over wie besluiten worden genomen door een hoog-risico-AI-systemen, krijgen op verzoek informatie over deze besluiten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/index.html">aia-29</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/index.html">Hoog-risico-AI-systemen voor publieke taken worden beoordeeld op gevolgen voor grondrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/index.html">aia-29</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/index.html">AI-modellen voor algemene doeleinden zijn voorzien van voldoende technische documentatie en informatie</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/index.html">aut-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/index.html">Auteursrechten zijn beschermd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/index.html">avg-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/index.html">Persoonsgegevens worden op een rechtmatige manier verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/index.html">avg-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/index.html">Persoonsgegevens worden zo kort mogelijk bewaard</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/index.html">avg-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/index.html">Persoonsgegevens worden zo min mogelijk verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/index.html">avg-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/index.html">Persoonsgegevens en andere data verwerken gebeurt proportioneel en subsidiair</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/index.html">avg-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/index.html">Organisaties kunnen bewijzen dat zij persoonsgegevens op de juiste manier verwerken</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/index.html">avg-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/index.html">Gevoelige persoonsgegevens worden alleen gebruikt als hiervoor een wettelijke uitzondering geldt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/index.html">avg-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/index.html">Besluiten die levens kunnen beïnvloeden, zijn niet volledig geautomatiseerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/index.html">avg-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/index.html">Ontwerp en standaardinstellingen (defaults) zijn zo gunstig mogelijk voor de privacy van betrokkenen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/index.html">avg-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/index.html">Een Data Protection Impact Assessment (DPIA) wordt uitgevoerd wanneer de verwerking van persoonsgegevens waarschijnlijk een hoog risico met zich meebrengt voor de rechten en vrijheden van natuurlijke personen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/index.html">awb-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/index.html">Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/index.html">awb-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/index.html">Organisaties kunnen duidelijk uitleggen waarom en hoe algoritmes leiden tot een besluit</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/index.html">grw-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/index.html">Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr></tbody></table>
+<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/index.html">aia-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/index.html">Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">aia-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">aia-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/index.html">aia-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/index.html">Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">aia-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/index.html">aia-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/index.html">Documentatie over hoog-risico-AI-systemen wordt 10 jaar bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/index.html">aia-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/index.html">Logs van hoog-risico-AI-systemen worden zes maanden bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/index.html">aia-19</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/index.html">Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">aia-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">Mensen over wie besluiten worden genomen door een hoog-risico-AI-systemen, krijgen op verzoek informatie over deze besluiten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/index.html">aia-29</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/index.html">Hoog-risico-AI-systemen voor publieke taken worden beoordeeld op gevolgen voor grondrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/index.html">aia-29</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/index.html">AI-modellen voor algemene doeleinden zijn voorzien van voldoende technische documentatie en informatie</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/index.html">aia-39</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/index.html">Hoog-risico-AI-systemen zijn getest.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/index.html">aut-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/index.html">Auteursrechten zijn beschermd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/index.html">avg-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/index.html">Persoonsgegevens worden op een rechtmatige manier verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/index.html">avg-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/index.html">Persoonsgegevens worden zo kort mogelijk bewaard</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/index.html">avg-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/index.html">Persoonsgegevens worden zo min mogelijk verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/index.html">avg-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/index.html">Persoonsgegevens en andere data verwerken gebeurt proportioneel en subsidiair</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/index.html">avg-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/index.html">Organisaties kunnen bewijzen dat zij persoonsgegevens op de juiste manier verwerken</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/index.html">avg-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/index.html">Gevoelige persoonsgegevens worden alleen gebruikt als hiervoor een wettelijke uitzondering geldt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/index.html">avg-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/index.html">Besluiten die levens kunnen beïnvloeden, zijn niet volledig geautomatiseerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/index.html">avg-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/index.html">Ontwerp en standaardinstellingen (defaults) zijn zo gunstig mogelijk voor de privacy van betrokkenen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/index.html">avg-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/index.html">Een Data Protection Impact Assessment (DPIA) wordt uitgevoerd wanneer de verwerking van persoonsgegevens waarschijnlijk een hoog risico met zich meebrengt voor de rechten en vrijheden van natuurlijke personen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/index.html">awb-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/index.html">Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/index.html">awb-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/index.html">Organisaties kunnen duidelijk uitleggen waarom en hoe algoritmes leiden tot een besluit</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/index.html">grw-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/index.html">Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr></tbody></table>
 
 <h2 id="maatregelen">Maatregelen</h2>
 <div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Maatregelen</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-04-betrek-belanghebbenden/index.html">pba-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-04-betrek-belanghebbenden/index.html">Overleg regelmatig met belanghebbenden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/index.html">owp-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/index.html">Beschrijf de rollen en verantwoordelijkheden voor het ontwikkelen en gebruiken van algoritmes</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-02-data-beschikbaarheid/index.html">owp-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-02-data-beschikbaarheid/index.html">Voer voorafgaand aan een project een data beschikbaarheid, kwaliteit- en toegankelijkheidsanalayse uit.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-03-doel-verwerken-persoonsgegevens/index.html">owp-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-03-doel-verwerken-persoonsgegevens/index.html">Beschrijf voor welk doel het algoritme persoonsgegevens gebruikt en waarom dit mag</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-04-gebruikte-techniek/index.html">owp-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-04-gebruikte-techniek/index.html">Beschrijf welke techniek gebruikt wordt voor de beoogde toepassing</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-05-soort-algoritme/index.html">owp-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-05-soort-algoritme/index.html">Bepaal het soort algoritme en de risicogroep en vereisten die hierbij horen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/index.html">owp-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/index.html">Inventariseer welke grondrechten het algoritme kan schenden en maak een belangenafweging</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-07-kwetsbare-groepen/index.html">owp-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-07-kwetsbare-groepen/index.html">Maak een lijst van de meest kwetsbare groepen en bescherm hen extra</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-08-archiveren-documenten/index.html">owp-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-08-archiveren-documenten/index.html">Bepaal welke documenten voor hoe lang gearchiveerd moeten worden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-model-verwerkersovereenkomst-onderdeel-aanbesteding/index.html">owp-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-model-verwerkersovereenkomst-onderdeel-aanbesteding/index.html">Een model-verwerkersovereenkomst is onderdeel van de aanbesteding als persoonsgegevens worden verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-multidisciplinair-inkoopteam/index.html">owp-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-multidisciplinair-inkoopteam/index.html">Stel een multidisciplinair team samen bij het ontwikkelen of inkopen van algoritmes.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/index.html">owp-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/index.html">Maak een Project Startarchitectuur (PSA) voor de ontwikkeling of inkoop van algoritmes</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/index.html">owp-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/index.html">Koop duurzaam algoritmes in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-gebruikte-data/index.html">owp-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-gebruikte-data/index.html">Beschrijf welke data gebruikt wordt voor de beoogde toepassing</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/index.html">owp-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/index.html">Bespreek de vereisten die gelden voor een verantwoorde inzet van algoritmes met aanbieders.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/index.html">owp-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/index.html">Ontwerp algoritmes zo eenvoudig mogelijk</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/index.html">owp-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/index.html">Maak vereisten voor algoritmes onderdeel van algemene inkoopvoorwaarden en de contractovereenkomst.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-14-verwerkersovereenkomst-onderdeel-aanbesteding/index.html">owp-14</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-14-verwerkersovereenkomst-onderdeel-aanbesteding/index.html">Maak het opstellen van een verwerkersovereenkomst onderdeel van de aanbesteding als persoonsgegevens worden verwerkt.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-15-leveren-bewijs_voldoen-aan-vereisten-algoritme-aanbieder/index.html">owp-15</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-15-leveren-bewijs_voldoen-aan-vereisten-algoritme-aanbieder/index.html">Maak het leveren van bewijs voor het voldoen aan de vereisten voor algoritmes onderdeel van de beoordeling van een inschrijving.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-17-beoordeel-aansprakelijkheidsvoorwaarden-van-aanbieder/index.html">owp-17</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-17-beoordeel-aansprakelijkheidsvoorwaarden-van-aanbieder/index.html">Aansprakelijkheidsvoorwaarden van een aanbieder worden beoordeeld in de aanbesteding</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-18-maak-vereisten-onderdeel-van-subgunningscriteria/index.html">owp-18</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-18-maak-vereisten-onderdeel-van-subgunningscriteria/index.html">Maak vereisten onderdeel van (sub)gunningscriteria bij een aanbesteding.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/index.html">owp-19</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/index.html">Creëer ruimte om met een aanbieder samen te gaan werken om specifieke vereisten te realiseren</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-20-vaststellen-aanleveren-informatie-technische-documentatie/index.html">owp-20</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-20-vaststellen-aanleveren-informatie-technische-documentatie/index.html">Vul technische documentatie van aanbieder aan met relevante informatie vanuit de gebruiksverantwoordelijke.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/index.html">owp-21</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/index.html">Neem het kunnen uitvoeren van een audit over de vereiste op in contractvoorwaarden en de contractovereenkomst</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-22-invloed-besluitvorming-algoritmes-aanbieders/index.html">owp-22</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-22-invloed-besluitvorming-algoritmes-aanbieders/index.html">Bepaal in een aanbesteding of algoritmes van een aanbieder bepalende invloed hebben in een besluit richting personen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/index.html">owp-23</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/index.html">Laat de aanbieder aangeven welke mate van opleiding en ondersteuning bij de implementatie nodig is om de beoogde algoritmes verantwoord te gebruiken.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-24-risico-analyse-informatiebeveiliging-leverancier/index.html">owp-24</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-24-risico-analyse-informatiebeveiliging-leverancier/index.html">Voer een risico-analyse met de aanbieder uit op het gebied van informatiebeveiliging bij een uitbestedingstraject</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/index.html">owp-25</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/index.html">Maak vereisten onderdeel van het programma van eisen bij een aanbesteding</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/index.html">owp-26</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/index.html">Maak vereisten voor algoritmes onderdeel van de Service Level Agreement</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-27-contractuele-afspraken-data-en-artefacten/index.html">owp-27</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-27-contractuele-afspraken-data-en-artefacten/index.html">Maak (contractuele) afspraken over data en artefacten met een aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-29-informeer_betrokkenen/index.html">pba-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-29-informeer_betrokkenen/index.html">Stel vast welke betrokkenen geïnformeerd moeten worden en welke informatie zij nodig hebben.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/index.html">owp-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/index.html">Pas uitlegbaarheidstechnieken toe en evalueer en valideer deze.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-genereren-bronvermelding/index.html">imp-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-genereren-bronvermelding/index.html">Maak gebruik van een algoritme dat bronvermelding kan genereren bij de output.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-06-schending-auteursrechten/index.html">dat-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-06-schending-auteursrechten/index.html">Controleer de auteursrechten van eigen data</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/index.html">dat-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/index.html">Gebruik duurzame datacenters</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-03-privacyrisico/index.html">owk-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-03-privacyrisico/index.html">Analyseer de privacy-risico’s en neem maatregelen om deze risico’s laag te houden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/index.html">ver-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/index.html">Toets het algoritme op bias</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/index.html">imp-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/index.html">Richt de juiste menselijke controle in van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/index.html">mon-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/index.html">Meten, monitoren en rapporteren van milieu-impact van algoritmes</a></td></tr></tbody></table>
@@ -1145,7 +1150,7 @@ <h2 id="maatregelen">Maatregelen</h2>
     <span class="md-icon" title="Laatst geüpdatet">
       <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
     </span>
-    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">12 december 2024</span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
   </span>
 
     
diff --git a/pr-preview/pr-480/levenscyclus/ontwikkelen/index.html b/pr-preview/pr-480/levenscyclus/ontwikkelen/index.html
index b15d4da5c4..2ccd4a341e 100644
--- a/pr-preview/pr-480/levenscyclus/ontwikkelen/index.html
+++ b/pr-preview/pr-480/levenscyclus/ontwikkelen/index.html
@@ -27,7 +27,7 @@
     
     
       
-        <title>Ontwikkelen - Algoritmekader (bèta)</title>
+        <title>Fase 4, ontwikkelen - Algoritmekader (bèta)</title>
       
     
     
@@ -97,7 +97,7 @@
     <div data-md-component="skip">
       
         
-        <a href="#vereisten" class="md-skip">
+        <a href="#fase-4-ontwikkelen" class="md-skip">
           Ga naar inhoud
         </a>
       
@@ -132,7 +132,7 @@
         <div class="md-header__topic" data-md-component="header-topic">
           <span class="md-ellipsis">
             
-              Ontwikkelen
+              Fase 4, ontwikkelen
             
           </span>
         </div>
@@ -595,7 +595,7 @@
   <span class="md-ellipsis">
     
   
-    Organisatieverantwoordelijkheden
+    Fase 0, organisatieverantwoordelijkheden
   
 
     
@@ -622,7 +622,7 @@
   <span class="md-ellipsis">
     
   
-    Probleemanalyse
+    Fase 1, probleemanalyse
   
 
     
@@ -649,7 +649,7 @@
   <span class="md-ellipsis">
     
   
-    Ontwerp
+    Fase 2, ontwerp
   
 
     
@@ -676,7 +676,7 @@
   <span class="md-ellipsis">
     
   
-    Dataverkenning en datapreparatie
+    Fase 3, dataverkenning en datapreparatie
   
 
     
@@ -703,6 +703,8 @@
       <input class="md-nav__toggle md-toggle" type="checkbox" id="__toc">
       
       
+        
+      
       
         <label class="md-nav__link md-nav__link--active" for="__toc">
           
@@ -710,7 +712,7 @@
   <span class="md-ellipsis">
     
   
-    Ontwikkelen
+    Fase 4, ontwikkelen
   
 
     
@@ -727,7 +729,7 @@
   <span class="md-ellipsis">
     
   
-    Ontwikkelen
+    Fase 4, ontwikkelen
   
 
     
@@ -743,6 +745,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -794,7 +798,7 @@
   <span class="md-ellipsis">
     
   
-    Verificatie en validatie
+    Fase 5, verificatie en validatie
   
 
     
@@ -821,7 +825,7 @@
   <span class="md-ellipsis">
     
   
-    Implementatie
+    Fase 6, implementatie
   
 
     
@@ -848,7 +852,7 @@
   <span class="md-ellipsis">
     
   
-    Monitoring en beheer
+    Fase 7, monitoring en beheer
   
 
     
@@ -875,7 +879,7 @@
   <span class="md-ellipsis">
     
   
-    Uitfaseren
+    Fase 8, uitfaseren
   
 
     
@@ -1038,6 +1042,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -1097,8 +1103,7 @@
   
 
 
-  <h1>Ontwikkelen</h1>
-
+<h1 id="fase-4-ontwikkelen">Fase 4: Ontwikkelen</h1>
 <p>Dit is de fase waarin het algoritme wordt ontwikkeld door het ontwikkelteam. 
 Als het gaat om AI-systemen, omvat deze fase het trainen van modellen met behulp van de voorbereide gegevens.
 Als het gaat om algoritmes op basis van rekenregels, betreft dit het implementeren van deze rekenregels in de (ontwikkelomgeving van de) systemen.  </p>
@@ -1110,7 +1115,7 @@ <h1>Ontwikkelen</h1>
 <p>In deze fase is niet alleen het ontwikkelen van een algoritme, maar ook het documenteren van belangrijke afwegingen en het opstellen van technische documentatie van groot belang. 
 Daarnaast zullen tal van (technische) maatregelen moeten worden getroffen zoals de verdere beveiliging van het informatiesysteem of bij de ontsluiting van de output naar gebruikers, het automatische genereren van logs en het inrichten van service en incidentmanagementprocedures.  </p>
 <h2 id="vereisten">Vereisten</h2>
-<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/index.html">aia-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/index.html">Hoog-risico-AI-systemen zijn voorzien van voldoende technische documentatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/index.html">aia-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/index.html">Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">aia-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/index.html">aia-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/index.html">Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">aia-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/index.html">aia-23</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/index.html">Logs voor hoog-risico-AI-systemen worden bewaard door de gebruiksverantwoordelijke</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/index.html">aia-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/index.html">AI-systemen worden zo ontworpen en gebruikt, dat mensen begrijpen wanneer zij met een AI-systeem communiceren en welke content gemaakt is door een AI-systeem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/index.html">aia-29</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/index.html">AI-modellen voor algemene doeleinden zijn voorzien van voldoende technische documentatie en informatie</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/index.html">aia-30</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/index.html">Aanbieders van AI-modellen voor algemene doeleinden met een systeemrisico treffen extra maatregelen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/index.html">aia-32</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/index.html">AI-modellen voor algemene doeleinden met systeemrisico’s zijn voldoende beveiligd tegen cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/index.html">aia-33</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/index.html">AI-testomgevingen die persoonsgegevens verwerken, voldoen aan strenge voorwaarden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html">arc-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html">Informatie over algoritmes wordt gedocumenteerd volgens de Archiefwet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/index.html">avg-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/index.html">Persoonsgegevens worden zo kort mogelijk bewaard</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/index.html">avg-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/index.html">Persoonsgegevens worden zo min mogelijk verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/index.html">avg-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/index.html">Betrokkenen kunnen een beroep doen op hun privacyrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/index.html">awb-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/index.html">Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</a></td></tr></tbody></table>
+<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/index.html">aia-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/index.html">Hoog-risico-AI-systemen zijn voorzien van voldoende technische documentatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/index.html">aia-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/index.html">Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">aia-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/index.html">aia-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/index.html">Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">aia-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/index.html">aia-23</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/index.html">Logs voor hoog-risico-AI-systemen worden bewaard door de gebruiksverantwoordelijke</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/index.html">aia-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/index.html">AI-systemen worden zo ontworpen en gebruikt, dat mensen begrijpen wanneer zij met een AI-systeem communiceren en welke content gemaakt is door een AI-systeem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/index.html">aia-29</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/index.html">AI-modellen voor algemene doeleinden zijn voorzien van voldoende technische documentatie en informatie</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/index.html">aia-30</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/index.html">Aanbieders van AI-modellen voor algemene doeleinden met een systeemrisico treffen extra maatregelen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/index.html">aia-32</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/index.html">AI-modellen voor algemene doeleinden met systeemrisico’s zijn voldoende beveiligd tegen cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/index.html">aia-33</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/index.html">AI-testomgevingen die persoonsgegevens verwerken, voldoen aan strenge voorwaarden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/index.html">aia-39</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/index.html">Hoog-risico-AI-systemen zijn getest.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html">arc-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html">Informatie over algoritmes wordt gedocumenteerd volgens de Archiefwet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/index.html">avg-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/index.html">Persoonsgegevens worden zo kort mogelijk bewaard</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/index.html">avg-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/index.html">Persoonsgegevens worden zo min mogelijk verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/index.html">avg-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/index.html">Betrokkenen kunnen een beroep doen op hun privacyrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/index.html">awb-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/index.html">Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</a></td></tr></tbody></table>
 
 <h2 id="maatregelen">Maatregelen</h2>
 <div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Maatregelen</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-03-doel-verwerken-persoonsgegevens/index.html">owp-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-03-doel-verwerken-persoonsgegevens/index.html">Beschrijf voor welk doel het algoritme persoonsgegevens gebruikt en waarom dit mag</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-05-soort-algoritme/index.html">owp-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-05-soort-algoritme/index.html">Bepaal het soort algoritme en de risicogroep en vereisten die hierbij horen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-08-archiveren-documenten/index.html">owp-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-08-archiveren-documenten/index.html">Bepaal welke documenten voor hoe lang gearchiveerd moeten worden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/index.html">owp-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/index.html">Maak een Project Startarchitectuur (PSA) voor de ontwikkeling of inkoop van algoritmes</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/index.html">owp-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/index.html">Bespreek de vereisten die gelden voor een verantwoorde inzet van algoritmes met aanbieders.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/index.html">owp-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/index.html">Ontwerp algoritmes zo eenvoudig mogelijk</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/index.html">owp-19</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/index.html">Creëer ruimte om met een aanbieder samen te gaan werken om specifieke vereisten te realiseren</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-29-informeer_betrokkenen/index.html">pba-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-29-informeer_betrokkenen/index.html">Stel vast welke betrokkenen geïnformeerd moeten worden en welke informatie zij nodig hebben.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-04-bewaartermijnen-persoonsgegevens/index.html">dat-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-04-bewaartermijnen-persoonsgegevens/index.html">Geef data zoals persoonsgegevens een bewaartermijn met een vernietigingsprocedure</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-05-pseudonimiseren-anonimiseren/index.html">dat-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-05-pseudonimiseren-anonimiseren/index.html">Bescherm persoonsgegevens door data te anonimiseren, pseudonimiseren of te aggregeren</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/index.html">dat-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/index.html">Gebruik duurzame datacenters</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/index.html">dat-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/index.html">Gebruik bij machine learning technieken gescheiden train-, test- en validatiedata en houdt rekening met underfitting en overfitting.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-09-dataminimalisatie/index.html">dat-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-09-dataminimalisatie/index.html">Beperk de omvang van datasets voor energie-efficiëntie</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-01-security-by-design/index.html">owk-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-01-security-by-design/index.html">Ontwerp en ontwikkel het algoritme volgens de principes van ‘security by design’</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-02-stopzetten-gebruik/index.html">owk-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-02-stopzetten-gebruik/index.html">Maak een noodplan voor het stoppen van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-03-privacyrisico/index.html">owk-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-03-privacyrisico/index.html">Analyseer de privacy-risico’s en neem maatregelen om deze risico’s laag te houden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-04-logging/index.html">owk-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-04-logging/index.html">Maak logbestanden waarin staat wie wanneer toegang had tot de data en de code</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-05-energiezuinige-programmeermethoden/index.html">owk-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-05-energiezuinige-programmeermethoden/index.html">Kies energiezuinige programmeermethoden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-06-optimaliseer-AI-training/index.html">owk-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-06-optimaliseer-AI-training/index.html">Optimaliseer AI-trainingsprocessen voor energie-efficiëntie</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/index.html">ver-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/index.html">Controleer regelmatig of het algoritme werkt zoals het bedoeld is</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-proces-privacyrechten/index.html">imp-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-proces-privacyrechten/index.html">Spreek af hoe de organisatie omgaat met privacy-verzoeken</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-01-backups-maken/index.html">mon-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-01-backups-maken/index.html">Maak back-ups van algoritmes</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/index.html">mon-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/index.html">Beveilig de software</a></td></tr></tbody></table>
@@ -1141,7 +1146,7 @@ <h2 id="maatregelen">Maatregelen</h2>
     <span class="md-icon" title="Laatst geüpdatet">
       <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
     </span>
-    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">12 december 2024</span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
   </span>
 
     
diff --git a/pr-preview/pr-480/levenscyclus/organisatieverantwoordelijkheden/index.html b/pr-preview/pr-480/levenscyclus/organisatieverantwoordelijkheden/index.html
index 3e6c9a5623..7aa01088f3 100644
--- a/pr-preview/pr-480/levenscyclus/organisatieverantwoordelijkheden/index.html
+++ b/pr-preview/pr-480/levenscyclus/organisatieverantwoordelijkheden/index.html
@@ -27,7 +27,7 @@
     
     
       
-        <title>Organisatieverantwoordelijkheden - Algoritmekader (bèta)</title>
+        <title>Fase 0, organisatieverantwoordelijkheden - Algoritmekader (bèta)</title>
       
     
     
@@ -97,7 +97,7 @@
     <div data-md-component="skip">
       
         
-        <a href="#vereisten" class="md-skip">
+        <a href="#fase-0-organisatieverantwoordelijkheden" class="md-skip">
           Ga naar inhoud
         </a>
       
@@ -132,7 +132,7 @@
         <div class="md-header__topic" data-md-component="header-topic">
           <span class="md-ellipsis">
             
-              Organisatieverantwoordelijkheden
+              Fase 0, organisatieverantwoordelijkheden
             
           </span>
         </div>
@@ -595,6 +595,8 @@
       <input class="md-nav__toggle md-toggle" type="checkbox" id="__toc">
       
       
+        
+      
       
         <label class="md-nav__link md-nav__link--active" for="__toc">
           
@@ -602,7 +604,7 @@
   <span class="md-ellipsis">
     
   
-    Organisatieverantwoordelijkheden
+    Fase 0, organisatieverantwoordelijkheden
   
 
     
@@ -619,7 +621,7 @@
   <span class="md-ellipsis">
     
   
-    Organisatieverantwoordelijkheden
+    Fase 0, organisatieverantwoordelijkheden
   
 
     
@@ -635,6 +637,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -686,7 +690,7 @@
   <span class="md-ellipsis">
     
   
-    Probleemanalyse
+    Fase 1, probleemanalyse
   
 
     
@@ -713,7 +717,7 @@
   <span class="md-ellipsis">
     
   
-    Ontwerp
+    Fase 2, ontwerp
   
 
     
@@ -740,7 +744,7 @@
   <span class="md-ellipsis">
     
   
-    Dataverkenning en datapreparatie
+    Fase 3, dataverkenning en datapreparatie
   
 
     
@@ -767,7 +771,7 @@
   <span class="md-ellipsis">
     
   
-    Ontwikkelen
+    Fase 4, ontwikkelen
   
 
     
@@ -794,7 +798,7 @@
   <span class="md-ellipsis">
     
   
-    Verificatie en validatie
+    Fase 5, verificatie en validatie
   
 
     
@@ -821,7 +825,7 @@
   <span class="md-ellipsis">
     
   
-    Implementatie
+    Fase 6, implementatie
   
 
     
@@ -848,7 +852,7 @@
   <span class="md-ellipsis">
     
   
-    Monitoring en beheer
+    Fase 7, monitoring en beheer
   
 
     
@@ -875,7 +879,7 @@
   <span class="md-ellipsis">
     
   
-    Uitfaseren
+    Fase 8, uitfaseren
   
 
     
@@ -1038,6 +1042,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -1097,13 +1103,12 @@
   
 
 
-  <h1>Organisatieverantwoordelijkheden</h1>
-
+<h1 id="fase-0-organisatieverantwoordelijkheden">Fase 0: Organisatieverantwoordelijkheden</h1>
 <p>Voordat je start met de ontwikkeling of het gebruik van een algoritme, zul je moeten zorgen dat je organisatie voldoende ingericht is om algoritmes te gebruiken of te ontwikkelen. 
 In deze fase beschrijven we de randvoorwaarden die je als organisatie moet hebben om aan de slag te gaan. Dit zijn aspecten die je in het ideale geval al regelt voordat je begint aan het gebruik van algoritmes.
 Het zijn ook taken die je voortdurend aandacht zal moeten geven, maar die je niet voor ieder algorite opnieuw hoeft te organiseren. </p>
 <h2 id="vereisten">Vereisten</h2>
-<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/index.html">aia-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/index.html">Personeel en gebruikers zijn voldoende AI-geletterd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/index.html">aia-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/index.html">Verboden AI-systemen mogen niet worden gebruikt.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/index.html">aia-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/index.html">Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/index.html">aia-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/index.html">Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/index.html">aia-18</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/index.html">Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/index.html">aia-20</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/index.html">Hoog-risico-AI-systemen worden gebruikt volgens de gebruiksaanwijzing</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/index.html">aia-21</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/index.html">Menselijke controle van hoog-risico-AI-systemen wordt uitgevoerd door mensen met voldoende kennis en mogelijkheden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/index.html">aia-25</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/index.html">Gebruiksverantwoordelijken controleren de registratie van het hoog-risico AI-systeem in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">aia-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">Mensen over wie besluiten worden genomen door een hoog-risico-AI-systemen, krijgen op verzoek informatie over deze besluiten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/index.html">aia-33</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/index.html">AI-testomgevingen die persoonsgegevens verwerken, voldoen aan strenge voorwaarden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/index.html">aia-35</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/index.html">Ernstige incidenten door hoog-risico-AI-systemen worden gemeld aan de toezichthouder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/index.html">aia-36</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/index.html">Klokkenluiders kunnen veilig melden dat een organisatie zich niet houdt aan de AI-verordening</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/index.html">aia-37</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/index.html">Klachtrecht aanbieders verder in AI-waardeketen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/index.html">avg-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/index.html">Betrokkenen kunnen een beroep doen op hun privacyrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/index.html">avg-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/index.html">Data zoals persoonsgegevens zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/index.html">bio-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/index.html">Computersystemen zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/index.html">woo-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/index.html">Iedereen kan openbare informatie over algoritmes vinden of aanvragen</a></td></tr></tbody></table>
+<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/index.html">aia-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/index.html">Personeel en gebruikers zijn voldoende AI-geletterd.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/index.html">aia-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/index.html">Verboden AI-systemen mogen niet worden gebruikt.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/index.html">aia-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/index.html">Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/index.html">aia-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/index.html">Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/index.html">aia-18</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/index.html">Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/index.html">aia-20</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/index.html">Hoog-risico-AI-systemen worden gebruikt volgens de gebruiksaanwijzing</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/index.html">aia-21</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/index.html">Menselijke controle van hoog-risico-AI-systemen wordt uitgevoerd door mensen met voldoende kennis en mogelijkheden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/index.html">aia-25</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/index.html">Gebruiksverantwoordelijken controleren de registratie van het hoog-risico AI-systeem in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">aia-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">Mensen over wie besluiten worden genomen door een hoog-risico-AI-systemen, krijgen op verzoek informatie over deze besluiten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/index.html">aia-33</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/index.html">AI-testomgevingen die persoonsgegevens verwerken, voldoen aan strenge voorwaarden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/index.html">aia-35</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/index.html">Ernstige incidenten door hoog-risico-AI-systemen worden gemeld aan de toezichthouder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/index.html">aia-36</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/index.html">Klokkenluiders kunnen veilig melden dat een organisatie zich niet houdt aan de AI-verordening</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/index.html">aia-37</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/index.html">Klachtrecht aanbieders verder in AI-waardeketen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/index.html">avg-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/index.html">Betrokkenen kunnen een beroep doen op hun privacyrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/index.html">avg-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/index.html">Data zoals persoonsgegevens zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/index.html">bio-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/index.html">Computersystemen zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/index.html">woo-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/index.html">Iedereen kan openbare informatie over algoritmes vinden of aanvragen</a></td></tr></tbody></table>
 
 <h2 id="maatregelen">Maatregelen</h2>
 <div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Maatregelen</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-01-benodigde-expertise-en-capaciteit/index.html">org-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-01-benodigde-expertise-en-capaciteit/index.html">Bepaal of er genoeg experts beschikbaar zijn</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-02-beleid_opstellen_inzet_algoritmes/index.html">org-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-02-beleid_opstellen_inzet_algoritmes/index.html">Stel beleid op voor een verantwoorde inzet van algoritmes binnen de organisatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-03-toepassen_risicobeheer/index.html">org-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-03-toepassen_risicobeheer/index.html">Maak een plan voor het omgaan met risico’s</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-04-politiek-bestuurlijke-verantwoordelijkheid/index.html">org-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-04-politiek-bestuurlijke-verantwoordelijkheid/index.html">Zorg voor politiek-bestuurlijk bewustzijn, betrokkenheid, en verantwoordelijkheid.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-05-bestaande-governance/index.html">org-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-05-bestaande-governance/index.html">Sluit algoritmegovernance aan op bestaande governancestructuren binnen de organisatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/index.html">org-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/index.html">Gebruik een algoritme volwassenheidsmodel om te weten waar de organisatie staat</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-07-intern-toezicht/index.html">org-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-07-intern-toezicht/index.html">Richt een algoritmegovernance in met three lines of defence</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-08-beslismoment-levenscyclus/index.html">org-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-08-beslismoment-levenscyclus/index.html">Maak gebruik van beslismomenten  in de algoritmelevenscyclus</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-09-governance-per-risicocategorie/index.html">org-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-09-governance-per-risicocategorie/index.html">Richt algoritmegovernance op basis van de risicoclassificatie van algoritmes.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-10-inrichten-taken-en-verantwoordelijkheden-algoritmegovernance/index.html">org-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-10-inrichten-taken-en-verantwoordelijkheden-algoritmegovernance/index.html">Taken en verantwoordelijkheden zijn toebedeeld in de algoritmegovernance</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-11-gebruikersbeheer/index.html">org-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-11-gebruikersbeheer/index.html">Maak afspraken over het beheer van gebruikers</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/index.html">org-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/index.html">Controleer en verbeter regelmatig de kwaliteit van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-13-wachtwoordbeheer/index.html">org-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-13-wachtwoordbeheer/index.html">Maak afspraken over het beheer van wachtwoorden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-14-wijzigingenproces/index.html">org-14</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-14-wijzigingenproces/index.html">Maak afspraken over het wijzigen van de code</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/index.html">imp-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/index.html">Stel een protocol vast voor de situatie dat er (een vermoeden van) discriminatie door een algoritme is geconstateerd en pas dit wanneer nodig toe.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-28-pas-vastgestelde-beleidskaders-zijn-nageleefd/index.html">owp-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-28-pas-vastgestelde-beleidskaders-zijn-nageleefd/index.html">Pas vastgestelde interne beleidskaders toe en maak aantoonbaar dat deze zijn nageleefd bij het ontwikkelen, inkopen en gebruiken van algoritmes.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-toepassen_vastgestelde-beleidskaders/index.html">org-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-toepassen_vastgestelde-beleidskaders/index.html">Pas vastgestelde beleidskaders toe</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-proces-privacyrechten/index.html">imp-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-proces-privacyrechten/index.html">Spreek af hoe de organisatie omgaat met privacy-verzoeken</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-09-politiek-bestuurlijk-besluit/index.html">imp-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-09-politiek-bestuurlijk-besluit/index.html">Maak een openbaar besluit over de inzet van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/index.html">mon-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/index.html">Maak een noodplan voor beveiligingsincidenten</a></td></tr></tbody></table>
@@ -1134,7 +1139,7 @@ <h2 id="maatregelen">Maatregelen</h2>
     <span class="md-icon" title="Laatst geüpdatet">
       <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
     </span>
-    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">12 december 2024</span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
   </span>
 
     
diff --git a/pr-preview/pr-480/levenscyclus/over-de-levenscyclus/index.html b/pr-preview/pr-480/levenscyclus/over-de-levenscyclus/index.html
new file mode 100644
index 0000000000..2aed654c6c
--- /dev/null
+++ b/pr-preview/pr-480/levenscyclus/over-de-levenscyclus/index.html
@@ -0,0 +1,973 @@
+
+<!doctype html>
+<html lang="nl" class="no-js">
+  <head>
+    
+      <meta charset="utf-8">
+      <meta name="viewport" content="width=device-width,initial-scale=1">
+      
+        <meta name="description" content="Het Algoritmekader van het Ministerie van Binnenlandse Zaken en Koninkrijksrelaties">
+      
+      
+      
+        <link rel="canonical" href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/levenscyclus/over-de-levenscyclus/">
+      
+      
+        <link rel="prev" href="../organisatieverantwoordelijkheden/">
+      
+      
+        <link rel="next" href="../probleemanalyse/">
+      
+      
+        
+      
+      
+      <link rel="icon" href="../../assets/favicon.ico">
+      <meta name="generator" content="mkdocs-1.6.1, mkdocs-material-9.5.44+insiders-4.53.14">
+    
+    
+      
+        <title>Over de levenscyclus - Algoritmekader (bèta)</title>
+      
+    
+    
+      <link rel="stylesheet" href="../../assets/stylesheets/main.12320a83.min.css">
+      
+        
+        <link rel="stylesheet" href="../../assets/stylesheets/palette.ab4e12ef.min.css">
+      
+      
+
+  
+  
+  
+  
+  <style>:root{--md-annotation-icon:url('data:image/svg+xml;charset=utf-8,<svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 512 512"><!--! Font Awesome Free 6.6.0 by @fontawesome - https://fontawesome.com License - https://fontawesome.com/license/free (Icons: CC BY 4.0, Fonts: SIL OFL 1.1, Code: MIT License) Copyright 2024 Fonticons, Inc.--><path d="M256 512a256 256 0 1 0 0-512 256 256 0 1 0 0 512m-40-176h24v-64h-24c-13.3 0-24-10.7-24-24s10.7-24 24-24h48c13.3 0 24 10.7 24 24v88h8c13.3 0 24 10.7 24 24s-10.7 24-24 24h-80c-13.3 0-24-10.7-24-24s10.7-24 24-24m40-208a32 32 0 1 1 0 64 32 32 0 1 1 0-64"/></svg>');}</style>
+
+
+    
+    
+      
+    
+    
+      
+    
+    
+      <link rel="stylesheet" href="../../stylesheets/navigation.css">
+    
+      <link rel="stylesheet" href="../../stylesheets/filters.css">
+    
+      <link rel="stylesheet" href="../../stylesheets/extra.css">
+    
+      <link rel="stylesheet" href="../../stylesheets/footer.css">
+    
+      <link rel="stylesheet" href="https://cdnjs.cloudflare.com/ajax/libs/font-awesome/6.0.0-beta3/css/all.min.css">
+    
+      <link rel="stylesheet" href="https://cdn.jsdelivr.net/npm/choices.js/public/assets/styles/choices.min.css">
+    
+    <script>__md_scope=new URL("../..",location),__md_hash=e=>[...e].reduce(((e,_)=>(e<<5)-e+_.charCodeAt(0)),0),__md_get=(e,_=localStorage,t=__md_scope)=>JSON.parse(_.getItem(t.pathname+"."+e)),__md_set=(e,_,t=localStorage,a=__md_scope)=>{try{t.setItem(a.pathname+"."+e,JSON.stringify(_))}catch(e){}}</script>
+    
+      
+
+    
+    
+   <link href="../../assets/stylesheets/glightbox.min.css" rel="stylesheet"/><style>
+    html.glightbox-open { overflow: initial; height: 100%; }
+    .gslide-title { margin-top: 0px; user-select: text; }
+    .gslide-desc { color: #666; user-select: text; }
+    .gslide-image img { background: white; }
+    .gscrollbar-fixer { padding-right: 15px; }
+    .gdesc-inner { font-size: 0.75rem; }
+    body[data-md-color-scheme="slate"] .gdesc-inner { background: var(--md-default-bg-color);}
+    body[data-md-color-scheme="slate"] .gslide-title { color: var(--md-default-fg-color);}
+    body[data-md-color-scheme="slate"] .gslide-desc { color: var(--md-default-fg-color);}</style> <script src="../../assets/javascripts/glightbox.min.js"></script></head>
+  
+  
+    
+    
+    
+    
+    
+    <body dir="ltr" data-md-color-scheme="default" data-md-color-primary="custom" data-md-color-accent="indigo">
+  
+    
+    <input class="md-toggle" data-md-toggle="drawer" type="checkbox" id="__drawer" autocomplete="off">
+    <input class="md-toggle" data-md-toggle="search" type="checkbox" id="__search" autocomplete="off">
+    <label class="md-overlay" for="__drawer"></label>
+    <div data-md-component="skip">
+      
+        
+        <a href="#over-de-levenscyclus" class="md-skip">
+          Ga naar inhoud
+        </a>
+      
+    </div>
+    <div data-md-component="announce">
+      
+    </div>
+    
+    
+      
+
+  
+
+<header class="md-header md-header--shadow md-header--lifted" data-md-component="header">
+  <nav class="md-header__inner md-grid" aria-label="Header">
+    <a href="../.." title="Algoritmekader (bèta)" class="md-header__button md-logo" aria-label="Algoritmekader (bèta)" data-md-component="logo">
+      
+  <img src="../../assets/logo.svg" alt="logo">
+
+    </a>
+    <label class="md-header__button md-icon" for="__drawer">
+      
+      <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M3 6h18v2H3zm0 5h18v2H3zm0 5h18v2H3z"/></svg>
+    </label>
+    <div class="md-header__title" data-md-component="header-title">
+      <div class="md-header__ellipsis">
+        <div class="md-header__topic">
+          <span class="md-ellipsis">
+            Algoritmekader (bèta)
+          </span>
+        </div>
+        <div class="md-header__topic" data-md-component="header-topic">
+          <span class="md-ellipsis">
+            
+              Over de levenscyclus
+            
+          </span>
+        </div>
+      </div>
+    </div>
+    
+      
+    
+    
+    
+    
+      <label class="md-header__button md-icon" for="__search">
+        
+        <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M9.5 3A6.5 6.5 0 0 1 16 9.5c0 1.61-.59 3.09-1.56 4.23l.27.27h.79l5 5-1.5 1.5-5-5v-.79l-.27-.27A6.52 6.52 0 0 1 9.5 16 6.5 6.5 0 0 1 3 9.5 6.5 6.5 0 0 1 9.5 3m0 2C7 5 5 7 5 9.5S7 14 9.5 14 14 12 14 9.5 12 5 9.5 5"/></svg>
+      </label>
+      <div class="md-search" data-md-component="search" role="dialog">
+  <label class="md-search__overlay" for="__search"></label>
+  <div class="md-search__inner" role="search">
+    <form class="md-search__form" name="search">
+      <input type="text" class="md-search__input" name="query" aria-label="Zoeken" placeholder="Zoeken" autocapitalize="off" autocorrect="off" autocomplete="off" spellcheck="false" data-md-component="search-query" required>
+      <label class="md-search__icon md-icon" for="__search">
+        
+        <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M9.5 3A6.5 6.5 0 0 1 16 9.5c0 1.61-.59 3.09-1.56 4.23l.27.27h.79l5 5-1.5 1.5-5-5v-.79l-.27-.27A6.52 6.52 0 0 1 9.5 16 6.5 6.5 0 0 1 3 9.5 6.5 6.5 0 0 1 9.5 3m0 2C7 5 5 7 5 9.5S7 14 9.5 14 14 12 14 9.5 12 5 9.5 5"/></svg>
+        
+        <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M20 11v2H8l5.5 5.5-1.42 1.42L4.16 12l7.92-7.92L13.5 5.5 8 11z"/></svg>
+      </label>
+      <nav class="md-search__options" aria-label="Zoeken">
+        
+        <button type="reset" class="md-search__icon md-icon" title="Leegmaken" aria-label="Leegmaken" tabindex="-1">
+          
+          <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M19 6.41 17.59 5 12 10.59 6.41 5 5 6.41 10.59 12 5 17.59 6.41 19 12 13.41 17.59 19 19 17.59 13.41 12z"/></svg>
+        </button>
+      </nav>
+      
+        <div class="md-search__suggest" data-md-component="search-suggest"></div>
+      
+    </form>
+    <div class="md-search__output">
+      <div class="md-search__scrollwrap" tabindex="0" data-md-scrollfix>
+        <div class="md-search-result" data-md-component="search-result">
+          <div class="md-search-result__meta">
+            Zoeken initialiseren
+          </div>
+          <ol class="md-search-result__list" role="presentation"></ol>
+        </div>
+      </div>
+    </div>
+  </div>
+</div>
+    
+    
+      <div class="md-header__source">
+        <a href="https://github.com/MinBZK/Algoritmekader" title="Ga naar repository" class="md-source" data-md-component="source">
+  <div class="md-source__icon md-icon">
+    
+    <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 448 512"><!--! Font Awesome Free 6.6.0 by @fontawesome - https://fontawesome.com License - https://fontawesome.com/license/free (Icons: CC BY 4.0, Fonts: SIL OFL 1.1, Code: MIT License) Copyright 2024 Fonticons, Inc.--><path d="M439.55 236.05 244 40.45a28.87 28.87 0 0 0-40.81 0l-40.66 40.63 51.52 51.52c27.06-9.14 52.68 16.77 43.39 43.68l49.66 49.66c34.23-11.8 61.18 31 35.47 56.69-26.49 26.49-70.21-2.87-56-37.34L240.22 199v121.85c25.3 12.54 22.26 41.85 9.08 55a34.34 34.34 0 0 1-48.55 0c-17.57-17.6-11.07-46.91 11.25-56v-123c-20.8-8.51-24.6-30.74-18.64-45L142.57 101 8.45 235.14a28.86 28.86 0 0 0 0 40.81l195.61 195.6a28.86 28.86 0 0 0 40.8 0l194.69-194.69a28.86 28.86 0 0 0 0-40.81"/></svg>
+  </div>
+  <div class="md-source__repository">
+    GitHub
+  </div>
+</a>
+      </div>
+    
+  </nav>
+  
+    
+      
+<nav class="md-tabs" aria-label="Tabs" data-md-component="tabs">
+  <div class="md-grid">
+    <ul class="md-tabs__list">
+      
+        
+  
+  
+  
+    
+    
+      <li class="md-tabs__item">
+        <a href="../../overhetalgoritmekader/" class="md-tabs__link">
+          
+  
+    
+  
+  Basiskennis algoritmes en AI
+
+        </a>
+      </li>
+    
+  
+
+      
+        
+  
+  
+  
+    
+    
+      
+  
+  
+  
+    
+    
+      <li class="md-tabs__item">
+        <a href="../../onderwerpen/" class="md-tabs__link">
+          
+  
+    
+  
+  Onderwerpen
+
+        </a>
+      </li>
+    
+  
+
+    
+  
+
+      
+        
+  
+  
+  
+    
+    
+      <li class="md-tabs__item">
+        <a href="../" class="md-tabs__link">
+          
+  
+    
+  
+  Levenscyclus
+
+        </a>
+      </li>
+    
+  
+
+      
+        
+  
+  
+  
+    
+    
+      
+  
+  
+  
+    
+    
+      <li class="md-tabs__item">
+        <a href="../../rollen/" class="md-tabs__link">
+          
+  
+    
+  
+  Rollen
+
+        </a>
+      </li>
+    
+  
+
+    
+  
+
+      
+        
+  
+  
+  
+    
+    
+      <li class="md-tabs__item">
+        <a href="../../voldoen-aan-wetten-en-regels/" class="md-tabs__link">
+          
+  
+    
+  
+  Voldoen aan wetten en regels
+
+        </a>
+      </li>
+    
+  
+
+      
+    </ul>
+  </div>
+</nav>
+    
+  
+</header>
+    
+    <div class="md-container" data-md-component="container">
+      
+      
+        
+      
+      <main class="md-main" data-md-component="main">
+        <div class="md-main__inner md-grid">
+          
+            
+              
+                
+              
+              <div class="md-sidebar md-sidebar--primary" data-md-component="sidebar" data-md-type="navigation" >
+                <div class="md-sidebar__scrollwrap">
+                  <div class="md-sidebar__inner">
+                    
+
+
+  
+
+
+<nav class="md-nav md-nav--primary md-nav--lifted" aria-label="Navigatie" data-md-level="0">
+  <label class="md-nav__title" for="__drawer">
+    <a href="../.." title="Algoritmekader (bèta)" class="md-nav__button md-logo" aria-label="Algoritmekader (bèta)" data-md-component="logo">
+      
+  <img src="../../assets/logo.svg" alt="logo">
+
+    </a>
+    Algoritmekader (bèta)
+  </label>
+  
+    <div class="md-nav__source">
+      <a href="https://github.com/MinBZK/Algoritmekader" title="Ga naar repository" class="md-source" data-md-component="source">
+  <div class="md-source__icon md-icon">
+    
+    <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 448 512"><!--! Font Awesome Free 6.6.0 by @fontawesome - https://fontawesome.com License - https://fontawesome.com/license/free (Icons: CC BY 4.0, Fonts: SIL OFL 1.1, Code: MIT License) Copyright 2024 Fonticons, Inc.--><path d="M439.55 236.05 244 40.45a28.87 28.87 0 0 0-40.81 0l-40.66 40.63 51.52 51.52c27.06-9.14 52.68 16.77 43.39 43.68l49.66 49.66c34.23-11.8 61.18 31 35.47 56.69-26.49 26.49-70.21-2.87-56-37.34L240.22 199v121.85c25.3 12.54 22.26 41.85 9.08 55a34.34 34.34 0 0 1-48.55 0c-17.57-17.6-11.07-46.91 11.25-56v-123c-20.8-8.51-24.6-30.74-18.64-45L142.57 101 8.45 235.14a28.86 28.86 0 0 0 0 40.81l195.61 195.6a28.86 28.86 0 0 0 40.8 0l194.69-194.69a28.86 28.86 0 0 0 0-40.81"/></svg>
+  </div>
+  <div class="md-source__repository">
+    GitHub
+  </div>
+</a>
+    </div>
+  
+  <ul class="md-nav__list" data-md-scrollfix>
+    
+      
+      
+  
+  
+  
+  
+    
+    
+      
+        
+          
+        
+      
+        
+      
+        
+      
+        
+      
+    
+    
+      
+      
+    
+    
+      
+        
+        
+      
+    
+    <li class="md-nav__item md-nav__item--pruned md-nav__item--nested">
+      
+        
+  
+  
+    <a href="../../overhetalgoritmekader/" class="md-nav__link">
+      
+  
+  <span class="md-ellipsis">
+    
+  
+    Basiskennis algoritmes en AI
+  
+
+    
+  </span>
+  
+  
+
+      
+        <span class="md-nav__icon md-icon"></span>
+      
+    </a>
+  
+
+      
+    </li>
+  
+
+    
+      
+      
+  
+  
+  
+  
+    
+    
+      
+        
+      
+    
+    
+      
+      
+    
+    
+      
+        
+        
+      
+    
+    <li class="md-nav__item md-nav__item--pruned md-nav__item--nested">
+      
+        
+  
+  
+    
+  
+  
+    <a href="../../onderwerpen/" class="md-nav__link">
+      
+  
+  <span class="md-ellipsis">
+    
+  
+    Onderwerpen
+  
+
+    
+  </span>
+  
+  
+
+      
+        <span class="md-nav__icon md-icon"></span>
+      
+    </a>
+  
+
+  
+
+      
+    </li>
+  
+
+    
+      
+      
+  
+  
+  
+  
+    
+    
+      
+        
+          
+        
+      
+        
+      
+        
+      
+        
+      
+        
+      
+        
+      
+        
+      
+        
+      
+        
+      
+        
+      
+    
+    
+      
+      
+    
+    
+      
+        
+        
+      
+    
+    <li class="md-nav__item md-nav__item--pruned md-nav__item--nested">
+      
+        
+  
+  
+    <a href="../" class="md-nav__link">
+      
+  
+  <span class="md-ellipsis">
+    
+  
+    Levenscyclus
+  
+
+    
+  </span>
+  
+  
+
+      
+        <span class="md-nav__icon md-icon"></span>
+      
+    </a>
+  
+
+      
+    </li>
+  
+
+    
+      
+      
+  
+  
+  
+  
+    
+    
+      
+        
+      
+    
+    
+      
+      
+    
+    
+      
+        
+        
+      
+    
+    <li class="md-nav__item md-nav__item--pruned md-nav__item--nested">
+      
+        
+  
+  
+    
+  
+  
+    <a href="../../rollen/" class="md-nav__link">
+      
+  
+  <span class="md-ellipsis">
+    
+  
+    Rollen
+  
+
+    
+  </span>
+  
+  
+
+      
+        <span class="md-nav__icon md-icon"></span>
+      
+    </a>
+  
+
+  
+
+      
+    </li>
+  
+
+    
+      
+      
+  
+  
+  
+  
+    
+    
+      
+        
+          
+        
+      
+        
+          
+        
+      
+        
+          
+        
+      
+        
+          
+        
+      
+    
+    
+      
+      
+    
+    
+      
+        
+        
+      
+    
+    <li class="md-nav__item md-nav__item--pruned md-nav__item--nested">
+      
+        
+  
+  
+    <a href="../../voldoen-aan-wetten-en-regels/" class="md-nav__link">
+      
+  
+  <span class="md-ellipsis">
+    
+  
+    Voldoen aan wetten en regels
+  
+
+    
+  </span>
+  
+  
+
+      
+        <span class="md-nav__icon md-icon"></span>
+      
+    </a>
+  
+
+      
+    </li>
+  
+
+    
+  </ul>
+</nav>
+                  </div>
+                </div>
+              </div>
+            
+            
+              
+                
+              
+              <div class="md-sidebar md-sidebar--secondary" data-md-component="sidebar" data-md-type="toc" hidden>
+                <div class="md-sidebar__scrollwrap">
+                  <div class="md-sidebar__inner">
+                    
+
+<nav class="md-nav md-nav--secondary" aria-label="Inhoudsopgave">
+  
+  
+  
+    
+  
+  
+    <label class="md-nav__title" for="__toc">
+      <span class="md-nav__icon md-icon"></span>
+      Inhoudsopgave
+    </label>
+    <ul class="md-nav__list" data-md-component="toc" data-md-scrollfix>
+      
+        <li class="md-nav__item">
+  <a href="#fases-van-de-levenscyclus" class="md-nav__link">
+    <span class="md-ellipsis">
+      
+        Fases van de levenscyclus
+      
+    </span>
+  </a>
+  
+</li>
+      
+        <li class="md-nav__item">
+  <a href="#systeemniveau-en-organisatieniveau" class="md-nav__link">
+    <span class="md-ellipsis">
+      
+        Systeemniveau en organisatieniveau
+      
+    </span>
+  </a>
+  
+</li>
+      
+        <li class="md-nav__item">
+  <a href="#andere-levenscyclusmodellen" class="md-nav__link">
+    <span class="md-ellipsis">
+      
+        Andere levenscyclusmodellen
+      
+    </span>
+  </a>
+  
+</li>
+      
+    </ul>
+  
+</nav>
+                  </div>
+                </div>
+              </div>
+            
+          
+          
+            <div class="md-content" data-md-component="content">
+              
+                
+
+  
+
+
+
+
+              
+              <article class="md-content__inner md-typeset">
+                
+                  
+  
+
+
+
+  
+  
+
+
+<h1 id="over-de-levenscyclus">Over de levenscyclus</h1>
+<p>Om algoritmes op een verantwoorde manier te gebruiken, zul je op de juiste momenten aandacht moeten hebben voor de juiste onderwerpen en risico's. Van het ontwikkelen van een oplossing, tot het in gebruik nemen van die oplossing en er uiteindelijk weer mee stoppen. Door al in een vroeg stadium aandacht besteden aan bijvoorbeeld een eventuele inbreuk op mensenrechten kan je hier gedurende het hele proces al rekening mee houden. De levenscyclus helpt je om te bepalen wat je wanneer moet doen.</p>
+<div style="float: left; width: 50%;">
+<h2 id="fases-van-de-levenscyclus">Fases van de levenscyclus</h2>
+<ol start="0">
+  <li> <a href="organisatieverantwoordelijkheden/">Organisatieverantwoordelijkheden</a></li>
+  <li> <a href="probleemanalyse/">Probleemanalyse</a></li>
+  <li> <a href="ontwerp/">Ontwerp</a></li>
+  <li> <a href="dataverkenning-en-datapreparatie/">Dataverkenning en datapreparatie</a></li>
+  <li> <a href="ontwikkelen/">Ontwikkelen</a></li>
+  <li> <a href="verificatie-en-validatie/">Verificatie en validatie</a></li>
+  <li> <a href="implementatie/">Implementeren</a></li>
+  <li> <a href="monitoring-en-beheer/">Monitoring en beheer</a></li>
+  <li> <a href="uitfaseren/">Uitfaseren</a></li>
+</ol>
+
+<h2 id="systeemniveau-en-organisatieniveau">Systeemniveau en organisatieniveau</h2>
+<p>De levenscyclus kent 2 verschillende niveau's: </p>
+<ul>
+<li><strong>organisatieniveau</strong>: Sommige vereisten zijn algemeen en vragen om een organisatiebrede aanpak. Dit gaat bijvoorbeeld om passende processen en risicomanagment in je organisatie. Of het creëeren van bewustzijn en kennis binnen je organisatie. In het ideale geval besteed je hier al aandacht aan voordat je begint met de ontwikkeling of het gebruik van algoritmes. Bij deze fase horen maatregelen die je niet voor ieder systeem opnieuw zal hoeven te bekijken.</li>
+<li><strong>systeemniveau</strong>: Sommige vereisten voor verantwoorde inzet van algoritmes zul je bij ieder algoritme weer opnieuw aandacht moeten geven. Dat geldt bijvoorbeeld voor het beschermen van grondrechten. </li>
+</ul>
+</div>
+<div style="float: right;width: 50%;">
+<pre class="mermaid"><code>  flowchart TD
+      subgraph organisatieniveau [organisatieniveau &amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp]
+        0(0. Organisatieverantwoordelijkheden) --&gt; 1(1. Probleemanalyse);
+        subgraph systeemniveau [systeemniveau &amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp]
+          7(7. Monitoring en beheer) --&gt; 1(1. Probleemanalyse);
+          1(1. Probleemanalyse) --&gt; 2(2. Ontwerp);
+          2(2. Ontwerp) --&gt; 3(3. Dataverkenning en datapreparatie);
+          3(3. Dataverkenning en datapreparatie) --&gt; 4(4. Ontwikkelen);
+          4(4. Ontwikkelen) --&gt; 5(5. Verificatie en validatie);
+          5(5. Verificatie en validatie) --&gt; 6(6. Implementatie);
+          6(6. Implementatie) --&gt; 7(7. Monitoring en beheer);
+          7(7. Monitoring en beheer) -.-&gt; 8(8. Uitfaseren);
+        end
+      end
+      click 0 href "organisatieverantwoordelijkheden"
+      click 1 href "probleemanalyse"
+      click 2 href "ontwerp"
+      click 3 href "dataverkenning-en-datapreparatie"
+      click 4 href "ontwikkelen"
+      click 5 href "verificatie-en-validatie"
+      click 6 href "implementatie"
+      click 7 href "monitoring-en-beheer"
+      click 8 href "uitfaseren"
+      style 0 color:#fff, fill:#1975d2, stroke:#1975d2, text-decoration:underline;
+      style 1 color:#fff, fill:#1975d2, stroke:#1975d2, text-decoration:underline;
+      style 2 color:#fff, fill:#1975d2, stroke:#1975d2, text-decoration:underline;
+      style 3 color:#fff, fill:#1975d2, stroke:#1975d2, text-decoration:underline;
+      style 4 color:#fff, fill:#1975d2, stroke:#1975d2, text-decoration:underline;
+      style 5 color:#fff, fill:#1975d2, stroke:#1975d2, text-decoration:underline;
+      style 6 color:#fff, fill:#1975d2, stroke:#1975d2, text-decoration:underline;
+      style 7 color:#fff, fill:#1975d2, stroke:#1975d2, text-decoration:underline;
+      style 8 color:#fff, fill:#1975d2, stroke:#1975d2, text-decoration:underline;
+      style organisatieniveau fill:transparant</code></pre>
+</div>
+<div style="clear: both;"></div>
+<div class="admonition tip">
+<p class="admonition-title">Tip</p>
+<p>In de praktijk herhaal je soms fases of ga je terug naar een eerdere fase. Mislukt bijvoorbeeld het valideren (fase 5), dan moet je terug naar de ontwerpfase (fase 2) omdat het product nog niet voldoet aan de wensen of vereisten.</p>
+</div>
+<h2 id="andere-levenscyclusmodellen">Andere levenscyclusmodellen</h2>
+<p>De 9 fasen van de levenscyclus zijn gebaseerd op 10 belangrijke levenscyclusmodellen voor het ontwikkelen van AI, zoals:</p>
+<ul>
+<li>CRISP-DM (cross-industry standard process for data mining)</li>
+<li>ASUM-DM (analytics solutions unified method)</li>
+<li>SEMMA (Sample, Explore, Modify, Model, and Assess)</li>
+<li>Microsoft TDSP (Team Data Science Process)</li>
+<li>MDLM (mobile device lifecycle management)</li>
+<li>NIST (National Institute of Standards and Technology)</li>
+<li>ISO/IEC 22989</li>
+</ul>
+<p>Deze 9 fasen passen zo goed mogelijk bij de manier van werken van overheden.
+Het is geen verplicht model. Mogelijk past een ander levenscyclusmodel beter bij jouw organisatie.</p>
+
+
+
+
+
+
+
+  
+    
+  
+  
+    
+  
+
+
+  <aside class="md-source-file">
+    
+      
+  <span class="md-source-file__fact">
+    <span class="md-icon" title="Laatst geüpdatet">
+      <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
+    </span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
+  </span>
+
+    
+    
+      
+  <span class="md-source-file__fact">
+    <span class="md-icon" title="Gecreëerd">
+      <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M14.47 15.08 11 13V7h1.5v5.25l3.08 1.83c-.41.28-.79.62-1.11 1m-1.39 4.84c-.36.05-.71.08-1.08.08-4.42 0-8-3.58-8-8s3.58-8 8-8 8 3.58 8 8c0 .37-.03.72-.08 1.08.69.1 1.33.32 1.92.64.1-.56.16-1.13.16-1.72 0-5.5-4.5-10-10-10S2 6.5 2 12s4.47 10 10 10c.59 0 1.16-.06 1.72-.16-.32-.59-.54-1.23-.64-1.92M18 15v3h-3v2h3v3h2v-3h3v-2h-3v-3z"/></svg>
+    </span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
+  </span>
+
+    
+    
+    
+  </aside>
+
+
+
+  
+
+
+
+                
+              </article>
+            </div>
+          
+          
+  <script>var tabs=__md_get("__tabs");if(Array.isArray(tabs))e:for(var set of document.querySelectorAll(".tabbed-set")){var labels=set.querySelector(".tabbed-labels");for(var tab of tabs)for(var label of labels.getElementsByTagName("label"))if(label.innerText.trim()===tab){var input=document.getElementById(label.htmlFor);input.checked=!0;continue e}}</script>
+
+<script>var target=document.getElementById(location.hash.slice(1));target&&target.name&&(target.checked=target.name.startsWith("__tabbed_"))</script>
+        </div>
+        
+          <button type="button" class="md-top md-icon" data-md-component="top" hidden>
+  
+  <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M13 20h-2V8l-5.5 5.5-1.42-1.42L12 4.16l7.92 7.92-1.42 1.42L13 8z"/></svg>
+  Terug naar boven
+</button>
+        
+      </main>
+      
+        <footer class="md-footer">
+    <div class="md-footer__inner">
+      <!-- Left Section: Notice Text -->
+      <div class="md-footer__notice">
+        <p>Let op: deze website is in ontwikkeling. De informatie verandert vaak. Wil je <a href="/Algoritmekader/overhetalgoritmekader/CONTRIBUTING/">meehelpen?</a></p>
+      </div>
+  
+      <!-- Right Section: Links in Columns -->
+      <div class="md-footer__links">
+        <div class="md-footer__column">
+          <a href="/Algoritmekader/overhetalgoritmekader/">Over het Algoritmekader</a>
+          <a href="/Algoritmekader/overhetalgoritmekader/CONTRIBUTING/">Meedoen</a>
+          <a href="#">Contact</a>
+          <a href="#">Privacy</a>
+        </div>
+        <div class="md-footer__column">
+          <a href="https://overheid.nl/">Overheid.nl</a>
+          <a href="https://www.rijksoverheid.nl/">Rijksoverheid.nl</a>
+          <a href="https://www.digitaleoverheid.nl/">Digitale Overheid</a>
+          <a href="https://data.overheid.nl/">Data.overheid.nl</a>
+          <a href="https://algoritmes.pleio.nl/">Algoritmes.pleio.nl</a>
+        </div>
+      </div>
+    </div>
+  </footer>
+      
+    </div>
+    <div class="md-dialog" data-md-component="dialog">
+      <div class="md-dialog__inner md-typeset"></div>
+    </div>
+    
+    
+    <script id="__config" type="application/json">{"base": "../..", "features": ["navigation.indexes", "navigation.tabs", "navigation.tabs.sticky", "navigation.top", "navigation.tracking", "navigation.instant", "navigation.footer", "navigation.prune", "navigation.path", "search.highlight", "search.suggest", "content.tooltips", "content.tabs.link"], "search": "../../assets/javascripts/workers/search.c7c1ca2c.min.js", "translations": {"clipboard.copied": "Gekopieerd naar klembord", "clipboard.copy": "Kopi\u00ebren naar klembord", "search.result.more.one": "1 extra overeenkomst op deze pagina", "search.result.more.other": "# extra overeenkomsten op deze pagina", "search.result.none": "Geen overeenkomende documenten", "search.result.one": "1 overeenkomende document", "search.result.other": "# overeenkomende documenten", "search.result.placeholder": "Typ om te beginnen met zoeken", "search.result.term.missing": "Ontbreekt", "select.version": "Selecteer versie"}}</script>
+    
+    
+      <script src="../../assets/javascripts/bundle.203fd0bc.min.js"></script>
+      
+        <script src="https://code.jquery.com/jquery-3.6.0.min.js"></script>
+      
+        <script src="https://cdn.jsdelivr.net/npm/choices.js/public/assets/scripts/choices.min.js"></script>
+      
+        <script src="https://unpkg.com/tablesort@5.3.0/dist/tablesort.min.js"></script>
+      
+        <script src="../../javascripts/tablesort.js"></script>
+      
+        <script src="../../javascripts/filtering.js"></script>
+      
+        <script src="https://unpkg.com/mermaid@10.9.1/dist/mermaid.min.js"></script>
+      
+    
+  <script id="init-glightbox">const lightbox = GLightbox({"touchNavigation": true, "loop": false, "zoomable": true, "draggable": true, "openEffect": "zoom", "closeEffect": "zoom", "slideEffect": "slide"});
+document$.subscribe(() => { lightbox.reload() });
+</script></body>
+</html>
\ No newline at end of file
diff --git a/pr-preview/pr-480/levenscyclus/probleemanalyse/index.html b/pr-preview/pr-480/levenscyclus/probleemanalyse/index.html
index ec99e1c092..929864a2ac 100644
--- a/pr-preview/pr-480/levenscyclus/probleemanalyse/index.html
+++ b/pr-preview/pr-480/levenscyclus/probleemanalyse/index.html
@@ -27,7 +27,7 @@
     
     
       
-        <title>Probleemanalyse - Algoritmekader (bèta)</title>
+        <title>Fase 1, probleemanalyse - Algoritmekader (bèta)</title>
       
     
     
@@ -97,7 +97,7 @@
     <div data-md-component="skip">
       
         
-        <a href="#vereisten" class="md-skip">
+        <a href="#fase-1-probleemanalyse" class="md-skip">
           Ga naar inhoud
         </a>
       
@@ -132,7 +132,7 @@
         <div class="md-header__topic" data-md-component="header-topic">
           <span class="md-ellipsis">
             
-              Probleemanalyse
+              Fase 1, probleemanalyse
             
           </span>
         </div>
@@ -595,7 +595,7 @@
   <span class="md-ellipsis">
     
   
-    Organisatieverantwoordelijkheden
+    Fase 0, organisatieverantwoordelijkheden
   
 
     
@@ -622,6 +622,8 @@
       <input class="md-nav__toggle md-toggle" type="checkbox" id="__toc">
       
       
+        
+      
       
         <label class="md-nav__link md-nav__link--active" for="__toc">
           
@@ -629,7 +631,7 @@
   <span class="md-ellipsis">
     
   
-    Probleemanalyse
+    Fase 1, probleemanalyse
   
 
     
@@ -646,7 +648,7 @@
   <span class="md-ellipsis">
     
   
-    Probleemanalyse
+    Fase 1, probleemanalyse
   
 
     
@@ -662,6 +664,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -713,7 +717,7 @@
   <span class="md-ellipsis">
     
   
-    Ontwerp
+    Fase 2, ontwerp
   
 
     
@@ -740,7 +744,7 @@
   <span class="md-ellipsis">
     
   
-    Dataverkenning en datapreparatie
+    Fase 3, dataverkenning en datapreparatie
   
 
     
@@ -767,7 +771,7 @@
   <span class="md-ellipsis">
     
   
-    Ontwikkelen
+    Fase 4, ontwikkelen
   
 
     
@@ -794,7 +798,7 @@
   <span class="md-ellipsis">
     
   
-    Verificatie en validatie
+    Fase 5, verificatie en validatie
   
 
     
@@ -821,7 +825,7 @@
   <span class="md-ellipsis">
     
   
-    Implementatie
+    Fase 6, implementatie
   
 
     
@@ -848,7 +852,7 @@
   <span class="md-ellipsis">
     
   
-    Monitoring en beheer
+    Fase 7, monitoring en beheer
   
 
     
@@ -875,7 +879,7 @@
   <span class="md-ellipsis">
     
   
-    Uitfaseren
+    Fase 8, uitfaseren
   
 
     
@@ -1038,6 +1042,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -1097,8 +1103,7 @@
   
 
 
-  <h1>Probleemanalyse</h1>
-
+<h1 id="fase-1-probleemanalyse">Fase 1: Probleemanalyse</h1>
 <p>In deze fase wordt het probleem en de doelstellingen van een opdrachtgever geanalyseerd en beschreven. 
 Er wordt bijvoorbeeld onderzocht welke publieke taak moet worden ondersteund en welke publieke waarden daarbij moeten worden beschermd of juist gerealiseerd. 
 In deze fase wordt onderzocht of het ontwikkelen van een algoritme een geschikt middel is om het doel te realiseren en het probleem op te lossen.
@@ -1140,7 +1145,7 @@ <h2 id="maatregelen">Maatregelen</h2>
     <span class="md-icon" title="Laatst geüpdatet">
       <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
     </span>
-    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">12 december 2024</span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
   </span>
 
     
diff --git a/pr-preview/pr-480/levenscyclus/uitfaseren/index.html b/pr-preview/pr-480/levenscyclus/uitfaseren/index.html
index df007710ef..9047edbbcb 100644
--- a/pr-preview/pr-480/levenscyclus/uitfaseren/index.html
+++ b/pr-preview/pr-480/levenscyclus/uitfaseren/index.html
@@ -27,7 +27,7 @@
     
     
       
-        <title>Uitfaseren - Algoritmekader (bèta)</title>
+        <title>Fase 8, uitfaseren - Algoritmekader (bèta)</title>
       
     
     
@@ -97,7 +97,7 @@
     <div data-md-component="skip">
       
         
-        <a href="#vereisten" class="md-skip">
+        <a href="#fase-8-uitfaseren" class="md-skip">
           Ga naar inhoud
         </a>
       
@@ -132,7 +132,7 @@
         <div class="md-header__topic" data-md-component="header-topic">
           <span class="md-ellipsis">
             
-              Uitfaseren
+              Fase 8, uitfaseren
             
           </span>
         </div>
@@ -595,7 +595,7 @@
   <span class="md-ellipsis">
     
   
-    Organisatieverantwoordelijkheden
+    Fase 0, organisatieverantwoordelijkheden
   
 
     
@@ -622,7 +622,7 @@
   <span class="md-ellipsis">
     
   
-    Probleemanalyse
+    Fase 1, probleemanalyse
   
 
     
@@ -649,7 +649,7 @@
   <span class="md-ellipsis">
     
   
-    Ontwerp
+    Fase 2, ontwerp
   
 
     
@@ -676,7 +676,7 @@
   <span class="md-ellipsis">
     
   
-    Dataverkenning en datapreparatie
+    Fase 3, dataverkenning en datapreparatie
   
 
     
@@ -703,7 +703,7 @@
   <span class="md-ellipsis">
     
   
-    Ontwikkelen
+    Fase 4, ontwikkelen
   
 
     
@@ -730,7 +730,7 @@
   <span class="md-ellipsis">
     
   
-    Verificatie en validatie
+    Fase 5, verificatie en validatie
   
 
     
@@ -757,7 +757,7 @@
   <span class="md-ellipsis">
     
   
-    Implementatie
+    Fase 6, implementatie
   
 
     
@@ -784,7 +784,7 @@
   <span class="md-ellipsis">
     
   
-    Monitoring en beheer
+    Fase 7, monitoring en beheer
   
 
     
@@ -811,6 +811,8 @@
       <input class="md-nav__toggle md-toggle" type="checkbox" id="__toc">
       
       
+        
+      
       
         <label class="md-nav__link md-nav__link--active" for="__toc">
           
@@ -818,7 +820,7 @@
   <span class="md-ellipsis">
     
   
-    Uitfaseren
+    Fase 8, uitfaseren
   
 
     
@@ -835,7 +837,7 @@
   <span class="md-ellipsis">
     
   
-    Uitfaseren
+    Fase 8, uitfaseren
   
 
     
@@ -851,6 +853,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -1038,6 +1042,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -1097,8 +1103,7 @@
   
 
 
-  <h1>Uitfaseren</h1>
-
+<h1 id="fase-8-uitfaseren">Fase 8: Uitfaseren</h1>
 <p>Als wordt besloten dat het algoritme niet langer nodig is of wordt vervangen door een wezenlijk andere versie, wordt het gearchiveerd en uitgefaseerd. 
 Hiermee wordt ervoor gezocht dat later kan worden gereconstrueerd hoe het algoritme heeft gefunctioneerd en dat gebruikers er geen gebruik meer van kunnen maken.  </p>
 <p>Archiveren betekent dat documentatie en eventuele relevante artefacten (zoals logbestanden en de parameters van het model) worden bewaard voor een bepaalde periode. 
@@ -1143,7 +1148,7 @@ <h2 id="maatregelen">Maatregelen</h2>
     <span class="md-icon" title="Laatst geüpdatet">
       <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
     </span>
-    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">12 december 2024</span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
   </span>
 
     
diff --git a/pr-preview/pr-480/levenscyclus/verificatie-en-validatie/index.html b/pr-preview/pr-480/levenscyclus/verificatie-en-validatie/index.html
index b6c75dc352..66f2a72901 100644
--- a/pr-preview/pr-480/levenscyclus/verificatie-en-validatie/index.html
+++ b/pr-preview/pr-480/levenscyclus/verificatie-en-validatie/index.html
@@ -27,7 +27,7 @@
     
     
       
-        <title>Verificatie en validatie - Algoritmekader (bèta)</title>
+        <title>Fase 5, verificatie en validatie - Algoritmekader (bèta)</title>
       
     
     
@@ -97,7 +97,7 @@
     <div data-md-component="skip">
       
         
-        <a href="#vereisten" class="md-skip">
+        <a href="#fase-5-verificatie-en-validatie" class="md-skip">
           Ga naar inhoud
         </a>
       
@@ -132,7 +132,7 @@
         <div class="md-header__topic" data-md-component="header-topic">
           <span class="md-ellipsis">
             
-              Verificatie en validatie
+              Fase 5, verificatie en validatie
             
           </span>
         </div>
@@ -595,7 +595,7 @@
   <span class="md-ellipsis">
     
   
-    Organisatieverantwoordelijkheden
+    Fase 0, organisatieverantwoordelijkheden
   
 
     
@@ -622,7 +622,7 @@
   <span class="md-ellipsis">
     
   
-    Probleemanalyse
+    Fase 1, probleemanalyse
   
 
     
@@ -649,7 +649,7 @@
   <span class="md-ellipsis">
     
   
-    Ontwerp
+    Fase 2, ontwerp
   
 
     
@@ -676,7 +676,7 @@
   <span class="md-ellipsis">
     
   
-    Dataverkenning en datapreparatie
+    Fase 3, dataverkenning en datapreparatie
   
 
     
@@ -703,7 +703,7 @@
   <span class="md-ellipsis">
     
   
-    Ontwikkelen
+    Fase 4, ontwikkelen
   
 
     
@@ -730,6 +730,8 @@
       <input class="md-nav__toggle md-toggle" type="checkbox" id="__toc">
       
       
+        
+      
       
         <label class="md-nav__link md-nav__link--active" for="__toc">
           
@@ -737,7 +739,7 @@
   <span class="md-ellipsis">
     
   
-    Verificatie en validatie
+    Fase 5, verificatie en validatie
   
 
     
@@ -754,7 +756,7 @@
   <span class="md-ellipsis">
     
   
-    Verificatie en validatie
+    Fase 5, verificatie en validatie
   
 
     
@@ -770,6 +772,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -821,7 +825,7 @@
   <span class="md-ellipsis">
     
   
-    Implementatie
+    Fase 6, implementatie
   
 
     
@@ -848,7 +852,7 @@
   <span class="md-ellipsis">
     
   
-    Monitoring en beheer
+    Fase 7, monitoring en beheer
   
 
     
@@ -875,7 +879,7 @@
   <span class="md-ellipsis">
     
   
-    Uitfaseren
+    Fase 8, uitfaseren
   
 
     
@@ -1038,6 +1042,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -1097,8 +1103,7 @@
   
 
 
-  <h1>Verificatie en validatie</h1>
-
+<h1 id="fase-5-verificatie-en-validatie">Fase 5: Verificatie en validatie</h1>
 <p>Bij de verificatie en validatie van het algoritme dient bepaald te worden of het algoritme gebouwd is volgens de (technische) specificaties en voldoet aan de beoogde doelstellingen. 
 Hiervoor moeten technische, maar ook organisatorische maatregelen worden getroffen.  </p>
 <p>Bij verificatie kan worden gedacht aan het (laten) controleren of het algoritme voldoet aan de (technische) specificaties, bijvoorbeeld door een interne of externe audit of in de toekomst een <abbr title="Het proces waarbij de naleving wordt aangetoond van de voorschriften van hoofdstuk III, afdeling 2 van de AI-Verordening in verband met een AI-systeem met een hoog risico">conformiteitsbeoordeling</abbr> voor hoog risico AI-systemen. 
@@ -1114,7 +1119,7 @@ <h1>Verificatie en validatie</h1>
 Het is ook denkbaar dat het algoritme onvoldoende aansluit bij de doelstellingen en het gebruik ervan moet wordt beëindigd. 
 Een andere conclusie kan zijn dat het presteert conform verwachting en naar de implementatiefase kan worden gegaan.  </p>
 <h2 id="vereisten">Vereisten</h2>
-<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/index.html">aia-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/index.html">Datasets voor hoog-risico-AI-systemen voldoen aan kwaliteitscriteria</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/index.html">aia-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/index.html">Hoog-risico-AI-systemen zijn voorzien van voldoende technische documentatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/index.html">aia-14</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/index.html">Hoog-risico-AI-systemen worden pas geleverd of gebruikt na een conformiteitsbeoordelingsprocedure</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/index.html">aia-15</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/index.html">Hoog-risico-AI-systemen zijn voorzien van een EU-conformiteitsverklaring</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/index.html">aia-29</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/index.html">Hoog-risico-AI-systemen voor publieke taken worden beoordeeld op gevolgen voor grondrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/index.html">aia-30</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/index.html">Aanbieders van AI-modellen voor algemene doeleinden met een systeemrisico treffen extra maatregelen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/index.html">avg-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/index.html">Een Data Protection Impact Assessment (DPIA) wordt uitgevoerd wanneer de verwerking van persoonsgegevens waarschijnlijk een hoog risico met zich meebrengt voor de rechten en vrijheden van natuurlijke personen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/index.html">awb-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/index.html">Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/index.html">grw-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/index.html">Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/index.html">grw-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/index.html">Algoritmes discrimineren niet</a></td></tr></tbody></table>
+<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/index.html">aia-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/index.html">Datasets voor hoog-risico-AI-systemen voldoen aan kwaliteitscriteria</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/index.html">aia-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/index.html">Hoog-risico-AI-systemen zijn voorzien van voldoende technische documentatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/index.html">aia-14</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/index.html">Hoog-risico-AI-systemen worden pas geleverd of gebruikt na een conformiteitsbeoordelingsprocedure</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/index.html">aia-15</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/index.html">Hoog-risico-AI-systemen zijn voorzien van een EU-conformiteitsverklaring</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/index.html">aia-29</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/index.html">Hoog-risico-AI-systemen voor publieke taken worden beoordeeld op gevolgen voor grondrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/index.html">aia-30</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/index.html">Aanbieders van AI-modellen voor algemene doeleinden met een systeemrisico treffen extra maatregelen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/index.html">aia-39</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/index.html">Hoog-risico-AI-systemen zijn getest.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/index.html">avg-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/index.html">Een Data Protection Impact Assessment (DPIA) wordt uitgevoerd wanneer de verwerking van persoonsgegevens waarschijnlijk een hoog risico met zich meebrengt voor de rechten en vrijheden van natuurlijke personen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/index.html">awb-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/index.html">Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/index.html">grw-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/index.html">Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/index.html">grw-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/index.html">Algoritmes discrimineren niet</a></td></tr></tbody></table>
 
 <h2 id="maatregelen">Maatregelen</h2>
 <div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Maatregelen</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-03-doel-verwerken-persoonsgegevens/index.html">owp-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-03-doel-verwerken-persoonsgegevens/index.html">Beschrijf voor welk doel het algoritme persoonsgegevens gebruikt en waarom dit mag</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/index.html">owp-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/index.html">Inventariseer welke grondrechten het algoritme kan schenden en maak een belangenafweging</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/index.html">owp-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/index.html">Maak een Project Startarchitectuur (PSA) voor de ontwikkeling of inkoop van algoritmes</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/index.html">owp-16</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/index.html">Laat aanbieder(s) bewijs leveren dat de door hen ontwikkelde algoritmes geen inbreuk maken op de auteursrechten van derden met de trainingsdata en de output.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/index.html">ver-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/index.html">Controleer regelmatig of het algoritme werkt zoals het bedoeld is</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/index.html">ver-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/index.html">Toets het algoritme op bias</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-03-vertaling-wetgeving-naar-systeem/index.html">ver-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-03-vertaling-wetgeving-naar-systeem/index.html">Controleer regelmatig of het algoritme voldoet aan alle wetten en regels en het eigen beleid</a></td></tr></tbody></table>
@@ -1145,7 +1150,7 @@ <h2 id="maatregelen">Maatregelen</h2>
     <span class="md-icon" title="Laatst geüpdatet">
       <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
     </span>
-    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">12 december 2024</span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
   </span>
 
     
diff --git a/pr-preview/pr-480/onderwerpen/bias-en-non-discriminatie/index.html b/pr-preview/pr-480/onderwerpen/bias-en-non-discriminatie/index.html
index 96abeb397c..f365786a6d 100644
--- a/pr-preview/pr-480/onderwerpen/bias-en-non-discriminatie/index.html
+++ b/pr-preview/pr-480/onderwerpen/bias-en-non-discriminatie/index.html
@@ -1713,7 +1713,7 @@ <h4 id="handvest-van-de-grondrechten-van-de-europese-unie">Handvest van de grond
 <p>Het Algoritmekader is nog volop in ontwikkeling. Op deze plek willen we vooral aan de slag gaan op een open en transparante wijze. Het is dus niet definitief. Dat betekent dat er dingen opstaan die niet af zijn en soms zelfs fout. Mocht er iets niet kloppen, laat het ons weten via <a href="https://github.com/MinBZK/Algoritmekader">GitHub</a>.</p>
 </div>
 <h2 id="vereisten">Vereisten</h2>
-<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">aia-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/index.html">avg-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/index.html">Gevoelige persoonsgegevens worden alleen gebruikt als hiervoor een wettelijke uitzondering geldt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/index.html">grw-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/index.html">Algoritmes discrimineren niet</a></td></tr></tbody></table>
+<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">aia-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/index.html">avg-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/index.html">Gevoelige persoonsgegevens worden alleen gebruikt als hiervoor een wettelijke uitzondering geldt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/index.html">grw-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/index.html">Algoritmes discrimineren niet</a></td></tr></tbody></table>
 
 <h2 id="maatregelen">Maatregelen</h2>
 <div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Maatregelen</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/index.html">imp-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/index.html">Stel een protocol vast voor de situatie dat er (een vermoeden van) discriminatie door een algoritme is geconstateerd en pas dit wanneer nodig toe.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/index.html">dat-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/index.html">Gebruik bij machine learning technieken gescheiden train-, test- en validatiedata en houdt rekening met underfitting en overfitting.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/index.html">ver-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/index.html">Controleer regelmatig of het algoritme werkt zoals het bedoeld is</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/index.html">ver-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/index.html">Toets het algoritme op bias</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-02-aselecte-steekproeven/index.html">imp-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-02-aselecte-steekproeven/index.html">Doe aselecte steekproeven om algoritmes met 'risicogestuurde selectie’ te controleren</a></td></tr></tbody></table>
diff --git a/pr-preview/pr-480/onderwerpen/fundamentele-rechten/index.html b/pr-preview/pr-480/onderwerpen/fundamentele-rechten/index.html
index a8658ae298..0f96b2d91a 100644
--- a/pr-preview/pr-480/onderwerpen/fundamentele-rechten/index.html
+++ b/pr-preview/pr-480/onderwerpen/fundamentele-rechten/index.html
@@ -1367,7 +1367,7 @@ <h2 id="belang-van-grondrechten-beschermen">Belang van grondrechten beschermen</
 </ul>
 <p>Als overheid moet je hier goed op letten. Doe dit zo vroeg mogelijk in de <a href="../../levenscyclus/">levenscyclus</a>. De maatregelen die we adviseren, beginnen al bij het ontwerpen en trainen van algoritmes.</p>
 <h2 id="vereisten">Vereisten</h2>
-<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">aia-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">aia-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">Mensen over wie besluiten worden genomen door een hoog-risico-AI-systemen, krijgen op verzoek informatie over deze besluiten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/index.html">aia-29</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/index.html">Hoog-risico-AI-systemen voor publieke taken worden beoordeeld op gevolgen voor grondrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/index.html">aia-37</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/index.html">Klachtrecht aanbieders verder in AI-waardeketen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/index.html">avg-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/index.html">Persoonsgegevens en andere data verwerken gebeurt proportioneel en subsidiair</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/index.html">awb-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/index.html">Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/index.html">grw-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/index.html">Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr></tbody></table>
+<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">aia-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">aia-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">Mensen over wie besluiten worden genomen door een hoog-risico-AI-systemen, krijgen op verzoek informatie over deze besluiten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/index.html">aia-29</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/index.html">Hoog-risico-AI-systemen voor publieke taken worden beoordeeld op gevolgen voor grondrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/index.html">aia-37</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/index.html">Klachtrecht aanbieders verder in AI-waardeketen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/index.html">avg-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/index.html">Persoonsgegevens en andere data verwerken gebeurt proportioneel en subsidiair</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/index.html">awb-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/index.html">Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/index.html">grw-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/index.html">Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr></tbody></table>
 
 <h2 id="aanbevolen-maatregelen">Aanbevolen maatregelen</h2>
 <div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Maatregelen</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-04-betrek-belanghebbenden/index.html">pba-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-04-betrek-belanghebbenden/index.html">Overleg regelmatig met belanghebbenden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/index.html">owp-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/index.html">Inventariseer welke grondrechten het algoritme kan schenden en maak een belangenafweging</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-07-kwetsbare-groepen/index.html">owp-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-07-kwetsbare-groepen/index.html">Maak een lijst van de meest kwetsbare groepen en bescherm hen extra</a></td></tr></tbody></table>
diff --git a/pr-preview/pr-480/onderwerpen/governance/index.html b/pr-preview/pr-480/onderwerpen/governance/index.html
index addd24a65e..515b003d08 100644
--- a/pr-preview/pr-480/onderwerpen/governance/index.html
+++ b/pr-preview/pr-480/onderwerpen/governance/index.html
@@ -1444,7 +1444,7 @@ <h2 id="aanpak-algoritme-governance">Aanpak algoritme-governance</h2>
 Zorg dat iemand verantwoordelijk is voor algoritme-governance. En betrek stakeholders.</p>
 </blockquote>
 <h2 id="vereisten">Vereisten</h2>
-<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/index.html">aia-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/index.html">Personeel en gebruikers zijn voldoende AI-geletterd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/index.html">aia-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/index.html">Verboden AI-systemen mogen niet worden gebruikt.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/index.html">aia-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/index.html">Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/index.html">aia-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/index.html">Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/index.html">aia-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/index.html">Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/index.html">aia-14</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/index.html">Hoog-risico-AI-systemen worden pas geleverd of gebruikt na een conformiteitsbeoordelingsprocedure</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/index.html">aia-15</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/index.html">Hoog-risico-AI-systemen zijn voorzien van een EU-conformiteitsverklaring</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/index.html">aia-17</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/index.html">Hoog-risico-AI-systemen zijn geregistreerd in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/index.html">aia-20</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/index.html">Hoog-risico-AI-systemen worden gebruikt volgens de gebruiksaanwijzing</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/index.html">aia-21</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/index.html">Menselijke controle van hoog-risico-AI-systemen wordt uitgevoerd door mensen met voldoende kennis en mogelijkheden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/index.html">aia-25</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/index.html">Gebruiksverantwoordelijken controleren de registratie van het hoog-risico AI-systeem in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">aia-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">Mensen over wie besluiten worden genomen door een hoog-risico-AI-systemen, krijgen op verzoek informatie over deze besluiten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/index.html">aia-31</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/index.html">Als AI-modellen voor algemene doeleinden met systeemrisico’s ernstige incidenten veroorzaken, wordt dit gedocumenteerd en gerapporteerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/index.html">aia-32</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/index.html">AI-modellen voor algemene doeleinden met systeemrisico’s zijn voldoende beveiligd tegen cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/index.html">aia-35</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/index.html">Ernstige incidenten door hoog-risico-AI-systemen worden gemeld aan de toezichthouder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/index.html">aia-36</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/index.html">Klokkenluiders kunnen veilig melden dat een organisatie zich niet houdt aan de AI-verordening</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/index.html">aut-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/index.html">Auteursrechten zijn beschermd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/index.html">avg-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/index.html">Organisaties kunnen bewijzen dat zij persoonsgegevens op de juiste manier verwerken</a></td></tr></tbody></table>
+<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/index.html">aia-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/index.html">Personeel en gebruikers zijn voldoende AI-geletterd.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/index.html">aia-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/index.html">Verboden AI-systemen mogen niet worden gebruikt.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/index.html">aia-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/index.html">Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/index.html">aia-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/index.html">Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/index.html">aia-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/index.html">Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/index.html">aia-14</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/index.html">Hoog-risico-AI-systemen worden pas geleverd of gebruikt na een conformiteitsbeoordelingsprocedure</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/index.html">aia-15</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/index.html">Hoog-risico-AI-systemen zijn voorzien van een EU-conformiteitsverklaring</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/index.html">aia-17</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/index.html">Hoog-risico-AI-systemen zijn geregistreerd in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/index.html">aia-20</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/index.html">Hoog-risico-AI-systemen worden gebruikt volgens de gebruiksaanwijzing</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/index.html">aia-21</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/index.html">Menselijke controle van hoog-risico-AI-systemen wordt uitgevoerd door mensen met voldoende kennis en mogelijkheden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/index.html">aia-25</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/index.html">Gebruiksverantwoordelijken controleren de registratie van het hoog-risico AI-systeem in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">aia-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">Mensen over wie besluiten worden genomen door een hoog-risico-AI-systemen, krijgen op verzoek informatie over deze besluiten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/index.html">aia-31</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/index.html">Als AI-modellen voor algemene doeleinden met systeemrisico’s ernstige incidenten veroorzaken, wordt dit gedocumenteerd en gerapporteerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/index.html">aia-32</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/index.html">AI-modellen voor algemene doeleinden met systeemrisico’s zijn voldoende beveiligd tegen cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/index.html">aia-35</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/index.html">Ernstige incidenten door hoog-risico-AI-systemen worden gemeld aan de toezichthouder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/index.html">aia-36</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/index.html">Klokkenluiders kunnen veilig melden dat een organisatie zich niet houdt aan de AI-verordening</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/index.html">aut-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/index.html">Auteursrechten zijn beschermd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/index.html">avg-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/index.html">Organisaties kunnen bewijzen dat zij persoonsgegevens op de juiste manier verwerken</a></td></tr></tbody></table>
 
 <h2 id="aanbevolen-maatregelen">Aanbevolen maatregelen</h2>
 <div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Maatregelen</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-01-benodigde-expertise-en-capaciteit/index.html">org-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-01-benodigde-expertise-en-capaciteit/index.html">Bepaal of er genoeg experts beschikbaar zijn</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-02-beleid_opstellen_inzet_algoritmes/index.html">org-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-02-beleid_opstellen_inzet_algoritmes/index.html">Stel beleid op voor een verantwoorde inzet van algoritmes binnen de organisatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-03-toepassen_risicobeheer/index.html">org-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-03-toepassen_risicobeheer/index.html">Maak een plan voor het omgaan met risico’s</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-04-politiek-bestuurlijke-verantwoordelijkheid/index.html">org-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-04-politiek-bestuurlijke-verantwoordelijkheid/index.html">Zorg voor politiek-bestuurlijk bewustzijn, betrokkenheid, en verantwoordelijkheid.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-05-bestaande-governance/index.html">org-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-05-bestaande-governance/index.html">Sluit algoritmegovernance aan op bestaande governancestructuren binnen de organisatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/index.html">org-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/index.html">Gebruik een algoritme volwassenheidsmodel om te weten waar de organisatie staat</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-07-intern-toezicht/index.html">org-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-07-intern-toezicht/index.html">Richt een algoritmegovernance in met three lines of defence</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-08-beslismoment-levenscyclus/index.html">org-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-08-beslismoment-levenscyclus/index.html">Maak gebruik van beslismomenten  in de algoritmelevenscyclus</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-09-governance-per-risicocategorie/index.html">org-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-09-governance-per-risicocategorie/index.html">Richt algoritmegovernance op basis van de risicoclassificatie van algoritmes.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-10-inrichten-taken-en-verantwoordelijkheden-algoritmegovernance/index.html">org-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-10-inrichten-taken-en-verantwoordelijkheden-algoritmegovernance/index.html">Taken en verantwoordelijkheden zijn toebedeeld in de algoritmegovernance</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-11-gebruikersbeheer/index.html">org-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-11-gebruikersbeheer/index.html">Maak afspraken over het beheer van gebruikers</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/index.html">org-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/index.html">Controleer en verbeter regelmatig de kwaliteit van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-13-wachtwoordbeheer/index.html">org-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-13-wachtwoordbeheer/index.html">Maak afspraken over het beheer van wachtwoorden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-14-wijzigingenproces/index.html">org-14</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-14-wijzigingenproces/index.html">Maak afspraken over het wijzigen van de code</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-01-formuleren-probleemdefinitie/index.html">pba-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-01-formuleren-probleemdefinitie/index.html">Beschrijf het probleem dat het algoritme moet oplossen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-02-formuleren-doelstelling/index.html">pba-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-02-formuleren-doelstelling/index.html">Beschrijf het doel van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-03-onderbouwen-gebruik-algoritme/index.html">pba-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-03-onderbouwen-gebruik-algoritme/index.html">Beschrijf waarom een algoritme het probleem moet oplossen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-04-betrek-belanghebbenden/index.html">pba-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-04-betrek-belanghebbenden/index.html">Overleg regelmatig met belanghebbenden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-05-wettelijke-grondslag/index.html">pba-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-05-wettelijke-grondslag/index.html">Beschrijf de wettelijke grondslag voor de inzet van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/index.html">owp-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/index.html">Beschrijf de rollen en verantwoordelijkheden voor het ontwikkelen en gebruiken van algoritmes</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-05-soort-algoritme/index.html">owp-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-05-soort-algoritme/index.html">Bepaal het soort algoritme en de risicogroep en vereisten die hierbij horen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-28-pas-vastgestelde-beleidskaders-zijn-nageleefd/index.html">owp-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-28-pas-vastgestelde-beleidskaders-zijn-nageleefd/index.html">Pas vastgestelde interne beleidskaders toe en maak aantoonbaar dat deze zijn nageleefd bij het ontwikkelen, inkopen en gebruiken van algoritmes.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-toepassen_vastgestelde-beleidskaders/index.html">org-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-toepassen_vastgestelde-beleidskaders/index.html">Pas vastgestelde beleidskaders toe</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-02-stopzetten-gebruik/index.html">owk-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-02-stopzetten-gebruik/index.html">Maak een noodplan voor het stoppen van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-03-vertaling-wetgeving-naar-systeem/index.html">ver-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-03-vertaling-wetgeving-naar-systeem/index.html">Controleer regelmatig of het algoritme voldoet aan alle wetten en regels en het eigen beleid</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/index.html">imp-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/index.html">Richt de juiste menselijke controle in van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-proces-privacyrechten/index.html">imp-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-proces-privacyrechten/index.html">Spreek af hoe de organisatie omgaat met privacy-verzoeken</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-werkinstructies-medewerkers/index.html">imp-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-werkinstructies-medewerkers/index.html">Spreek af hoe medewerkers omgaan met het algoritme.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-07-klacht-bezwaar-beroep/index.html">imp-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-07-klacht-bezwaar-beroep/index.html">Richt een proces in zodat burgers of andere belanghebbenden een klacht, bezwaar of beroep kunnen indienen over het gebruik van het algoritme en monitor dit proces.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-09-politiek-bestuurlijk-besluit/index.html">imp-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-09-politiek-bestuurlijk-besluit/index.html">Maak een openbaar besluit over de inzet van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/index.html">mon-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/index.html">Maak een noodplan voor beveiligingsincidenten</a></td></tr></tbody></table>
diff --git a/pr-preview/pr-480/onderwerpen/menselijke-controle/index.html b/pr-preview/pr-480/onderwerpen/menselijke-controle/index.html
index fd7b18137f..6acc1bb56a 100644
--- a/pr-preview/pr-480/onderwerpen/menselijke-controle/index.html
+++ b/pr-preview/pr-480/onderwerpen/menselijke-controle/index.html
@@ -1520,7 +1520,7 @@ <h2 id="aanpak-menselijke-controle">Aanpak menselijke controle</h2>
 <h3 id="feedback">Feedback</h3>
 <p>Na het bepalen van de manier van controleren, bepaal je de manier waarop je feedback krijgt over het algoritme: Wat voor soort informatie moet bij wie terechtkomen? Aan wie moet een gebruiker bijvoorbeeld rapporteren dat het AI-systeem niet meer goed werkt?</p>
 <h2 id="vereisten">Vereisten</h2>
-<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/index.html">aia-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/index.html">Personeel en gebruikers zijn voldoende AI-geletterd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/index.html">aia-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/index.html">Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/index.html">aia-18</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/index.html">Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/index.html">aia-19</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/index.html">Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/index.html">aia-21</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/index.html">Menselijke controle van hoog-risico-AI-systemen wordt uitgevoerd door mensen met voldoende kennis en mogelijkheden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/index.html">aia-22</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/index.html">De werking van hoog-risico-AI-systemen wordt gemonitord</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/index.html">aia-36</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/index.html">Klokkenluiders kunnen veilig melden dat een organisatie zich niet houdt aan de AI-verordening</a></td></tr></tbody></table>
+<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/index.html">aia-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/index.html">Personeel en gebruikers zijn voldoende AI-geletterd.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/index.html">aia-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/index.html">Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/index.html">aia-18</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/index.html">Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/index.html">aia-19</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/index.html">Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/index.html">aia-21</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/index.html">Menselijke controle van hoog-risico-AI-systemen wordt uitgevoerd door mensen met voldoende kennis en mogelijkheden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/index.html">aia-22</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/index.html">De werking van hoog-risico-AI-systemen wordt gemonitord</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/index.html">aia-36</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/index.html">Klokkenluiders kunnen veilig melden dat een organisatie zich niet houdt aan de AI-verordening</a></td></tr></tbody></table>
 
 <h2 id="aanbevolen-maatregelen">Aanbevolen maatregelen</h2>
 <div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Maatregelen</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/index.html">org-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/index.html">Controleer en verbeter regelmatig de kwaliteit van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-03-onderbouwen-gebruik-algoritme/index.html">pba-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-03-onderbouwen-gebruik-algoritme/index.html">Beschrijf waarom een algoritme het probleem moet oplossen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-02-stopzetten-gebruik/index.html">owk-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-02-stopzetten-gebruik/index.html">Maak een noodplan voor het stoppen van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/index.html">imp-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/index.html">Stel een werkinstructie op voor gebruikers.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/index.html">imp-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/index.html">Richt de juiste menselijke controle in van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-werkinstructies-medewerkers/index.html">imp-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-werkinstructies-medewerkers/index.html">Spreek af hoe medewerkers omgaan met het algoritme.</a></td></tr></tbody></table>
diff --git a/pr-preview/pr-480/onderwerpen/technische-robuustheid-en-veiligheid/index.html b/pr-preview/pr-480/onderwerpen/technische-robuustheid-en-veiligheid/index.html
index 70802f394e..9fd12efacc 100644
--- a/pr-preview/pr-480/onderwerpen/technische-robuustheid-en-veiligheid/index.html
+++ b/pr-preview/pr-480/onderwerpen/technische-robuustheid-en-veiligheid/index.html
@@ -1616,7 +1616,7 @@ <h2 id="bescherm-algoritmes-tegen-aanvallen-en-bedreigingen">Bescherm algoritmes
 <h2 id="verklein-de-kans-op-schade">Verklein de kans op schade</h2>
 <p>Veroorzaak zo min mogelijk schade als het toch fout gaat. En maak een noodplan voor incidenten. Het doel van dit plan is ervoor zorgen dat de fout zo min mogelijk gevolgen heeft voor de organisatie en de maatschappij. In het plan staat bijvoorbeeld wie wat moet doen als het systeem uitvalt.</p>
 <h2 id="vereisten">Vereisten</h2>
-<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/index.html">aia-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/index.html">Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">aia-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/index.html">aia-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/index.html">Documentatie over hoog-risico-AI-systemen wordt 10 jaar bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/index.html">aia-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/index.html">Logs van hoog-risico-AI-systemen worden zes maanden bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/index.html">aia-18</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/index.html">Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/index.html">aia-19</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/index.html">Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/index.html">aia-23</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/index.html">Logs voor hoog-risico-AI-systemen worden bewaard door de gebruiksverantwoordelijke</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/index.html">aia-32</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/index.html">AI-modellen voor algemene doeleinden met systeemrisico’s zijn voldoende beveiligd tegen cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/index.html">aia-34</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/index.html">Hoog-risico-AI-systemen zijn voorzien van een monitoringsysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/index.html">avg-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/index.html">Data zoals persoonsgegevens zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/index.html">bio-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/index.html">Computersystemen zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr></tbody></table>
+<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/index.html">aia-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/index.html">Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">aia-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/index.html">aia-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/index.html">Documentatie over hoog-risico-AI-systemen wordt 10 jaar bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/index.html">aia-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/index.html">Logs van hoog-risico-AI-systemen worden zes maanden bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/index.html">aia-18</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/index.html">Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/index.html">aia-19</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/index.html">Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/index.html">aia-23</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/index.html">Logs voor hoog-risico-AI-systemen worden bewaard door de gebruiksverantwoordelijke</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/index.html">aia-32</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/index.html">AI-modellen voor algemene doeleinden met systeemrisico’s zijn voldoende beveiligd tegen cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/index.html">aia-34</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/index.html">Hoog-risico-AI-systemen zijn voorzien van een monitoringsysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/index.html">aia-39</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/index.html">Hoog-risico-AI-systemen zijn getest.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/index.html">avg-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/index.html">Data zoals persoonsgegevens zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/index.html">bio-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/index.html">Computersystemen zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr></tbody></table>
 
 <h2 id="aanbevolen-maatregelen">Aanbevolen maatregelen</h2>
 <div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Maatregelen</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-11-gebruikersbeheer/index.html">org-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-11-gebruikersbeheer/index.html">Maak afspraken over het beheer van gebruikers</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-13-wachtwoordbeheer/index.html">org-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-13-wachtwoordbeheer/index.html">Maak afspraken over het beheer van wachtwoorden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-14-wijzigingenproces/index.html">org-14</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-14-wijzigingenproces/index.html">Maak afspraken over het wijzigen van de code</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-04-gebruikte-techniek/index.html">owp-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-04-gebruikte-techniek/index.html">Beschrijf welke techniek gebruikt wordt voor de beoogde toepassing</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/index.html">owp-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/index.html">Maak een Project Startarchitectuur (PSA) voor de ontwikkeling of inkoop van algoritmes</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-24-risico-analyse-informatiebeveiliging-leverancier/index.html">owp-24</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-24-risico-analyse-informatiebeveiliging-leverancier/index.html">Voer een risico-analyse met de aanbieder uit op het gebied van informatiebeveiliging bij een uitbestedingstraject</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-04-bewaartermijnen-persoonsgegevens/index.html">dat-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-04-bewaartermijnen-persoonsgegevens/index.html">Geef data zoals persoonsgegevens een bewaartermijn met een vernietigingsprocedure</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/index.html">dat-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/index.html">Gebruik bij machine learning technieken gescheiden train-, test- en validatiedata en houdt rekening met underfitting en overfitting.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-01-security-by-design/index.html">owk-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-01-security-by-design/index.html">Ontwerp en ontwikkel het algoritme volgens de principes van ‘security by design’</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-04-logging/index.html">owk-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-04-logging/index.html">Maak logbestanden waarin staat wie wanneer toegang had tot de data en de code</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/index.html">ver-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/index.html">Controleer regelmatig of het algoritme werkt zoals het bedoeld is</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-02-aselecte-steekproeven/index.html">imp-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-02-aselecte-steekproeven/index.html">Doe aselecte steekproeven om algoritmes met 'risicogestuurde selectie’ te controleren</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-01-backups-maken/index.html">mon-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-01-backups-maken/index.html">Maak back-ups van algoritmes</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/index.html">mon-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/index.html">Beveilig de software</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/index.html">mon-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/index.html">Maak een noodplan voor beveiligingsincidenten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-04-evalueer-bij-veranderingen-in-data/index.html">mon-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-04-evalueer-bij-veranderingen-in-data/index.html">Monitor regelmatig op veranderingen in de data. Bij veranderingen evalueer je de prestaties en output van het algoritme.</a></td></tr></tbody></table>
diff --git a/pr-preview/pr-480/onderwerpen/transparantie/index.html b/pr-preview/pr-480/onderwerpen/transparantie/index.html
index d432487f64..1564357a56 100644
--- a/pr-preview/pr-480/onderwerpen/transparantie/index.html
+++ b/pr-preview/pr-480/onderwerpen/transparantie/index.html
@@ -1476,7 +1476,7 @@ <h2 id="betrokken-partijen">Betrokken partijen</h2>
 </tbody>
 </table>
 <h2 id="vereisten">Vereisten</h2>
-<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/index.html">aia-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/index.html">Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/index.html">aia-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/index.html">Hoog-risico-AI-systemen zijn voorzien van voldoende technische documentatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">aia-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/index.html">aia-16</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/index.html">Hoog-risico-AI-systemen zijn voorzien van een CE-markering</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/index.html">aia-17</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/index.html">Hoog-risico-AI-systemen zijn geregistreerd in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-24-informeren-werknemers/index.html">aia-24</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-24-informeren-werknemers/index.html">Werknemers weten dat hun organisatie een hoog-risico AI-systeem gebruikt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/index.html">aia-25</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/index.html">Gebruiksverantwoordelijken controleren de registratie van het hoog-risico AI-systeem in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">aia-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">Mensen over wie besluiten worden genomen door een hoog-risico-AI-systemen, krijgen op verzoek informatie over deze besluiten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/index.html">aia-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/index.html">AI-systemen worden zo ontworpen en gebruikt, dat mensen begrijpen wanneer zij met een AI-systeem communiceren en welke content gemaakt is door een AI-systeem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/index.html">aia-29</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/index.html">AI-modellen voor algemene doeleinden zijn voorzien van voldoende technische documentatie en informatie</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/index.html">aia-30</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/index.html">Aanbieders van AI-modellen voor algemene doeleinden met een systeemrisico treffen extra maatregelen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/index.html">aia-31</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/index.html">Als AI-modellen voor algemene doeleinden met systeemrisico’s ernstige incidenten veroorzaken, wordt dit gedocumenteerd en gerapporteerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html">arc-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html">Informatie over algoritmes wordt gedocumenteerd volgens de Archiefwet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/index.html">avg-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/index.html">Organisaties zijn transparant over het verwerken van persoonsgegevens</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/index.html">awb-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/index.html">Organisaties kunnen duidelijk uitleggen waarom en hoe algoritmes leiden tot een besluit</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/index.html">bzk-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/index.html">Impactvolle algoritmes en hoog-risico-AI-systemen staan in het Nederlandse Algoritmeregister</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/index.html">woo-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/index.html">Iedereen kan openbare informatie over algoritmes vinden of aanvragen</a></td></tr></tbody></table>
+<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/index.html">aia-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/index.html">Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/index.html">aia-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/index.html">Hoog-risico-AI-systemen zijn voorzien van voldoende technische documentatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">aia-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/index.html">aia-16</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/index.html">Hoog-risico-AI-systemen zijn voorzien van een CE-markering</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/index.html">aia-17</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/index.html">Hoog-risico-AI-systemen zijn geregistreerd in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-24-informeren-werknemers/index.html">aia-24</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-24-informeren-werknemers/index.html">Werknemers weten dat hun organisatie een hoog-risico AI-systeem gebruikt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/index.html">aia-25</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/index.html">Gebruiksverantwoordelijken controleren de registratie van het hoog-risico AI-systeem in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">aia-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">Mensen over wie besluiten worden genomen door een hoog-risico-AI-systemen, krijgen op verzoek informatie over deze besluiten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/index.html">aia-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/index.html">AI-systemen worden zo ontworpen en gebruikt, dat mensen begrijpen wanneer zij met een AI-systeem communiceren en welke content gemaakt is door een AI-systeem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/index.html">aia-29</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/index.html">AI-modellen voor algemene doeleinden zijn voorzien van voldoende technische documentatie en informatie</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/index.html">aia-30</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/index.html">Aanbieders van AI-modellen voor algemene doeleinden met een systeemrisico treffen extra maatregelen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/index.html">aia-31</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/index.html">Als AI-modellen voor algemene doeleinden met systeemrisico’s ernstige incidenten veroorzaken, wordt dit gedocumenteerd en gerapporteerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html">arc-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html">Informatie over algoritmes wordt gedocumenteerd volgens de Archiefwet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/index.html">avg-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/index.html">Organisaties zijn transparant over het verwerken van persoonsgegevens</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/index.html">awb-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/index.html">Organisaties kunnen duidelijk uitleggen waarom en hoe algoritmes leiden tot een besluit</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/index.html">bzk-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/index.html">Impactvolle algoritmes en hoog-risico-AI-systemen staan in het Nederlandse Algoritmeregister</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/index.html">woo-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/index.html">Iedereen kan openbare informatie over algoritmes vinden of aanvragen</a></td></tr></tbody></table>
 
 <h2 id="aanbevolen-maatregelen">Aanbevolen maatregelen</h2>
 <div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Maatregelen</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-02-beleid_opstellen_inzet_algoritmes/index.html">org-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-02-beleid_opstellen_inzet_algoritmes/index.html">Stel beleid op voor een verantwoorde inzet van algoritmes binnen de organisatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-04-politiek-bestuurlijke-verantwoordelijkheid/index.html">org-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-04-politiek-bestuurlijke-verantwoordelijkheid/index.html">Zorg voor politiek-bestuurlijk bewustzijn, betrokkenheid, en verantwoordelijkheid.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-01-formuleren-probleemdefinitie/index.html">pba-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-01-formuleren-probleemdefinitie/index.html">Beschrijf het probleem dat het algoritme moet oplossen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-02-formuleren-doelstelling/index.html">pba-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-02-formuleren-doelstelling/index.html">Beschrijf het doel van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-05-wettelijke-grondslag/index.html">pba-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-05-wettelijke-grondslag/index.html">Beschrijf de wettelijke grondslag voor de inzet van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-08-archiveren-documenten/index.html">owp-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-08-archiveren-documenten/index.html">Bepaal welke documenten voor hoe lang gearchiveerd moeten worden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/index.html">owp-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/index.html">Maak vereisten voor algoritmes onderdeel van algemene inkoopvoorwaarden en de contractovereenkomst.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-20-vaststellen-aanleveren-informatie-technische-documentatie/index.html">owp-20</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-20-vaststellen-aanleveren-informatie-technische-documentatie/index.html">Vul technische documentatie van aanbieder aan met relevante informatie vanuit de gebruiksverantwoordelijke.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-22-invloed-besluitvorming-algoritmes-aanbieders/index.html">owp-22</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-22-invloed-besluitvorming-algoritmes-aanbieders/index.html">Bepaal in een aanbesteding of algoritmes van een aanbieder bepalende invloed hebben in een besluit richting personen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-29-informeer_betrokkenen/index.html">pba-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-29-informeer_betrokkenen/index.html">Stel vast welke betrokkenen geïnformeerd moeten worden en welke informatie zij nodig hebben.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/index.html">owp-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/index.html">Pas uitlegbaarheidstechnieken toe en evalueer en valideer deze.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-genereren-bronvermelding/index.html">imp-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-genereren-bronvermelding/index.html">Maak gebruik van een algoritme dat bronvermelding kan genereren bij de output.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-toepassen_vastgestelde-beleidskaders/index.html">org-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-toepassen_vastgestelde-beleidskaders/index.html">Pas vastgestelde beleidskaders toe</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-03-vertaling-wetgeving-naar-systeem/index.html">ver-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-03-vertaling-wetgeving-naar-systeem/index.html">Controleer regelmatig of het algoritme voldoet aan alle wetten en regels en het eigen beleid</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/index.html">imp-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/index.html">Stel een werkinstructie op voor gebruikers.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-04-publiceren-algoritmeregister/index.html">imp-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-04-publiceren-algoritmeregister/index.html">Publiceer impactvolle algoritmes en hoog-risico-AI-systemen in het Algoritmeregister</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-06-vermelding-in-privacyverklaring/index.html">imp-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-06-vermelding-in-privacyverklaring/index.html">Vermeld het gebruik van persoonsgegevens in een privacyverklaring</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-08-vermelding-in-verwerkingsregister/index.html">imp-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-08-vermelding-in-verwerkingsregister/index.html">Vermeld het gebruik van persoonsgegevens in het verwerkingsregister</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-09-politiek-bestuurlijk-besluit/index.html">imp-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-09-politiek-bestuurlijk-besluit/index.html">Maak een openbaar besluit over de inzet van het algoritme</a></td></tr></tbody></table>
diff --git a/pr-preview/pr-480/overhetalgoritmekader/definities/index.html b/pr-preview/pr-480/overhetalgoritmekader/definities/index.html
index ca84e3b28c..67e94c5ccc 100644
--- a/pr-preview/pr-480/overhetalgoritmekader/definities/index.html
+++ b/pr-preview/pr-480/overhetalgoritmekader/definities/index.html
@@ -96,6 +96,11 @@
     <label class="md-overlay" for="__drawer"></label>
     <div data-md-component="skip">
       
+        
+        <a href="#woordenlijst" class="md-skip">
+          Ga naar inhoud
+        </a>
+      
     </div>
     <div data-md-component="announce">
       
@@ -513,6 +518,8 @@
       <input class="md-nav__toggle md-toggle" type="checkbox" id="__toc">
       
       
+        
+      
       
       <a href="./" class="md-nav__link md-nav__link--active">
         
@@ -811,6 +818,8 @@
   
   
   
+    
+  
   
 </nav>
                   </div>
@@ -836,8 +845,7 @@
   
 
 
-  <h1>Woordenlijst</h1>
-
+<h1 id="woordenlijst">Woordenlijst</h1>
 <!-- let op! Deze definities staan nu dubbel (hieronder, en in de file includes/begrippenlijst.md) -->
 <!-- de definities in de file includes/begrippenlijst.md zorgen ervoor dat definities automatisch op pagina's worden weergegeven -->
 <!-- dit biedt een overzicht. tzt nog iets verzinnen zodat definities niet op twee plekken moeten worden toegevoegd -->
@@ -1214,7 +1222,7 @@ <h1>Woordenlijst</h1>
     <span class="md-icon" title="Laatst geüpdatet">
       <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
     </span>
-    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">16 december 2024</span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
   </span>
 
     
diff --git a/pr-preview/pr-480/overhetalgoritmekader/index.html b/pr-preview/pr-480/overhetalgoritmekader/index.html
index 35e3d6a9b0..ad35abc56f 100644
--- a/pr-preview/pr-480/overhetalgoritmekader/index.html
+++ b/pr-preview/pr-480/overhetalgoritmekader/index.html
@@ -25,7 +25,7 @@
     
     
       
-        <title>Soorten algoritmes - Algoritmekader (bèta)</title>
+        <title>Basiskennis algoritmes en AI - Algoritmekader (bèta)</title>
       
     
     
@@ -125,7 +125,7 @@
         <div class="md-header__topic" data-md-component="header-topic">
           <span class="md-ellipsis">
             
-              Soorten algoritmes
+              Basiskennis algoritmes en AI
             
           </span>
         </div>
@@ -834,24 +834,24 @@
   
 
 
-  <h1>Soorten algoritmes</h1>
+  <h1>Basiskennis algoritmes en AI</h1>
 
 <div class="grid cards" style="margin-top:32px;">
 <ul>
 <li>
-<p><a href="vereisten/"><strong>Basiskennis algoritmes en AI</strong></a></p>
+<p><a href="soorten-algoritmes/"><strong>Soorten algoritmes</strong></a></p>
 <hr />
-<p>Overzicht van de belangrijkste vereisten voor overheden die algoritmes of AI-systemen ontwikkelen of gebruiken.</p>
+<p>Het soort algoritme bepaalt aan welke vereisten je moet voldoen. Werk je met simpele rekenregels of een AI-systeem?</p>
 </li>
 <li>
-<p><a href="soorten-algoritmes/"><strong>Soorten algoritmes</strong></a></p>
+<p><a href="risico-van-ai-systemen.md"><strong>Risico van AI-systemen</strong></a></p>
 <hr />
-<p>Om te voldoen aan de vereisten, moet je weten met welk soort algoritme je werkt. Gaat het om simpele rekenregels of een AI-systeem?</p>
+<p>Je AI-systemen valt mogelijk onder een risicogroep uit de AI-verordening.</p>
 </li>
 <li>
-<p><a href="hulpmiddelen/"><strong>Risico en impact van algoritmes</strong></a></p>
+<p><a href="impact-van-algoritmes.md"><strong>Impact van algoritmes</strong></a></p>
 <hr />
-<p>AI-systemen vallen mogelijk onder een risicogroep uit de AI-verordening. En wat voor impact hebben je algoritmes?</p>
+<p>Impactvolle algoritmes moet je registreren in het Algoritmeregister.</p>
 </li>
 <li>
 <p><a href="defenities.md"><strong>Woordenlijst</strong></a></p>
@@ -882,7 +882,7 @@ <h1>Soorten algoritmes</h1>
     <span class="md-icon" title="Laatst geüpdatet">
       <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
     </span>
-    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">11 december 2024</span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
   </span>
 
     
diff --git a/pr-preview/pr-480/rollen/beleid-en-advies/index.html b/pr-preview/pr-480/rollen/beleid-en-advies/index.html
index ed868495d6..b3b74d6e1d 100644
--- a/pr-preview/pr-480/rollen/beleid-en-advies/index.html
+++ b/pr-preview/pr-480/rollen/beleid-en-advies/index.html
@@ -97,7 +97,7 @@
     <div data-md-component="skip">
       
         
-        <a href="#vereisten" class="md-skip">
+        <a href="#beleid-en-advies" class="md-skip">
           Ga naar inhoud
         </a>
       
@@ -715,6 +715,8 @@
       <input class="md-nav__toggle md-toggle" type="checkbox" id="__toc">
       
       
+        
+      
       
         <label class="md-nav__link md-nav__link--active" for="__toc">
           
@@ -755,6 +757,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -974,6 +978,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -1081,11 +1087,10 @@
   
 
 
-  <h1>Beleid en advies</h1>
-
+<h1 id="beleid-en-advies">Beleid en advies</h1>
 <p>Dit is degene die gaat over wat wenselijk is en adviseert bij de ontwikkeling en/of inzet van een algoritme. Hierbij horen rollen zoals de beleidsmedewerker, ethicus, CIO-adviseur, architect.</p>
 <h2 id="vereisten">Vereisten</h2>
-<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">aia-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">aia-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">aia-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/index.html">aia-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/index.html">Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/index.html">aia-29</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/index.html">Hoog-risico-AI-systemen voor publieke taken worden beoordeeld op gevolgen voor grondrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/index.html">avg-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/index.html">Persoonsgegevens worden zo kort mogelijk bewaard</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/index.html">avg-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/index.html">Gevoelige persoonsgegevens worden alleen gebruikt als hiervoor een wettelijke uitzondering geldt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/index.html">avg-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/index.html">Besluiten die levens kunnen beïnvloeden, zijn niet volledig geautomatiseerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/index.html">avg-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/index.html">Ontwerp en standaardinstellingen (defaults) zijn zo gunstig mogelijk voor de privacy van betrokkenen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/index.html">awb-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/index.html">Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/index.html">bio-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/index.html">Computersystemen zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr></tbody></table>
+<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">aia-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">aia-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">aia-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/index.html">aia-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/index.html">Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/index.html">aia-29</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/index.html">Hoog-risico-AI-systemen voor publieke taken worden beoordeeld op gevolgen voor grondrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/index.html">avg-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/index.html">Persoonsgegevens worden zo kort mogelijk bewaard</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/index.html">avg-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/index.html">Gevoelige persoonsgegevens worden alleen gebruikt als hiervoor een wettelijke uitzondering geldt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/index.html">avg-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/index.html">Besluiten die levens kunnen beïnvloeden, zijn niet volledig geautomatiseerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/index.html">avg-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/index.html">Ontwerp en standaardinstellingen (defaults) zijn zo gunstig mogelijk voor de privacy van betrokkenen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/index.html">awb-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/index.html">Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/index.html">bio-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/index.html">Computersystemen zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr></tbody></table>
 
 <h2 id="maatregelen">Maatregelen</h2>
 <div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Maatregelen</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-01-benodigde-expertise-en-capaciteit/index.html">org-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-01-benodigde-expertise-en-capaciteit/index.html">Bepaal of er genoeg experts beschikbaar zijn</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-02-beleid_opstellen_inzet_algoritmes/index.html">org-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-02-beleid_opstellen_inzet_algoritmes/index.html">Stel beleid op voor een verantwoorde inzet van algoritmes binnen de organisatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-03-toepassen_risicobeheer/index.html">org-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-03-toepassen_risicobeheer/index.html">Maak een plan voor het omgaan met risico’s</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-04-politiek-bestuurlijke-verantwoordelijkheid/index.html">org-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-04-politiek-bestuurlijke-verantwoordelijkheid/index.html">Zorg voor politiek-bestuurlijk bewustzijn, betrokkenheid, en verantwoordelijkheid.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-05-bestaande-governance/index.html">org-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-05-bestaande-governance/index.html">Sluit algoritmegovernance aan op bestaande governancestructuren binnen de organisatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/index.html">org-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/index.html">Gebruik een algoritme volwassenheidsmodel om te weten waar de organisatie staat</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-07-intern-toezicht/index.html">org-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-07-intern-toezicht/index.html">Richt een algoritmegovernance in met three lines of defence</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-08-beslismoment-levenscyclus/index.html">org-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-08-beslismoment-levenscyclus/index.html">Maak gebruik van beslismomenten  in de algoritmelevenscyclus</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-09-governance-per-risicocategorie/index.html">org-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-09-governance-per-risicocategorie/index.html">Richt algoritmegovernance op basis van de risicoclassificatie van algoritmes.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-10-inrichten-taken-en-verantwoordelijkheden-algoritmegovernance/index.html">org-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-10-inrichten-taken-en-verantwoordelijkheden-algoritmegovernance/index.html">Taken en verantwoordelijkheden zijn toebedeeld in de algoritmegovernance</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-11-gebruikersbeheer/index.html">org-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-11-gebruikersbeheer/index.html">Maak afspraken over het beheer van gebruikers</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/index.html">org-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/index.html">Controleer en verbeter regelmatig de kwaliteit van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/index.html">imp-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/index.html">Stel een protocol vast voor de situatie dat er (een vermoeden van) discriminatie door een algoritme is geconstateerd en pas dit wanneer nodig toe.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-02-data-beschikbaarheid/index.html">owp-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-02-data-beschikbaarheid/index.html">Voer voorafgaand aan een project een data beschikbaarheid, kwaliteit- en toegankelijkheidsanalayse uit.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-05-soort-algoritme/index.html">owp-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-05-soort-algoritme/index.html">Bepaal het soort algoritme en de risicogroep en vereisten die hierbij horen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/index.html">owp-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/index.html">Inventariseer welke grondrechten het algoritme kan schenden en maak een belangenafweging</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-07-kwetsbare-groepen/index.html">owp-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-07-kwetsbare-groepen/index.html">Maak een lijst van de meest kwetsbare groepen en bescherm hen extra</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-model-verwerkersovereenkomst-onderdeel-aanbesteding/index.html">owp-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-model-verwerkersovereenkomst-onderdeel-aanbesteding/index.html">Een model-verwerkersovereenkomst is onderdeel van de aanbesteding als persoonsgegevens worden verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-multidisciplinair-inkoopteam/index.html">owp-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-multidisciplinair-inkoopteam/index.html">Stel een multidisciplinair team samen bij het ontwikkelen of inkopen van algoritmes.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/index.html">owp-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/index.html">Maak een Project Startarchitectuur (PSA) voor de ontwikkeling of inkoop van algoritmes</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/index.html">owp-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/index.html">Koop duurzaam algoritmes in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-gebruikte-data/index.html">owp-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-gebruikte-data/index.html">Beschrijf welke data gebruikt wordt voor de beoogde toepassing</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/index.html">owp-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/index.html">Maak vereisten voor algoritmes onderdeel van algemene inkoopvoorwaarden en de contractovereenkomst.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-14-verwerkersovereenkomst-onderdeel-aanbesteding/index.html">owp-14</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-14-verwerkersovereenkomst-onderdeel-aanbesteding/index.html">Maak het opstellen van een verwerkersovereenkomst onderdeel van de aanbesteding als persoonsgegevens worden verwerkt.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-15-leveren-bewijs_voldoen-aan-vereisten-algoritme-aanbieder/index.html">owp-15</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-15-leveren-bewijs_voldoen-aan-vereisten-algoritme-aanbieder/index.html">Maak het leveren van bewijs voor het voldoen aan de vereisten voor algoritmes onderdeel van de beoordeling van een inschrijving.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/index.html">owp-16</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/index.html">Laat aanbieder(s) bewijs leveren dat de door hen ontwikkelde algoritmes geen inbreuk maken op de auteursrechten van derden met de trainingsdata en de output.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-17-beoordeel-aansprakelijkheidsvoorwaarden-van-aanbieder/index.html">owp-17</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-17-beoordeel-aansprakelijkheidsvoorwaarden-van-aanbieder/index.html">Aansprakelijkheidsvoorwaarden van een aanbieder worden beoordeeld in de aanbesteding</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-20-vaststellen-aanleveren-informatie-technische-documentatie/index.html">owp-20</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-20-vaststellen-aanleveren-informatie-technische-documentatie/index.html">Vul technische documentatie van aanbieder aan met relevante informatie vanuit de gebruiksverantwoordelijke.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/index.html">owp-21</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/index.html">Neem het kunnen uitvoeren van een audit over de vereiste op in contractvoorwaarden en de contractovereenkomst</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-22-invloed-besluitvorming-algoritmes-aanbieders/index.html">owp-22</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-22-invloed-besluitvorming-algoritmes-aanbieders/index.html">Bepaal in een aanbesteding of algoritmes van een aanbieder bepalende invloed hebben in een besluit richting personen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/index.html">owp-23</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/index.html">Laat de aanbieder aangeven welke mate van opleiding en ondersteuning bij de implementatie nodig is om de beoogde algoritmes verantwoord te gebruiken.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-24-risico-analyse-informatiebeveiliging-leverancier/index.html">owp-24</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-24-risico-analyse-informatiebeveiliging-leverancier/index.html">Voer een risico-analyse met de aanbieder uit op het gebied van informatiebeveiliging bij een uitbestedingstraject</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/index.html">owp-25</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/index.html">Maak vereisten onderdeel van het programma van eisen bij een aanbesteding</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/index.html">owp-26</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/index.html">Maak vereisten voor algoritmes onderdeel van de Service Level Agreement</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-28-pas-vastgestelde-beleidskaders-zijn-nageleefd/index.html">owp-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-28-pas-vastgestelde-beleidskaders-zijn-nageleefd/index.html">Pas vastgestelde interne beleidskaders toe en maak aantoonbaar dat deze zijn nageleefd bij het ontwikkelen, inkopen en gebruiken van algoritmes.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-29-informeer_betrokkenen/index.html">pba-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-29-informeer_betrokkenen/index.html">Stel vast welke betrokkenen geïnformeerd moeten worden en welke informatie zij nodig hebben.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/index.html">owp-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/index.html">Pas uitlegbaarheidstechnieken toe en evalueer en valideer deze.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-genereren-bronvermelding/index.html">imp-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-genereren-bronvermelding/index.html">Maak gebruik van een algoritme dat bronvermelding kan genereren bij de output.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-toepassen_vastgestelde-beleidskaders/index.html">org-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-toepassen_vastgestelde-beleidskaders/index.html">Pas vastgestelde beleidskaders toe</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/index.html">dat-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/index.html">Gebruik duurzame datacenters</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/index.html">ver-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/index.html">Toets het algoritme op bias</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/index.html">imp-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/index.html">Richt de juiste menselijke controle in van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-04-publiceren-algoritmeregister/index.html">imp-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-04-publiceren-algoritmeregister/index.html">Publiceer impactvolle algoritmes en hoog-risico-AI-systemen in het Algoritmeregister</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-proces-privacyrechten/index.html">imp-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-proces-privacyrechten/index.html">Spreek af hoe de organisatie omgaat met privacy-verzoeken</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-werkinstructies-medewerkers/index.html">imp-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-werkinstructies-medewerkers/index.html">Spreek af hoe medewerkers omgaan met het algoritme.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-01-backups-maken/index.html">mon-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-01-backups-maken/index.html">Maak back-ups van algoritmes</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/index.html">mon-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/index.html">Beveilig de software</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/index.html">mon-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/index.html">Maak een noodplan voor beveiligingsincidenten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/index.html">mon-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/index.html">Meten, monitoren en rapporteren van milieu-impact van algoritmes</a></td></tr></tbody></table>
@@ -1111,7 +1116,7 @@ <h2 id="maatregelen">Maatregelen</h2>
     <span class="md-icon" title="Laatst geüpdatet">
       <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
     </span>
-    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">12 december 2024</span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
   </span>
 
     
diff --git a/pr-preview/pr-480/rollen/index.html b/pr-preview/pr-480/rollen/index.html
index 8dc2f0eef5..c52a329c51 100644
--- a/pr-preview/pr-480/rollen/index.html
+++ b/pr-preview/pr-480/rollen/index.html
@@ -1036,7 +1036,7 @@ <h1 id="rollen">Rollen</h1>
     <span class="md-icon" title="Laatst geüpdatet">
       <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
     </span>
-    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">11 december 2024</span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
   </span>
 
     
diff --git a/pr-preview/pr-480/rollen/jurist/index.html b/pr-preview/pr-480/rollen/jurist/index.html
index 74d99a920f..a92e191591 100644
--- a/pr-preview/pr-480/rollen/jurist/index.html
+++ b/pr-preview/pr-480/rollen/jurist/index.html
@@ -97,7 +97,7 @@
     <div data-md-component="skip">
       
         
-        <a href="#vereisten" class="md-skip">
+        <a href="#jurist" class="md-skip">
           Ga naar inhoud
         </a>
       
@@ -742,6 +742,8 @@
       <input class="md-nav__toggle md-toggle" type="checkbox" id="__toc">
       
       
+        
+      
       
         <label class="md-nav__link md-nav__link--active" for="__toc">
           
@@ -782,6 +784,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -974,6 +978,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -1081,8 +1087,8 @@
   
 
 
-  <h1>Jurist</h1>
-
+<h1 id="jurist">Jurist</h1>
+<p>(Hier komt nog tekst).</p>
 <h2 id="vereisten">Vereisten</h2>
 <div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/index.html">aia-14</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/index.html">Hoog-risico-AI-systemen worden pas geleverd of gebruikt na een conformiteitsbeoordelingsprocedure</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/index.html">aia-15</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/index.html">Hoog-risico-AI-systemen zijn voorzien van een EU-conformiteitsverklaring</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/index.html">aia-33</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/index.html">AI-testomgevingen die persoonsgegevens verwerken, voldoen aan strenge voorwaarden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/index.html">aut-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/index.html">Auteursrechten zijn beschermd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/index.html">avg-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/index.html">Persoonsgegevens worden op een rechtmatige manier verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/index.html">avg-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/index.html">Persoonsgegevens worden zo min mogelijk verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/index.html">avg-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/index.html">Persoonsgegevens en andere data verwerken gebeurt proportioneel en subsidiair</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/index.html">avg-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/index.html">Organisaties kunnen bewijzen dat zij persoonsgegevens op de juiste manier verwerken</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/index.html">avg-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/index.html">Gevoelige persoonsgegevens worden alleen gebruikt als hiervoor een wettelijke uitzondering geldt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/index.html">avg-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/index.html">Ontwerp en standaardinstellingen (defaults) zijn zo gunstig mogelijk voor de privacy van betrokkenen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/index.html">avg-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/index.html">Data zoals persoonsgegevens zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/index.html">avg-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/index.html">Een Data Protection Impact Assessment (DPIA) wordt uitgevoerd wanneer de verwerking van persoonsgegevens waarschijnlijk een hoog risico met zich meebrengt voor de rechten en vrijheden van natuurlijke personen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/index.html">dat-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/index.html">Databanken worden alleen gebruikt met toestemming van de databank-producent</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/index.html">grw-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/index.html">Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/index.html">woo-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/index.html">Iedereen kan openbare informatie over algoritmes vinden of aanvragen</a></td></tr></tbody></table>
 
@@ -1110,7 +1116,7 @@ <h2 id="maatregelen">Maatregelen</h2>
     <span class="md-icon" title="Laatst geüpdatet">
       <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
     </span>
-    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">12 december 2024</span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
   </span>
 
     
diff --git a/pr-preview/pr-480/rollen/ontwikkelaar/index.html b/pr-preview/pr-480/rollen/ontwikkelaar/index.html
index ce28c26f50..709f89e32c 100644
--- a/pr-preview/pr-480/rollen/ontwikkelaar/index.html
+++ b/pr-preview/pr-480/rollen/ontwikkelaar/index.html
@@ -97,7 +97,7 @@
     <div data-md-component="skip">
       
         
-        <a href="#algemeen" class="md-skip">
+        <a href="#ontwikkelaar" class="md-skip">
           Ga naar inhoud
         </a>
       
@@ -769,6 +769,8 @@
       <input class="md-nav__toggle md-toggle" type="checkbox" id="__toc">
       
       
+        
+      
       
         <label class="md-nav__link md-nav__link--active" for="__toc">
           
@@ -809,6 +811,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -816,17 +820,6 @@
     </label>
     <ul class="md-nav__list" data-md-component="toc" data-md-scrollfix>
       
-        <li class="md-nav__item">
-  <a href="#algemeen" class="md-nav__link">
-    <span class="md-ellipsis">
-      
-        Algemeen
-      
-    </span>
-  </a>
-  
-</li>
-      
         <li class="md-nav__item">
   <a href="#relevantie" class="md-nav__link">
     <span class="md-ellipsis">
@@ -1007,6 +1000,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -1014,17 +1009,6 @@
     </label>
     <ul class="md-nav__list" data-md-component="toc" data-md-scrollfix>
       
-        <li class="md-nav__item">
-  <a href="#algemeen" class="md-nav__link">
-    <span class="md-ellipsis">
-      
-        Algemeen
-      
-    </span>
-  </a>
-  
-</li>
-      
         <li class="md-nav__item">
   <a href="#relevantie" class="md-nav__link">
     <span class="md-ellipsis">
@@ -1147,9 +1131,7 @@
   
 
 
-  <h1>Ontwikkelaar</h1>
-
-<h2 id="algemeen">Algemeen</h2>
+<h1 id="ontwikkelaar">Ontwikkelaar</h1>
 <p>De Ontwikkelaar omvat alle technische expertise. Dit zijn professionals die zich bezighouden met het analyseren, ontwikkelen, en implementeren van algoritmes en modellen. Dit zijn de specialisten die zorgen voor de technische kant van de algoritmeontwikkeling, inclusief programmeren, opschonen van data, data-analyse en het ontwerpen van informatieprocessen.</p>
 <h2 id="relevantie">Relevantie</h2>
 <p>Mensen met technische expertise spelen een cruciale rol bij het verantwoord ontwerpen en ontwikkelen van algoritmes. Zij zorgen ervoor dat algoritmes voldoen aan technische en ethische standaarden, en passen methodes toe om de duurzaamheid, eerlijkheid en transparantie van modellen te waarborgen. Technische experts zijn vaak ook verantwoordelijk voor het testen en optimaliseren van de algoritmes, en voor het implementeren van maatregelen om privacy en gegevensbescherming te waarborgen. In het Algoritmekader zijn er tal van vereisten, maatregelen en hulpmiddelen die specifiek relevant zijn voor technische experts.</p>
@@ -1163,7 +1145,7 @@ <h2 id="bijbehorende-functies">Bijbehorende functies</h2>
 <li>Softwareontwikkelaar</li>
 </ul>
 <h2 id="vereisten">Vereisten</h2>
-<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/index.html">aia-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/index.html">Datasets voor hoog-risico-AI-systemen voldoen aan kwaliteitscriteria</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/index.html">aia-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/index.html">Hoog-risico-AI-systemen zijn voorzien van voldoende technische documentatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/index.html">aia-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/index.html">Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">aia-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">aia-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/index.html">aia-19</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/index.html">Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/index.html">aia-20</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/index.html">Hoog-risico-AI-systemen worden gebruikt volgens de gebruiksaanwijzing</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/index.html">aia-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/index.html">AI-systemen worden zo ontworpen en gebruikt, dat mensen begrijpen wanneer zij met een AI-systeem communiceren en welke content gemaakt is door een AI-systeem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/index.html">aia-30</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/index.html">Aanbieders van AI-modellen voor algemene doeleinden met een systeemrisico treffen extra maatregelen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/index.html">aia-32</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/index.html">AI-modellen voor algemene doeleinden met systeemrisico’s zijn voldoende beveiligd tegen cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/index.html">aia-33</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/index.html">AI-testomgevingen die persoonsgegevens verwerken, voldoen aan strenge voorwaarden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html">arc-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html">Informatie over algoritmes wordt gedocumenteerd volgens de Archiefwet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/index.html">avg-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/index.html">Persoonsgegevens worden zo kort mogelijk bewaard</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/index.html">avg-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/index.html">Persoonsgegevens worden zo min mogelijk verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/index.html">avg-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/index.html">Persoonsgegevens en andere data verwerken gebeurt proportioneel en subsidiair</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/index.html">avg-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/index.html">Persoonsgegevens zijn juist en actueel</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/index.html">avg-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/index.html">Organisaties zijn transparant over het verwerken van persoonsgegevens</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/index.html">avg-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/index.html">Betrokkenen kunnen een beroep doen op hun privacyrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/index.html">avg-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/index.html">Ontwerp en standaardinstellingen (defaults) zijn zo gunstig mogelijk voor de privacy van betrokkenen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/index.html">avg-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/index.html">Data zoals persoonsgegevens zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/index.html">awb-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/index.html">Organisaties kunnen duidelijk uitleggen waarom en hoe algoritmes leiden tot een besluit</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/index.html">bio-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/index.html">Computersystemen zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr></tbody></table>
+<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/index.html">aia-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/index.html">Datasets voor hoog-risico-AI-systemen voldoen aan kwaliteitscriteria</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/index.html">aia-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/index.html">Hoog-risico-AI-systemen zijn voorzien van voldoende technische documentatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/index.html">aia-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/index.html">Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">aia-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">aia-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/index.html">aia-19</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/index.html">Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/index.html">aia-20</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/index.html">Hoog-risico-AI-systemen worden gebruikt volgens de gebruiksaanwijzing</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/index.html">aia-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/index.html">AI-systemen worden zo ontworpen en gebruikt, dat mensen begrijpen wanneer zij met een AI-systeem communiceren en welke content gemaakt is door een AI-systeem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/index.html">aia-30</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/index.html">Aanbieders van AI-modellen voor algemene doeleinden met een systeemrisico treffen extra maatregelen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/index.html">aia-32</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/index.html">AI-modellen voor algemene doeleinden met systeemrisico’s zijn voldoende beveiligd tegen cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/index.html">aia-33</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/index.html">AI-testomgevingen die persoonsgegevens verwerken, voldoen aan strenge voorwaarden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/index.html">aia-39</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/index.html">Hoog-risico-AI-systemen zijn getest.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html">arc-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html">Informatie over algoritmes wordt gedocumenteerd volgens de Archiefwet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/index.html">avg-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/index.html">Persoonsgegevens worden zo kort mogelijk bewaard</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/index.html">avg-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/index.html">Persoonsgegevens worden zo min mogelijk verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/index.html">avg-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/index.html">Persoonsgegevens en andere data verwerken gebeurt proportioneel en subsidiair</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/index.html">avg-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/index.html">Persoonsgegevens zijn juist en actueel</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/index.html">avg-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/index.html">Organisaties zijn transparant over het verwerken van persoonsgegevens</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/index.html">avg-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/index.html">Betrokkenen kunnen een beroep doen op hun privacyrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/index.html">avg-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/index.html">Ontwerp en standaardinstellingen (defaults) zijn zo gunstig mogelijk voor de privacy van betrokkenen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/index.html">avg-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/index.html">Data zoals persoonsgegevens zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/index.html">awb-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/index.html">Organisaties kunnen duidelijk uitleggen waarom en hoe algoritmes leiden tot een besluit</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/index.html">bio-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/index.html">Computersystemen zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr></tbody></table>
 
 <h2 id="maatregelen">Maatregelen</h2>
 <div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Maatregelen</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-13-wachtwoordbeheer/index.html">org-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-13-wachtwoordbeheer/index.html">Maak afspraken over het beheer van wachtwoorden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-14-wijzigingenproces/index.html">org-14</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-14-wijzigingenproces/index.html">Maak afspraken over het wijzigen van de code</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-04-gebruikte-techniek/index.html">owp-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-04-gebruikte-techniek/index.html">Beschrijf welke techniek gebruikt wordt voor de beoogde toepassing</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-08-archiveren-documenten/index.html">owp-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-08-archiveren-documenten/index.html">Bepaal welke documenten voor hoe lang gearchiveerd moeten worden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-gebruikte-data/index.html">owp-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-gebruikte-data/index.html">Beschrijf welke data gebruikt wordt voor de beoogde toepassing</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/index.html">owp-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/index.html">Ontwerp algoritmes zo eenvoudig mogelijk</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-18-maak-vereisten-onderdeel-van-subgunningscriteria/index.html">owp-18</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-18-maak-vereisten-onderdeel-van-subgunningscriteria/index.html">Maak vereisten onderdeel van (sub)gunningscriteria bij een aanbesteding.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-20-vaststellen-aanleveren-informatie-technische-documentatie/index.html">owp-20</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-20-vaststellen-aanleveren-informatie-technische-documentatie/index.html">Vul technische documentatie van aanbieder aan met relevante informatie vanuit de gebruiksverantwoordelijke.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-22-invloed-besluitvorming-algoritmes-aanbieders/index.html">owp-22</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-22-invloed-besluitvorming-algoritmes-aanbieders/index.html">Bepaal in een aanbesteding of algoritmes van een aanbieder bepalende invloed hebben in een besluit richting personen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/index.html">owp-23</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/index.html">Laat de aanbieder aangeven welke mate van opleiding en ondersteuning bij de implementatie nodig is om de beoogde algoritmes verantwoord te gebruiken.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/index.html">owp-25</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/index.html">Maak vereisten onderdeel van het programma van eisen bij een aanbesteding</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/index.html">owp-26</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/index.html">Maak vereisten voor algoritmes onderdeel van de Service Level Agreement</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/index.html">owp-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/index.html">Pas uitlegbaarheidstechnieken toe en evalueer en valideer deze.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-01-datakwaliteit/index.html">dat-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-01-datakwaliteit/index.html">Controleer de datakwaliteit</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-02-fair-data/index.html">dat-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-02-fair-data/index.html">Maak waardevolle data vindbaar, toegankelijk, interoperabel en herbruikbaar (FAIR) binnen en buiten de eigen organisatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-05-pseudonimiseren-anonimiseren/index.html">dat-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-05-pseudonimiseren-anonimiseren/index.html">Bescherm persoonsgegevens door data te anonimiseren, pseudonimiseren of te aggregeren</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/index.html">dat-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/index.html">Gebruik duurzame datacenters</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/index.html">dat-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/index.html">Gebruik bij machine learning technieken gescheiden train-, test- en validatiedata en houdt rekening met underfitting en overfitting.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-09-dataminimalisatie/index.html">dat-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-09-dataminimalisatie/index.html">Beperk de omvang van datasets voor energie-efficiëntie</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-01-security-by-design/index.html">owk-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-01-security-by-design/index.html">Ontwerp en ontwikkel het algoritme volgens de principes van ‘security by design’</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-02-stopzetten-gebruik/index.html">owk-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-02-stopzetten-gebruik/index.html">Maak een noodplan voor het stoppen van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-04-logging/index.html">owk-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-04-logging/index.html">Maak logbestanden waarin staat wie wanneer toegang had tot de data en de code</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-05-energiezuinige-programmeermethoden/index.html">owk-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-05-energiezuinige-programmeermethoden/index.html">Kies energiezuinige programmeermethoden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-06-optimaliseer-AI-training/index.html">owk-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-06-optimaliseer-AI-training/index.html">Optimaliseer AI-trainingsprocessen voor energie-efficiëntie</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/index.html">ver-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/index.html">Controleer regelmatig of het algoritme werkt zoals het bedoeld is</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/index.html">ver-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/index.html">Toets het algoritme op bias</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/index.html">imp-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/index.html">Stel een werkinstructie op voor gebruikers.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-02-aselecte-steekproeven/index.html">imp-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-02-aselecte-steekproeven/index.html">Doe aselecte steekproeven om algoritmes met 'risicogestuurde selectie’ te controleren</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-07-klacht-bezwaar-beroep/index.html">imp-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-07-klacht-bezwaar-beroep/index.html">Richt een proces in zodat burgers of andere belanghebbenden een klacht, bezwaar of beroep kunnen indienen over het gebruik van het algoritme en monitor dit proces.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-01-backups-maken/index.html">mon-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-01-backups-maken/index.html">Maak back-ups van algoritmes</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/index.html">mon-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/index.html">Beveilig de software</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-04-evalueer-bij-veranderingen-in-data/index.html">mon-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-04-evalueer-bij-veranderingen-in-data/index.html">Monitor regelmatig op veranderingen in de data. Bij veranderingen evalueer je de prestaties en output van het algoritme.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/index.html">mon-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/index.html">Meten, monitoren en rapporteren van milieu-impact van algoritmes</a></td></tr></tbody></table>
@@ -1189,7 +1171,7 @@ <h2 id="maatregelen">Maatregelen</h2>
     <span class="md-icon" title="Laatst geüpdatet">
       <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
     </span>
-    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">12 december 2024</span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
   </span>
 
     
diff --git a/pr-preview/pr-480/rollen/projectleider/index.html b/pr-preview/pr-480/rollen/projectleider/index.html
index 5076eb8af8..b546776306 100644
--- a/pr-preview/pr-480/rollen/projectleider/index.html
+++ b/pr-preview/pr-480/rollen/projectleider/index.html
@@ -97,7 +97,7 @@
     <div data-md-component="skip">
       
         
-        <a href="#algemeen" class="md-skip">
+        <a href="#projectleider" class="md-skip">
           Ga naar inhoud
         </a>
       
@@ -796,6 +796,8 @@
       <input class="md-nav__toggle md-toggle" type="checkbox" id="__toc">
       
       
+        
+      
       
         <label class="md-nav__link md-nav__link--active" for="__toc">
           
@@ -836,6 +838,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -843,17 +847,6 @@
     </label>
     <ul class="md-nav__list" data-md-component="toc" data-md-scrollfix>
       
-        <li class="md-nav__item">
-  <a href="#algemeen" class="md-nav__link">
-    <span class="md-ellipsis">
-      
-        Algemeen
-      
-    </span>
-  </a>
-  
-</li>
-      
         <li class="md-nav__item">
   <a href="#relevantie" class="md-nav__link">
     <span class="md-ellipsis">
@@ -1007,6 +1000,8 @@
   
   
   
+    
+  
   
     <label class="md-nav__title" for="__toc">
       <span class="md-nav__icon md-icon"></span>
@@ -1014,17 +1009,6 @@
     </label>
     <ul class="md-nav__list" data-md-component="toc" data-md-scrollfix>
       
-        <li class="md-nav__item">
-  <a href="#algemeen" class="md-nav__link">
-    <span class="md-ellipsis">
-      
-        Algemeen
-      
-    </span>
-  </a>
-  
-</li>
-      
         <li class="md-nav__item">
   <a href="#relevantie" class="md-nav__link">
     <span class="md-ellipsis">
@@ -1147,9 +1131,7 @@
   
 
 
-  <h1>Projectleider</h1>
-
-<h2 id="algemeen">Algemeen</h2>
+<h1 id="projectleider">Projectleider</h1>
 <p>De projectleider richt zich op het coördineren en aansturen van alle betrokken partijen en processen bij de ontwikkeling van algoritmes. Projectleiders zorgen ervoor dat projecten door de verschillende fasen van de levenscyclus van algoritmes worden geleid, van probleemanalyse tot monitoring &amp; beheer, of zelfs uitfasering.</p>
 <h2 id="relevantie">Relevantie</h2>
 <p>Projectmanagement binnen het Algoritmekader betekent het verbinden van benodigde expertises en het waarborgen dat alle stappen van het ontwikkelproces verantwoord en volgens de gestelde kaders worden uitgevoerd. Projectmanagers maken afspraken over de te navolgen vereisten en stellen prioriteiten in uit te voeren maatregelen. Zij houden contact met opdrachtgevers en verantwoordelijken om te zorgen dat de projectdoelen worden behaald en risico’s worden gemitigeerd. Zij spelen een hoofdrol bij het realiseren van een verantwoorde en effectieve inzet van algoritmes binnen een organisatie.</p>
@@ -1161,7 +1143,7 @@ <h2 id="bijbehorende-functies">Bijbehorende functies</h2>
 <li>IT-projectmanager</li>
 </ul>
 <h2 id="vereisten">Vereisten</h2>
-<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/index.html">aia-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/index.html">Personeel en gebruikers zijn voldoende AI-geletterd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/index.html">aia-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/index.html">Verboden AI-systemen mogen niet worden gebruikt.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/index.html">aia-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/index.html">Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/index.html">aia-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/index.html">Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">aia-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/index.html">aia-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/index.html">Datasets voor hoog-risico-AI-systemen voldoen aan kwaliteitscriteria</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/index.html">aia-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/index.html">Hoog-risico-AI-systemen zijn voorzien van voldoende technische documentatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/index.html">aia-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/index.html">Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">aia-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/index.html">aia-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/index.html">Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">aia-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/index.html">aia-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/index.html">Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/index.html">aia-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/index.html">Documentatie over hoog-risico-AI-systemen wordt 10 jaar bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/index.html">aia-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/index.html">Logs van hoog-risico-AI-systemen worden zes maanden bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/index.html">aia-14</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/index.html">Hoog-risico-AI-systemen worden pas geleverd of gebruikt na een conformiteitsbeoordelingsprocedure</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/index.html">aia-15</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/index.html">Hoog-risico-AI-systemen zijn voorzien van een EU-conformiteitsverklaring</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/index.html">aia-16</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/index.html">Hoog-risico-AI-systemen zijn voorzien van een CE-markering</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/index.html">aia-17</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/index.html">Hoog-risico-AI-systemen zijn geregistreerd in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/index.html">aia-18</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/index.html">Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/index.html">aia-19</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/index.html">Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/index.html">aia-20</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/index.html">Hoog-risico-AI-systemen worden gebruikt volgens de gebruiksaanwijzing</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/index.html">aia-21</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/index.html">Menselijke controle van hoog-risico-AI-systemen wordt uitgevoerd door mensen met voldoende kennis en mogelijkheden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/index.html">aia-22</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/index.html">De werking van hoog-risico-AI-systemen wordt gemonitord</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/index.html">aia-23</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/index.html">Logs voor hoog-risico-AI-systemen worden bewaard door de gebruiksverantwoordelijke</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-24-informeren-werknemers/index.html">aia-24</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-24-informeren-werknemers/index.html">Werknemers weten dat hun organisatie een hoog-risico AI-systeem gebruikt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/index.html">aia-25</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/index.html">Gebruiksverantwoordelijken controleren de registratie van het hoog-risico AI-systeem in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">aia-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">Mensen over wie besluiten worden genomen door een hoog-risico-AI-systemen, krijgen op verzoek informatie over deze besluiten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/index.html">aia-29</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/index.html">Hoog-risico-AI-systemen voor publieke taken worden beoordeeld op gevolgen voor grondrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/index.html">aia-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/index.html">AI-systemen worden zo ontworpen en gebruikt, dat mensen begrijpen wanneer zij met een AI-systeem communiceren en welke content gemaakt is door een AI-systeem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/index.html">aia-29</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/index.html">AI-modellen voor algemene doeleinden zijn voorzien van voldoende technische documentatie en informatie</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/index.html">aia-30</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/index.html">Aanbieders van AI-modellen voor algemene doeleinden met een systeemrisico treffen extra maatregelen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/index.html">aia-31</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/index.html">Als AI-modellen voor algemene doeleinden met systeemrisico’s ernstige incidenten veroorzaken, wordt dit gedocumenteerd en gerapporteerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/index.html">aia-33</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/index.html">AI-testomgevingen die persoonsgegevens verwerken, voldoen aan strenge voorwaarden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/index.html">aia-34</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/index.html">Hoog-risico-AI-systemen zijn voorzien van een monitoringsysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/index.html">aia-35</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/index.html">Ernstige incidenten door hoog-risico-AI-systemen worden gemeld aan de toezichthouder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/index.html">aia-36</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/index.html">Klokkenluiders kunnen veilig melden dat een organisatie zich niet houdt aan de AI-verordening</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/index.html">aia-37</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/index.html">Klachtrecht aanbieders verder in AI-waardeketen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html">arc-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html">Informatie over algoritmes wordt gedocumenteerd volgens de Archiefwet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/index.html">avg-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/index.html">Persoonsgegevens worden op een rechtmatige manier verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/index.html">avg-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/index.html">Persoonsgegevens zijn juist en actueel</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/index.html">avg-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/index.html">Organisaties zijn transparant over het verwerken van persoonsgegevens</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/index.html">avg-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/index.html">Gevoelige persoonsgegevens worden alleen gebruikt als hiervoor een wettelijke uitzondering geldt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/index.html">avg-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/index.html">Besluiten die levens kunnen beïnvloeden, zijn niet volledig geautomatiseerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/index.html">avg-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/index.html">Ontwerp en standaardinstellingen (defaults) zijn zo gunstig mogelijk voor de privacy van betrokkenen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/index.html">avg-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/index.html">Een Data Protection Impact Assessment (DPIA) wordt uitgevoerd wanneer de verwerking van persoonsgegevens waarschijnlijk een hoog risico met zich meebrengt voor de rechten en vrijheden van natuurlijke personen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/index.html">awb-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/index.html">Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/index.html">awb-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/index.html">Organisaties kunnen duidelijk uitleggen waarom en hoe algoritmes leiden tot een besluit</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/index.html">bzk-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/index.html">Impactvolle algoritmes en hoog-risico-AI-systemen staan in het Nederlandse Algoritmeregister</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/index.html">grw-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/index.html">Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/index.html">grw-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/index.html">Algoritmes discrimineren niet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/index.html">woo-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/index.html">Iedereen kan openbare informatie over algoritmes vinden of aanvragen</a></td></tr></tbody></table>
+<div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/index.html">aia-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/index.html">Personeel en gebruikers zijn voldoende AI-geletterd.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/index.html">aia-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/index.html">Verboden AI-systemen mogen niet worden gebruikt.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/index.html">aia-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/index.html">Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/index.html">aia-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/index.html">Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">aia-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/index.html">aia-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/index.html">Datasets voor hoog-risico-AI-systemen voldoen aan kwaliteitscriteria</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/index.html">aia-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/index.html">Hoog-risico-AI-systemen zijn voorzien van voldoende technische documentatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/index.html">aia-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/index.html">Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">aia-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/index.html">Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/index.html">aia-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/index.html">Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">aia-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/index.html">Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/index.html">aia-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/index.html">Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/index.html">aia-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/index.html">Documentatie over hoog-risico-AI-systemen wordt 10 jaar bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/index.html">aia-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/index.html">Logs van hoog-risico-AI-systemen worden zes maanden bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/index.html">aia-14</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/index.html">Hoog-risico-AI-systemen worden pas geleverd of gebruikt na een conformiteitsbeoordelingsprocedure</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/index.html">aia-15</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/index.html">Hoog-risico-AI-systemen zijn voorzien van een EU-conformiteitsverklaring</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/index.html">aia-16</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/index.html">Hoog-risico-AI-systemen zijn voorzien van een CE-markering</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/index.html">aia-17</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/index.html">Hoog-risico-AI-systemen zijn geregistreerd in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/index.html">aia-18</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/index.html">Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/index.html">aia-19</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/index.html">Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/index.html">aia-20</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/index.html">Hoog-risico-AI-systemen worden gebruikt volgens de gebruiksaanwijzing</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/index.html">aia-21</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/index.html">Menselijke controle van hoog-risico-AI-systemen wordt uitgevoerd door mensen met voldoende kennis en mogelijkheden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/index.html">aia-22</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/index.html">De werking van hoog-risico-AI-systemen wordt gemonitord</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/index.html">aia-23</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/index.html">Logs voor hoog-risico-AI-systemen worden bewaard door de gebruiksverantwoordelijke</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-24-informeren-werknemers/index.html">aia-24</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-24-informeren-werknemers/index.html">Werknemers weten dat hun organisatie een hoog-risico AI-systeem gebruikt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/index.html">aia-25</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/index.html">Gebruiksverantwoordelijken controleren de registratie van het hoog-risico AI-systeem in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">aia-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/index.html">Mensen over wie besluiten worden genomen door een hoog-risico-AI-systemen, krijgen op verzoek informatie over deze besluiten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/index.html">aia-29</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/index.html">Hoog-risico-AI-systemen voor publieke taken worden beoordeeld op gevolgen voor grondrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/index.html">aia-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/index.html">AI-systemen worden zo ontworpen en gebruikt, dat mensen begrijpen wanneer zij met een AI-systeem communiceren en welke content gemaakt is door een AI-systeem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/index.html">aia-29</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/index.html">AI-modellen voor algemene doeleinden zijn voorzien van voldoende technische documentatie en informatie</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/index.html">aia-30</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/index.html">Aanbieders van AI-modellen voor algemene doeleinden met een systeemrisico treffen extra maatregelen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/index.html">aia-31</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/index.html">Als AI-modellen voor algemene doeleinden met systeemrisico’s ernstige incidenten veroorzaken, wordt dit gedocumenteerd en gerapporteerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/index.html">aia-33</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/index.html">AI-testomgevingen die persoonsgegevens verwerken, voldoen aan strenge voorwaarden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/index.html">aia-34</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/index.html">Hoog-risico-AI-systemen zijn voorzien van een monitoringsysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/index.html">aia-35</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/index.html">Ernstige incidenten door hoog-risico-AI-systemen worden gemeld aan de toezichthouder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/index.html">aia-36</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/index.html">Klokkenluiders kunnen veilig melden dat een organisatie zich niet houdt aan de AI-verordening</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/index.html">aia-37</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/index.html">Klachtrecht aanbieders verder in AI-waardeketen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/index.html">aia-39</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/index.html">Hoog-risico-AI-systemen zijn getest.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html">arc-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html">Informatie over algoritmes wordt gedocumenteerd volgens de Archiefwet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/index.html">avg-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/index.html">Persoonsgegevens worden op een rechtmatige manier verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/index.html">avg-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/index.html">Persoonsgegevens zijn juist en actueel</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/index.html">avg-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/index.html">Organisaties zijn transparant over het verwerken van persoonsgegevens</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/index.html">avg-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/index.html">Gevoelige persoonsgegevens worden alleen gebruikt als hiervoor een wettelijke uitzondering geldt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/index.html">avg-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/index.html">Besluiten die levens kunnen beïnvloeden, zijn niet volledig geautomatiseerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/index.html">avg-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/index.html">Ontwerp en standaardinstellingen (defaults) zijn zo gunstig mogelijk voor de privacy van betrokkenen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/index.html">avg-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/index.html">Een Data Protection Impact Assessment (DPIA) wordt uitgevoerd wanneer de verwerking van persoonsgegevens waarschijnlijk een hoog risico met zich meebrengt voor de rechten en vrijheden van natuurlijke personen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/index.html">awb-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/index.html">Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/index.html">awb-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/index.html">Organisaties kunnen duidelijk uitleggen waarom en hoe algoritmes leiden tot een besluit</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/index.html">bzk-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/index.html">Impactvolle algoritmes en hoog-risico-AI-systemen staan in het Nederlandse Algoritmeregister</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/index.html">grw-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/index.html">Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/index.html">grw-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/index.html">Algoritmes discrimineren niet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/index.html">woo-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/index.html">Iedereen kan openbare informatie over algoritmes vinden of aanvragen</a></td></tr></tbody></table>
 
 <h2 id="maatregelen">Maatregelen</h2>
 <div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Maatregelen</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-01-benodigde-expertise-en-capaciteit/index.html">org-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-01-benodigde-expertise-en-capaciteit/index.html">Bepaal of er genoeg experts beschikbaar zijn</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-03-toepassen_risicobeheer/index.html">org-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-03-toepassen_risicobeheer/index.html">Maak een plan voor het omgaan met risico’s</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-04-politiek-bestuurlijke-verantwoordelijkheid/index.html">org-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-04-politiek-bestuurlijke-verantwoordelijkheid/index.html">Zorg voor politiek-bestuurlijk bewustzijn, betrokkenheid, en verantwoordelijkheid.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-05-bestaande-governance/index.html">org-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-05-bestaande-governance/index.html">Sluit algoritmegovernance aan op bestaande governancestructuren binnen de organisatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/index.html">org-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/index.html">Gebruik een algoritme volwassenheidsmodel om te weten waar de organisatie staat</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-07-intern-toezicht/index.html">org-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-07-intern-toezicht/index.html">Richt een algoritmegovernance in met three lines of defence</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-08-beslismoment-levenscyclus/index.html">org-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-08-beslismoment-levenscyclus/index.html">Maak gebruik van beslismomenten  in de algoritmelevenscyclus</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-09-governance-per-risicocategorie/index.html">org-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-09-governance-per-risicocategorie/index.html">Richt algoritmegovernance op basis van de risicoclassificatie van algoritmes.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-10-inrichten-taken-en-verantwoordelijkheden-algoritmegovernance/index.html">org-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-10-inrichten-taken-en-verantwoordelijkheden-algoritmegovernance/index.html">Taken en verantwoordelijkheden zijn toebedeeld in de algoritmegovernance</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-11-gebruikersbeheer/index.html">org-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-11-gebruikersbeheer/index.html">Maak afspraken over het beheer van gebruikers</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/index.html">org-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/index.html">Controleer en verbeter regelmatig de kwaliteit van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-13-wachtwoordbeheer/index.html">org-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-13-wachtwoordbeheer/index.html">Maak afspraken over het beheer van wachtwoorden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-14-wijzigingenproces/index.html">org-14</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-14-wijzigingenproces/index.html">Maak afspraken over het wijzigen van de code</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/index.html">imp-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/index.html">Stel een protocol vast voor de situatie dat er (een vermoeden van) discriminatie door een algoritme is geconstateerd en pas dit wanneer nodig toe.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-01-formuleren-probleemdefinitie/index.html">pba-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-01-formuleren-probleemdefinitie/index.html">Beschrijf het probleem dat het algoritme moet oplossen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-02-formuleren-doelstelling/index.html">pba-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-02-formuleren-doelstelling/index.html">Beschrijf het doel van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-03-onderbouwen-gebruik-algoritme/index.html">pba-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-03-onderbouwen-gebruik-algoritme/index.html">Beschrijf waarom een algoritme het probleem moet oplossen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-04-betrek-belanghebbenden/index.html">pba-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-04-betrek-belanghebbenden/index.html">Overleg regelmatig met belanghebbenden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/index.html">owp-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/index.html">Beschrijf de rollen en verantwoordelijkheden voor het ontwikkelen en gebruiken van algoritmes</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-02-data-beschikbaarheid/index.html">owp-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-02-data-beschikbaarheid/index.html">Voer voorafgaand aan een project een data beschikbaarheid, kwaliteit- en toegankelijkheidsanalayse uit.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-03-doel-verwerken-persoonsgegevens/index.html">owp-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-03-doel-verwerken-persoonsgegevens/index.html">Beschrijf voor welk doel het algoritme persoonsgegevens gebruikt en waarom dit mag</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-05-soort-algoritme/index.html">owp-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-05-soort-algoritme/index.html">Bepaal het soort algoritme en de risicogroep en vereisten die hierbij horen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/index.html">owp-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/index.html">Inventariseer welke grondrechten het algoritme kan schenden en maak een belangenafweging</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-08-archiveren-documenten/index.html">owp-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-08-archiveren-documenten/index.html">Bepaal welke documenten voor hoe lang gearchiveerd moeten worden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-model-verwerkersovereenkomst-onderdeel-aanbesteding/index.html">owp-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-model-verwerkersovereenkomst-onderdeel-aanbesteding/index.html">Een model-verwerkersovereenkomst is onderdeel van de aanbesteding als persoonsgegevens worden verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-multidisciplinair-inkoopteam/index.html">owp-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-multidisciplinair-inkoopteam/index.html">Stel een multidisciplinair team samen bij het ontwikkelen of inkopen van algoritmes.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/index.html">owp-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/index.html">Maak een Project Startarchitectuur (PSA) voor de ontwikkeling of inkoop van algoritmes</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/index.html">owp-11</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/index.html">Koop duurzaam algoritmes in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/index.html">owp-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/index.html">Bespreek de vereisten die gelden voor een verantwoorde inzet van algoritmes met aanbieders.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/index.html">owp-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/index.html">Maak vereisten voor algoritmes onderdeel van algemene inkoopvoorwaarden en de contractovereenkomst.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-14-verwerkersovereenkomst-onderdeel-aanbesteding/index.html">owp-14</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-14-verwerkersovereenkomst-onderdeel-aanbesteding/index.html">Maak het opstellen van een verwerkersovereenkomst onderdeel van de aanbesteding als persoonsgegevens worden verwerkt.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-15-leveren-bewijs_voldoen-aan-vereisten-algoritme-aanbieder/index.html">owp-15</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-15-leveren-bewijs_voldoen-aan-vereisten-algoritme-aanbieder/index.html">Maak het leveren van bewijs voor het voldoen aan de vereisten voor algoritmes onderdeel van de beoordeling van een inschrijving.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/index.html">owp-16</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/index.html">Laat aanbieder(s) bewijs leveren dat de door hen ontwikkelde algoritmes geen inbreuk maken op de auteursrechten van derden met de trainingsdata en de output.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/index.html">owp-19</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/index.html">Creëer ruimte om met een aanbieder samen te gaan werken om specifieke vereisten te realiseren</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-20-vaststellen-aanleveren-informatie-technische-documentatie/index.html">owp-20</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-20-vaststellen-aanleveren-informatie-technische-documentatie/index.html">Vul technische documentatie van aanbieder aan met relevante informatie vanuit de gebruiksverantwoordelijke.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/index.html">owp-21</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/index.html">Neem het kunnen uitvoeren van een audit over de vereiste op in contractvoorwaarden en de contractovereenkomst</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-22-invloed-besluitvorming-algoritmes-aanbieders/index.html">owp-22</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-22-invloed-besluitvorming-algoritmes-aanbieders/index.html">Bepaal in een aanbesteding of algoritmes van een aanbieder bepalende invloed hebben in een besluit richting personen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/index.html">owp-23</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/index.html">Laat de aanbieder aangeven welke mate van opleiding en ondersteuning bij de implementatie nodig is om de beoogde algoritmes verantwoord te gebruiken.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-24-risico-analyse-informatiebeveiliging-leverancier/index.html">owp-24</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-24-risico-analyse-informatiebeveiliging-leverancier/index.html">Voer een risico-analyse met de aanbieder uit op het gebied van informatiebeveiliging bij een uitbestedingstraject</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/index.html">owp-25</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/index.html">Maak vereisten onderdeel van het programma van eisen bij een aanbesteding</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/index.html">owp-26</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/index.html">Maak vereisten voor algoritmes onderdeel van de Service Level Agreement</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-28-pas-vastgestelde-beleidskaders-zijn-nageleefd/index.html">owp-28</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-28-pas-vastgestelde-beleidskaders-zijn-nageleefd/index.html">Pas vastgestelde interne beleidskaders toe en maak aantoonbaar dat deze zijn nageleefd bij het ontwikkelen, inkopen en gebruiken van algoritmes.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-29-informeer_betrokkenen/index.html">pba-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-29-informeer_betrokkenen/index.html">Stel vast welke betrokkenen geïnformeerd moeten worden en welke informatie zij nodig hebben.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/index.html">owp-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/index.html">Pas uitlegbaarheidstechnieken toe en evalueer en valideer deze.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-genereren-bronvermelding/index.html">imp-10</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-genereren-bronvermelding/index.html">Maak gebruik van een algoritme dat bronvermelding kan genereren bij de output.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-toepassen_vastgestelde-beleidskaders/index.html">org-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-toepassen_vastgestelde-beleidskaders/index.html">Pas vastgestelde beleidskaders toe</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-04-bewaartermijnen-persoonsgegevens/index.html">dat-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-04-bewaartermijnen-persoonsgegevens/index.html">Geef data zoals persoonsgegevens een bewaartermijn met een vernietigingsprocedure</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/index.html">dat-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/index.html">Gebruik duurzame datacenters</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-08-eigenaarschap-data/index.html">dat-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-08-eigenaarschap-data/index.html">Zorg dat je controle of eigenaarschap hebt over de data</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-09-dataminimalisatie/index.html">dat-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-09-dataminimalisatie/index.html">Beperk de omvang van datasets voor energie-efficiëntie</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-01-security-by-design/index.html">owk-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-01-security-by-design/index.html">Ontwerp en ontwikkel het algoritme volgens de principes van ‘security by design’</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-02-stopzetten-gebruik/index.html">owk-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-02-stopzetten-gebruik/index.html">Maak een noodplan voor het stoppen van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-03-privacyrisico/index.html">owk-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-03-privacyrisico/index.html">Analyseer de privacy-risico’s en neem maatregelen om deze risico’s laag te houden</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/index.html">ver-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/index.html">Controleer regelmatig of het algoritme werkt zoals het bedoeld is</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/index.html">ver-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/index.html">Toets het algoritme op bias</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/index.html">imp-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/index.html">Stel een werkinstructie op voor gebruikers.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/index.html">imp-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/index.html">Richt de juiste menselijke controle in van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-04-publiceren-algoritmeregister/index.html">imp-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-04-publiceren-algoritmeregister/index.html">Publiceer impactvolle algoritmes en hoog-risico-AI-systemen in het Algoritmeregister</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-proces-privacyrechten/index.html">imp-06</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-proces-privacyrechten/index.html">Spreek af hoe de organisatie omgaat met privacy-verzoeken</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-werkinstructies-medewerkers/index.html">imp-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-werkinstructies-medewerkers/index.html">Spreek af hoe medewerkers omgaan met het algoritme.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-06-vermelding-in-privacyverklaring/index.html">imp-07</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-06-vermelding-in-privacyverklaring/index.html">Vermeld het gebruik van persoonsgegevens in een privacyverklaring</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-07-klacht-bezwaar-beroep/index.html">imp-09</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-07-klacht-bezwaar-beroep/index.html">Richt een proces in zodat burgers of andere belanghebbenden een klacht, bezwaar of beroep kunnen indienen over het gebruik van het algoritme en monitor dit proces.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-08-vermelding-in-verwerkingsregister/index.html">imp-08</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-08-vermelding-in-verwerkingsregister/index.html">Vermeld het gebruik van persoonsgegevens in het verwerkingsregister</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-09-politiek-bestuurlijk-besluit/index.html">imp-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-09-politiek-bestuurlijk-besluit/index.html">Maak een openbaar besluit over de inzet van het algoritme</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/index.html">mon-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/index.html">Beveilig de software</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/index.html">mon-03</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/index.html">Maak een noodplan voor beveiligingsincidenten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/index.html">mon-05</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/index.html">Meten, monitoren en rapporteren van milieu-impact van algoritmes</a></td></tr></tbody></table>
@@ -1187,7 +1169,7 @@ <h2 id="maatregelen">Maatregelen</h2>
     <span class="md-icon" title="Laatst geüpdatet">
       <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
     </span>
-    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">12 december 2024</span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
   </span>
 
     
diff --git a/pr-preview/pr-480/search/search_index.json b/pr-preview/pr-480/search/search_index.json
index 26fbc58994..cd8f4bc5c6 100644
--- a/pr-preview/pr-480/search/search_index.json
+++ b/pr-preview/pr-480/search/search_index.json
@@ -1 +1 @@
-{"config":{"lang":["nl"],"separator":"[\\s\\-]+","pipeline":["stopWordFilter"],"fields":{"title":{"boost":1000.0},"text":{"boost":1.0},"tags":{"boost":1000000.0}}},"docs":[{"location":"","title":"Het algoritmekader","text":"Wetten en regels, tips en hulpmiddelen voor verantwoord gebruik van algoritmes.       b\u00e8taversie <p>Deze website is in ontwikkeling. Alle versies ontstaan op een open manier. Iedereen mag opmerkingen of suggesties geven.</p> Onderwerpen <ul> <li>Bias en non-discriminatie</li> <li>Governance</li> <li>Transparantie</li> <li>Privacy &amp; gegevensbescherming</li> <li>Publieke inkoop</li> </ul> Bekijk alle onderwerpen Informatie per rol <ul> <li>Beleid en advies</li> <li>Jurist</li> <li>Ontwikkelaar</li> <li>Projectleider</li> </ul> Bekijk alle rollen Levenscyclus <ul> <li>Probleemanalyse</li> <li>Ontwerpen</li> <li>Dataverkenning &amp; datapreparatie</li> <li>Ontwikkelen</li> <li>Monitoring &amp; beheer</li> </ul> Bekijk de hele levenscyclus Voldoen aan wetten en regels <ul> <li>Vereisten</li> <li>Aanbevolen maatregelen</li> <li>Aanbevolen hulpmiddelen</li> </ul> <p></p>"},{"location":"version/","title":"Version","text":""},{"location":"version/#-","title":"---","text":""},{"location":"version/#huidige-versie","title":"Huidige versie","text":"<p>v1.6.1-35-geffb60f72</p>"},{"location":"levenscyclus/","title":"Levenscyclus algoritmes en AI","text":"<ul> <li> <p>Fase 0: Organisatieverantwoordelijkheden</p> <p>Voordat je start met de ontwikkeling of het gebruik van een algoritme, zul je moeten zorgen dat je organisatie voldoende ingericht is om algoritmes te gebruiken of te ontwikkelen.</p> </li> <li> <p>Fase 1: Probleemanalyse</p> <p>In deze fase wordt het probleem en de doelstellingen van een opdrachtgever geanalyseerd en beschreven.</p> </li> <li> <p>Fase 2: Ontwerp</p> <p>In de ontwerpfase wordt het conceptuele ontwerp van het AI-systeem uitgedacht.</p> </li> <li> <p>Fase 3: Dataverkenning en datapreparatie</p> <p>Dit is de fase waarin het algoritme of AI-systeem wordt ontwikkeld door het ontwikkelteam.</p> </li> <li> <p>Fase 4: Ontwikkelen</p> <p>Dit is de fase waarin het algoritme of AI-systeem wordt ontwikkeld door het ontwikkelteam.</p> </li> <li> <p>Fase 5: Verificatie en validatie</p> <p>Bij de verificatie en validatie van het algoritme of AI-systeem dient bepaald te worden of het algoritme of AI-systeem gebouwd is volgens de (technische) specificaties en voldoet aan de beoogde doelstellingen.</p> </li> <li> <p>Fase 6: Implementatie</p> <p>In deze fase wordt het algoritme of AI-systeem in de praktijk gebracht en duurzaam ge\u00efntegreerd in het bedrijfsproces.</p> </li> <li> <p>Fase 7: Monitoring en beheer</p> <p>Het algoritme of AI-systeem wordt in deze fase voortdurend gemonitord om ervoor te zorgen dat het blijft presteren zoals verwacht en kan worden gebruikt door gebruikers.</p> </li> <li> <p>Fase 8: Uitfaseren</p> <p>Als wordt besloten dat het algoritme of AI-systeem niet langer nodig is of wordt vervangen door een wezenlijk andere versie, wordt het gearchiveerd en uitgefaseerd.</p> </li> </ul>"},{"location":"levenscyclus/dataverkenning-en-datapreparatie/","title":"Dataverkenning en datapreparatie","text":"<p>In deze fase worden relevante datasets ge\u00efdentificeerd en wanneer nodig wordt nieuwe data verzameld.  In deze fase zal ook de ontwikkelomgeving (verder) worden ingericht indien nodig.  Het is van belang dat voorafgaand aan verzameling is vastgesteld dat de benodigde data mag worden verwerkt en dat de juiste maatregelen worden getroffen, zodra de data kan worden verwerkt.  Denk hierbij aan het anonimiseren, pseudonimiseren of aggregeren van persoonsgegevens.  De data zullen vervolgens worden opgeschoond, geanalyseerd en voorbereid voor verdere verwerking. </p> <p>Het is van belang dat dataverzameling op de juiste manier gebeurt, en dat datasets die gebruikt gaan worden van goede kwaliteit zijn.  In deze fase is het van belang om de datakwaliteit en eventuele bias in de dataset te onderzoeken.  Indien er risico's optreden door bijvoorbeeld missende data of niet representatieve data, is het belangrijk om te kijken wat voor effecten dit heeft op het oorspronkelijke ontwerp van het algoritme.  Dit kan betekenen dat nieuwe keuzes moeten worden gemaakt in het ontwerp en eventueel eerste deze fase van ontwerp (deels) opnieuw moet worden doorlopen. </p> <p>Met voorgaande handelingen wordt het fundament gelegd om het algoritme te kunnen ontwikkelen.  In de praktijk zal bijvoorbeeld het analyseren van de data niet stoppen na deze fase, maar terugkerend zijn in alle fasen die volgen.  Als de verzamelde data van voldoende kwaliteit is en de vereiste maatregelen zijn getroffen, dan kan worden gestart met het ontwikkelen van het algoritme. </p>"},{"location":"levenscyclus/implementatie/","title":"Implementatie","text":"<p>In deze fase wordt het algoritme in de praktijk gebracht en duurzaam ge\u00efntegreerd in het bedrijfsproces.  In de praktijk worden veelal eerst een pilot uitgevoerd voor een afgebakende periode of over een beperkt aan zaken.  In deze situatie, een pilot, wordt tijdelijk productiedata verwerkt.  Dit vraagt om een goede samenwerking tussen het ontwikkelteam en de gebruikers van het algoritme.  Niet alleen de prestaties van het algoritme worden nogmaals gevalideerd, maar bijvoorbeeld ook of de output zodanig wordt gepresenteerd dat gebruikers hiermee kunnen werken.  Na deze pilot wordt onderzocht in hoeverre het algoritme presteert conform wens en verwachting.  Er kan worden gekozen om het algoritme eerst nog door te ontwikkelen op basis van de bevindingen, uit te faseren of om de oplossing structureel onderdeel te maken van de bedrijfsvoering door het te implementeren. </p> <p>Als een besluit wordt genomen om de oplossing te implementeren, dan is het van belang dat gebruikers goed begrijpen hoe de resultaten van het algoritme moeten worden ge\u00efnterpreteerd, dat de rest-risico's bekend zijn, de verantwoordelijkheden belegd zijn en dat er duidelijke werkinstructies zijn over het gebruik van het algoritme. Service- en incidentmanagement moet volledig worden geoperationaliseerd, zodat gebruikers kunnen worden geholpen bij vragen of incidenten.  Een kenmerkend element van deze fase is dat vanaf nu betrokkenen onderhevig zijn aan de werking van het algoritme.  Beslissingen en besluiten komen nu bijvoorbeeld mede of geheel door de werking van het algoritme tot stand.  Waar passend, bijvoorbeeld bij impactvolle of hoog risico AI-systemen wordt dit duidelijk gecommuniceerd naar betrokken, voordat de oplossing volledig is ge\u00efmplementeerd.  </p>"},{"location":"levenscyclus/monitoring-en-beheer/","title":"Monitoring en beheer","text":"<p>Het algoritme wordt in deze fase voortdurend gemonitord om ervoor te zorgen dat het blijft presteren zoals verwacht en kan worden gebruikt door gebruikers.  Eventuele afwijkingen of degradatie van prestaties worden gesignaleerd en er worden maatregelen getroffen om dit te herstellen.  Dit is van belang vanuit een technisch perspectief (presteert het model nog wel waar het voor ontworpen is), maar ook vanuit een juridische en ethische blik (functioneert het model nog wel rechtmatig en zijn er geen onvoorziene nadelige effecten op mens en maatschappij).  Hierbij dient ook voortdurend gemonitord te worden of de omstandigheden waarin het algoritme wordt gebruikt veranderlijk zijn, en of daar op geanticipeerd moet worden.  Dit kan bijvoorbeeld spelen bij veranderende data of bij het uitvoeren van nieuw beleid of wet- en regelgeving in het werkproces dat wordt ondersteund met het algoritme. </p> <p>Het is van belang dat beheer wordt uitgevoerd over het algoritme, zodat de (gehele) oplossing operationeel blijft.  Een wijziging in onderliggende systemen kan er bijvoorbeeld voor zorgen dat het algoritme niet meer wordt voorzien van de noodzakelijk data om de benodigde output te genereren.  Het beheerteam zorgt ervoor dat dergelijke situaties worden voorkomen of opgelost. Er kunnen ook incidenten worden gemeld door gebruikers die worden opgelost door het beheerteam.  </p>"},{"location":"levenscyclus/ontwerp/","title":"Ontwerp","text":"<p>In de ontwerpfase wordt het conceptuele ontwerp van het algoritme uitgedacht.  Het is van belang om belangrijke uitgangspunten en beleid, zoals doelarchitectuur en de datastrategie, van de betreffende organisatie meteen te verwerken in het ontwerp en dat het applicatielandschap en de databronnen in beeld wordt gebracht.  In deze fase worden doorgaans veel werkzaamheden verzet, zoals business- en informatieanalyse, om een goed beeld te krijgen hoe aan de beoogde doelstellingen kan worden voldaan met een passende oplossing.  </p> <p>Het is goed denkbaar dat meerdere ontwerpen in deze fase tot stand komen voor het te ontwikkelen algoritme.  Het is van belang om deze ontwerpen te toetsen bij bijvoorbeeld de proceseigenaar, opdrachtgever en gebruiker, maar ook bij informatiebeveiligingsadviseurs, privacy officers, informatiebeheerders, architecten of een ethicus.  Deze experts kunnen vanuit hun vakgebied een eerste toets doen in hoeverre het ontwerp haalbaar of gewenst is, aansluit bij de gebruikersbehoefte, aan welke vereisten moet worden voldaan of dat er risicoanalyses moeten worden uitgevoerd en een onafhankelijke commissies moet worden betrokken.</p> <p>Met deze input kan het ontwerp worden verbeterd en vraagstukken over bijvoorbeeld governance en risicomanagement verder worden uitgewerkt.  In deze fase kan ook een eerste stap worden gezet om de vereisten te vertalen naar concrete maatregelen, te structureren en te beleggen bij de betrokken experts.  Als bijvoorbeeld is vastgesteld dat persoonsgegevens noodzakelijkerwijs moeten worden verwerkt en hier een grondslag voor is, dan is het van belang dat voorafgaand aan de dataverkenning en datapreparatie fase voldoende (technische) maatregelen zijn getroffen om de data veilig te verwerken in de beoogde (ontwikkel)omgeving. </p> <p>Daarnaast dient er in de ontwerpfase ook aandacht besteed te worden aan de succesfactoren van een algoritme.  Het is belangrijk om in een multidisciplinaire setting te bepalen hoe het algoritme in de praktijk ge\u00ebvalueerd kan worden en wanneer we kunnen spreken van een rechtvaardig succes. Hierbij dient er ook te worden nagedacht over evaluatiemethoden om na te gaan of het algoritme voldoet aan bijvoorbeeld het vereiste van non-discriminatie. </p> <p>Nadat een besluit is genomen over het definitieve ontwerp van het algoritme, kan worden gestart met het inrichten van de ontwikkelomgeving (indien nodig), de dataverkenning, datapreparatie.  Dit besluit betekent dat een akkoord wordt gegeven voor het type algoritme en de beoogde werking.  </p>"},{"location":"levenscyclus/ontwikkelen/","title":"Ontwikkelen","text":"<p>Dit is de fase waarin het algoritme wordt ontwikkeld door het ontwikkelteam.  Als het gaat om AI-systemen, omvat deze fase het trainen van modellen met behulp van de voorbereide gegevens. Als het gaat om algoritmes op basis van rekenregels, betreft dit het implementeren van deze rekenregels in de (ontwikkelomgeving van de) systemen.  </p> <p>Het algoritme technisch correct ontwikkelen, inclusief het kunnen begrijpen van de beperkingen ervan, vraagt om een samenspel van expertise vanuit verschillende disciplines.  Denk hierbij aan de proceseigenaar, domeinexperts van het te ondersteunen werkproces, data scientists, data engineer, (privacy)juristen, beleidsmedewerkers en een ethicus.  Een voorbeeld hiervan is het beoordelen van de zogenaamde inputvariabelen of rekenregels (die voor een groot deel bepalen hoe een algoritme functioneert) van een machine learning model of algoritme.  Deze rollen zijn bijzonder waardevol bij het beoordelen of deze variabelen of rekenregels juridisch zijn toegestaan, ethisch wenselijk zijn, technisch gezien- voldoende significant zijn en of deze van toegevoegde waarde zijn voor gebruikers.  Dit multidisciplinaire team kan tijdens de ontwikkeling continu bijsturen, zodat het algoritme op een verantwoorde wijze functioneert en aansluit bij de beoogde doelstellingen.  </p> <p>In deze fase is niet alleen het ontwikkelen van een algoritme, maar ook het documenteren van belangrijke afwegingen en het opstellen van technische documentatie van groot belang.  Daarnaast zullen tal van (technische) maatregelen moeten worden getroffen zoals de verdere beveiliging van het informatiesysteem of bij de ontsluiting van de output naar gebruikers, het automatische genereren van logs en het inrichten van service en incidentmanagementprocedures.  </p>"},{"location":"levenscyclus/organisatieverantwoordelijkheden/","title":"Organisatieverantwoordelijkheden","text":"<p>Voordat je start met de ontwikkeling of het gebruik van een algoritme, zul je moeten zorgen dat je organisatie voldoende ingericht is om algoritmes te gebruiken of te ontwikkelen.  In deze fase beschrijven we de randvoorwaarden die je als organisatie moet hebben om aan de slag te gaan. Dit zijn aspecten die je in het ideale geval al regelt voordat je begint aan het gebruik van algoritmes. Het zijn ook taken die je voortdurend aandacht zal moeten geven, maar die je niet voor ieder algorite opnieuw hoeft te organiseren. </p>"},{"location":"levenscyclus/probleemanalyse/","title":"Probleemanalyse","text":"<p>In deze fase wordt het probleem en de doelstellingen van een opdrachtgever geanalyseerd en beschreven.  Er wordt bijvoorbeeld onderzocht welke publieke taak moet worden ondersteund en welke publieke waarden daarbij moeten worden beschermd of juist gerealiseerd.  In deze fase wordt onderzocht of het ontwikkelen van een algoritme een geschikt middel is om het doel te realiseren en het probleem op te lossen. Dat hangt van verschillende zaken af. </p> <p>Hierbij kan worden gedacht aan de middelen (capaciteit en financi\u00eble middelen) die nodig zijn om algoritmen op een verantwoorde wijze te ontwikkelen, de complexiteit van de oplossing, het in beeld brengen van de verwachte risico's (hoog over), een eerste beeld krijgen bij wat voor data nodig zijn en het in kaart brengen en beleggen van de verschillende verantwoordelijkheden.  Daarnaast is het van belang om het beleid met betrekking tot de inzet van algoritme een organisatie te raadplegen.  </p> <p>Er zal een conclusie moeten volgen of de ontwikkeling van een algoritme passend is.  Deze fase wordt doorgaans afgerond met een akkoord van de (gemandateerd) verantwoordelijk(en)/opdrachtgever om een algoritme te ontwikkelen.  Een vastgestelde business case of plan van aanpak vormen veelal de basis om de ontwerpfase te starten met de benodigde experts. </p>"},{"location":"levenscyclus/uitfaseren/","title":"Uitfaseren","text":"<p>Als wordt besloten dat het algoritme niet langer nodig is of wordt vervangen door een wezenlijk andere versie, wordt het gearchiveerd en uitgefaseerd.  Hiermee wordt ervoor gezocht dat later kan worden gereconstrueerd hoe het algoritme heeft gefunctioneerd en dat gebruikers er geen gebruik meer van kunnen maken.  </p> <p>Archiveren betekent dat documentatie en eventuele relevante artefacten (zoals logbestanden en de parameters van het model) worden bewaard voor een bepaalde periode.  Het gaat daarbij ook om informatie over het algoritme, bijvoorbeeld het besluit en onderbouwing waarom het niet meer wordt gebruikt en waarom het in het verleden wel gebruikt werd.  Archiveren is niet enkel relevant aan het einde van de levenscyclus, maar is ook gedurende het gebruik van het algoritme van belang.  Er moet tijdig worden vastgesteld welke versies van een model moeten worden gearchiveerd, bijvoorbeeld al tijdens de ontwerpfase. </p> <p>Bij AI-systemen is er in praktijk vaak sprake van hertrainen op nieuwe data, wat het model anders maakt en andere voorspellingen kan doen geven.  Ook meer eenvoudige algoritmes kunnen gedurende de tijd veranderen en andere voorspellingen geven, bijvoorbeeld door veranderende data of veranderende rekenregels.  Er moet worden vastgesteld welke versies van een model moet gearchiveerd. </p> <p>Bij uitfaseren wordt het algoritme verwijderd uit de productieomgeving en, na archivering, wordt de trainingsdata uit de ontwikkelomgeving verwijderd.  Het algoritme is hiermee niet meer te gebruiken door gebruikers.  Gebruikers moeten hier vooraf over worden ge\u00efnformeerd en waar passend, bijvoorbeeld bij impactvolle of hoog risico AI-systemen, worden betrokkenen ge\u00efnformeerd over het be\u00ebindigen van het gebruik. </p>"},{"location":"levenscyclus/verificatie-en-validatie/","title":"Verificatie en validatie","text":"<p>Bij de verificatie en validatie van het algoritme dient bepaald te worden of het algoritme gebouwd is volgens de (technische) specificaties en voldoet aan de beoogde doelstellingen.  Hiervoor moeten technische, maar ook organisatorische maatregelen worden getroffen.  </p> <p>Bij verificatie kan worden gedacht aan het (laten) controleren of het algoritme voldoet aan de (technische) specificaties, bijvoorbeeld door een interne of externe audit of in de toekomst een conformiteitsbeoordeling voor hoog risico AI-systemen.  Hiermee kan (onafhankelijk) worden vastgesteld of het systeem voldoet aan de vereisten die organisaties daaraan stellen.  Op basis van bevindingen uit een audit of conformiteitsbeoordeling, is het denkbaar dat het ontwikkelteam nog bepaalde maatregelen moet treffen om te voldoen aan de specificaties. </p> <p>Bij het valideren van een algoritme moet worden bepaald of het goed genoeg presteert en of het geschikt is voor het beoogde doel van het systeem.  Wanneer het een AI-systeem betreft, is het belangrijk dat dit gevalideerd wordt op nieuwe, niet eerder geziene data.  Het valideren betreft het iteratief evalueren van de nauwkeurigheid en prestaties van het systeem.  Daarnaast is het ook belangrijk om te valideren of het algoritme gelijke prestaties toont voor verschillende groepen en om te testen hoe het algoritme presteert in uitzonderlijke gevallen.  Het is net als in de ontwerpfase belangrijk dat een multidisciplinair team beoordeelt of de werking passend en bijvoorbeeld non-discriminatoir is.  In het geval van impactvolle algoritmen of hoog risico AI-systemen, is het raadzaam om een onafhankelijke commissie of partij te betrekken die een advies geeft over de werking van het algoritme of AI-systeem.  </p> <p>In praktijk zal vaak na validatie weer worden teruggegaan naar de ontwikkelfase om prestaties van het model te verbeteren voorafgaand aan implementatie van de oplossing.  Het is ook denkbaar dat het algoritme onvoldoende aansluit bij de doelstellingen en het gebruik ervan moet wordt be\u00ebindigd.  Een andere conclusie kan zijn dat het presteert conform verwachting en naar de implementatiefase kan worden gegaan.  </p>"},{"location":"onderwerpen/","title":"Onderwerpen","text":"<ul> <li> <p>Bias en non-discriminatie</p> <p>Hulp bij het voorkomen van bias en discriminatie in algoritmes. Met aanbevelingen en hulpmiddelen zoals het toetsingskader van het College voor de Rechten van de Mens.</p> </li> <li> <p>Data</p> <p>Hulp bij het verantwoord selecteren en verwerken van data voor je algoritmes. Gebruik bijvoorbeeld de toolbox verantwoord datagebruik.</p> </li> <li> <p>Duurzaamheid</p> <p>Hulp bij het maken van duurzame keuzes voor hardware en software. Bijvoorbeeld voor de aanschaf van apparaten of het energieverbruik van trainen en data-opslag.</p> </li> <li> <p>Governance</p> <p>Hulp bij het verantwoordelijk omgaan met algoritmes. Bijvoorbeeld het vastleggen van rollen en verantwoordelijkheden.</p> </li> <li> <p>Grondrechten</p> <p>Hulp bij het beschermen van grondrechten en mensenrechten in algoritmes. Bijvoorbeeld het beoordelen van de gevolgen per grondrecht.</p> </li> <li> <p>Menselijke controle</p> <p>Hulp bij de controle als mens over algoritmes. Bijvoorbeeld kunnen ingrijpen bij onbetrouwbare resultaten.</p> </li> <li> <p>Privacy en gegevensbescherming</p> <p>Hulp bij verantwoord gebruik van gegevens voor algoritmes, zoals persoonsgegevens en privacygevoelige gegevens.</p> </li> <li> <p>Publieke inkoop</p> <p>Hulp bij het publiek inkopen van software met algoritmen en AI. Met hulpmiddelen zoals modelcontracten en de PIANOo-handreiking Inkoop van algoritmes.</p> </li> <li> <p>Technische robuustheid en veiligheid</p> <p>Hulp bij het bewaken van de prestaties van algoritmes. En beveiliging van de systemen tegen bijvoorbeeld cyberaanvallen.</p> </li> <li> <p>Transparantie</p> <p>Hulp bij transparant zijn over algoritmes, zoals gebruikers informeren en publiceren in het algoritmeregister.</p> </li> </ul>"},{"location":"onderwerpen/bias-en-non-discriminatie/","title":"Bias en non-discriminatie","text":"<p>Algoritmes worden binnen de overheid veelvuldig ingezet om publieke taken uit te voeren. Dit biedt veel kansen, maar er zijn ook risico's aan verbonden. Hoewel algoritmes in sommige gevallen kunnen bijdragen aan het tegengaan van discriminatie, kan bias in het algoritme leiden tot een ongelijke en oneerlijke behandeling van burgers of groepen, en kan er sprake zijn van discriminerende effecten.  In dit bouwblok van het algoritmekader besteden we aandacht aan de onderwerpen bias, eerlijkheid en non-discriminatie.  We werken uit wat bias is, hoe bias kan ontstaan, hoe we dit kunnen signaleren, welke maatregelen er genomen kunnen worden om dit te voorkomen en geven we handvatten wat te doen wanneer een (onwenselijke) bias is gesignaleerd. </p> <p>Hierbij is het goed om op te merken dat het omgaan met het thema bias gedurende het ontwikkelen, inkopen of gebruik van het algoritme vraagt om continue aandacht voor dit onderwerp.  Het betreft geen probleem dat eenmalig kan worden weggenomen. Het vraagt voortdurend om reflectie op eerlijkheid en rechtvaardigheid van het systeem. </p> <p>Dit bouwblok wordt uitgewerkt in vereisten die weergeven wat er vanuit wet- en regelgeving en bestaande toetsingskaders vereist is om bias en discriminatie tegen te gaan.  Daarbij worden er suggesties gedaan hoe deze vereisten kunnen worden nageleefd met concrete maatregelen, en welke actoren daarbij betrokken kunnen zijn.  Waar mogelijk worden concrete voorbeelden en best practices uit de praktijk gegeven en zal worden aangegeven bij welk type algoritmen of AI dit relevant is. Deze vereisten en maatregelen worden ook gekoppeld aan de algoritme levenscyclus.  Dit geeft een beeld van wanneer bepaalde vereisten of maatregelen, bij het ontwikkelen van algoritmen en AI, moeten worden geadresseerd.   </p> <p>Door bij de ontwikkeling van algoritmes rekening te houden met vereisten die voorkomen uit wet- en regelgeving, het type algoritme of AI en de potenti\u00eble risico\u2019s die ontstaan bij het gebruiken ervan, kunnen negatieve gevolgen worden voorkomen. </p> <p>De onderwerpen bias en non-discriminatie spelen daarom een belangrijke rol bij de totstandkoming van verantwoord ontwikkelde algoritmen en AI en het gebruik daarvan door ambtenaren. </p>"},{"location":"onderwerpen/bias-en-non-discriminatie/#wat-is-discriminatie-en-bias","title":"Wat is discriminatie en bias?","text":""},{"location":"onderwerpen/bias-en-non-discriminatie/#discriminatie","title":"Discriminatie","text":"<p>Artikel 1 van de Nederlandse Grondwet verbiedt discriminatie: </p> <p>Allen die zich in Nederland bevinden, worden in gelijke gevallen gelijk behandeld. Discriminatie wegens godsdienst, levensovertuiging, politieke gezindheid, ras, geslacht, handicap, seksuele gerichtheid of op welke grond dan ook, is niet toegestaan. </p> <p>De prominente positie in de Grondwet benadrukt het belang van het mensenrecht in Nederland.  De afgelopen jaren hebben incidenten in de praktijk de aandacht gericht op de discriminatoire effecten die algoritmes kunnen hebben.</p>"},{"location":"onderwerpen/bias-en-non-discriminatie/#bias","title":"Bias","text":"<p>Bias is een Engelse term die in het Nederlands wordt vertaald als vooroordeel, vooringenomenheid of neiging.  Omdat niet \u00e9\u00e9n van die termen helemaal de lading van het begrip bias dekt, maken we in het Algoritmekader gebruik van de term bias.  De term bias heeft verschillende betekenissen afhankelijk van de context waarin het gebruikt wordt en de disciplines die daarbij betrokken zijn.  Vaak wordt er naar bias gekeken als een technisch concept, maar het omvat daarnaast ook menselijke aspecten.  We starten met een verduidelijking hoe het begrip bias in algoritmische context gebruikt wordt en hoe dit in verhouding staat tot discriminatie.  Vervolgens maken we onderscheid tussen drie verschillende aspecten van bias: statistische bias, systemische bias en menselijke bias.  Deze drie aspecten van bias kunnen los van elkaar bestaan, maar kunnen juist in combinatie met elkaar tot problemen leiden. </p>"},{"location":"onderwerpen/bias-en-non-discriminatie/#bias-in-algoritmische-context","title":"Bias in algoritmische context","text":"<p>Het concept bias wordt in algoritmische context gedefinieerd als een systematisch verschil in behandeling van bepaalde objecten, mensen of groepen in vergelijking met anderen.<sup>1</sup></p> <p>Dit systematische verschil of onderscheid kan zowel op een directe als op een indirecte manier ontstaan. </p> <p>De Algemene wet gelijke behandeling spreekt van direct onderscheid wanneer een persoon op een andere wijze wordt behandeld dan een ander in een vergelijkbare situatie wordt, is of zou worden behandeld, op grond van godsdienst, levensovertuiging, politieke gezindheid, ras, geslacht, nationaliteit, hetero- of homoseksuele gerichtheid <sup>2</sup> of burgerlijke staat.</p> <p>De Algemene wet gelijke behandeling spreekt van indirect onderscheid indien een ogenschijnlijk neutrale bepaling, maatstaf of handelwijze personen met een bepaalde godsdienst, levensovertuiging, politieke gezindheid, ras, geslacht, nationaliteit, hetero- of homoseksuele gerichtheid <sup>2</sup> of burgerlijke staat in vergelijking met andere personen bijzonder treft. </p> <p>Een geconstateerd systematische onderscheid is niet altijd fout en is niet altijd verboden, maar het vraagt wel altijd om aandacht en zorgvuldigheid.  Het geconstateerde onderscheid kan in bepaalde situaties en onder bepaalde strikte voorwaarden gerechtvaardigd zijn.  Voor direct onderscheid kan er bijvoorbeeld sprake zijn van een wettelijke uitzondering die het gemaakte onderscheid toelaat.  Voor indirect onderscheid geldt dat behalve een wettelijke uitzondering er ook een objectieve rechtvaardiging kan bestaan, waarmee het geconstateerde onderscheid in bepaalde gevallen toelaatbaar kan zijn. </p> <p>Het maken van een eventueel onderscheid is in sommige gevallen nauw verbonden met het gebruik van algoritmes.  Soms worden algoritmes en AI bijvoorbeeld juist ingezet om op een zo objectief mogelijke manier te bepalen welke groepen meer of minder belang hebben bij een andere behandeling.  In deze gevallen zal er altijd na moeten worden gegaan of er sprake is van een objectieve rechtvaardiging voor het gemaakte onderscheid.</p> <p>Wanneer er geen rechtvaardiging is voor het gemaakte onderscheid, spreken we van een verboden direct of indirect onderscheid, ofwel discriminatie.  Het algoritme of AI-systeem mag in dat geval niet gebruikt worden. Bias vormt daarmee een risico op discriminatie.</p>"},{"location":"onderwerpen/bias-en-non-discriminatie/#fairness","title":"Fairness","text":"<p>In de context van algoritmes wordt de term unfairness gebruikt wanneer er sprake is van een ongerechtvaardigd onderscheid waarbij bepaalde groepen meer bevoordeeld worden dan andere.<sup>3</sup>  In de Nederlandse taal spreken we dan van oneerlijkheid of onrechtvaardigheid (of in positieve zin van respectievelijk fairness, eerlijkheid en rechtvaardigheid).  Wanneer we het hebben over fairness hebben we het minder over de juridische kant van discriminatie en verboden onderscheid.  Ook als er wel een objectieve rechtvaardiging bestaat voor een gemaakt onderscheid, kan afgevraagd worden of het gemaakte onderscheid ethisch wenselijk is. </p>"},{"location":"onderwerpen/bias-en-non-discriminatie/#statistische-bias","title":"Statistische bias","text":"<p>Statistische bias wordt gedefinieerd als een consistente numerieke afwijking van een schatting ten opzichte van de werkelijke onderliggende waarde.<sup>1</sup> Dit fenomeen kan in allerlei verschillende contexten plaatsvinden, niet alleen bij het gebruik van algoritmes.  Een voorbeeld is wanneer een bepaalde meting van een waarde niet goed gekalibreerd is en er sprake is van een consistente afwijking van de te meten waarde (bijvoorbeeld dat we consistent 10% hoger meten). </p> <p>In de context van algoritmes kan deze vorm van bias voorkomen wanneer er een steekproef wordt gebruikt die niet representatief is voor de populatie, en de schattingen op basis van de steekproef vervolgens systematisch afwijken van de werkelijke waarde in de gebruikte doelpopulatie. Statistische bias duidt op een systematische fout die gemaakt wordt door het algoritme.  Deze fout kan hetzelfde zijn voor alle groepen en hoeft daardoor niet in alle gevallen te duiden op ongelijke behandeling of discriminerende effecten.  Voorbeelden van statistische bias zijn meetfouten (measurement bias), foute data of data op een te simpele manier representeren (representatie bias).</p>"},{"location":"onderwerpen/bias-en-non-discriminatie/#systemische-bias","title":"Systemische bias","text":"<p>We spreken van systemische bias wanneer bepaalde processen of systemen op zo'n wijze worden gebruikt dat bepaalde groepen bevoordeeld worden en andere groepen benadeeld worden. Dit is vaak geen bewuste vorm van vooringenomenheid, maar kan bijvoorbeeld ontstaan doordat de meerderheid bestaande regels of normen volgt, en het systeem geoptimaliseerd is op de meerderheid. Systemische bias heeft een sterk institutioneel karakter. Systemische bias wordt daarom ook wel institutionele vooringenomenheid genoemd.  Deze vooroordelen zijn vaak verweven in de bredere cultuur en samenleving, en zitten daardoor ook in veel datasets.  Een veel voorkomend voorbeeld van systemische bias is historische bias. </p>"},{"location":"onderwerpen/bias-en-non-discriminatie/#menselijke-bias","title":"Menselijke bias","text":"<p>Menselijke bias omvat systematische fouten in het menselijk denken.  Deze (onbewuste) menselijke vooroordelen zijn vaak impliciet van aard en hebben betrekking op de manier waarop een individu bepaalde informatie waarneemt en verwerkt om bijvoorbeeld een beslissing te nemen.  In de context van algoritmes kan deze vorm van bias invloed hebben op de verzamelde data, op de wijze waarop het algoritme wordt geoptimaliseerd en de besluiten die door mensen worden genomen op basis van het algoritme. Voorbeelden van vormen menselijke bias zijn wanneer er voorkeur wordt geven aan de voorspellingen van een algoritme die reeds bestaande overtuigingen bevestigen (bevestigingsbias), of wanneer mensen de neiging hebben om voorkeur te geven aan suggesties die door het algoritme worden gedaan (automatiseringsbias)</p>"},{"location":"onderwerpen/bias-en-non-discriminatie/#overzicht-van-gebruikte-definities","title":"Overzicht van gebruikte definities","text":"<p>Onderstaand bieden we een overzicht van de gebruikte definities in het algoritmekader die betrekking hebben op het onderwerp bias en non-discriminatie. </p> Term of begrip Definitie Bron direct onderscheid indien een persoon op een andere wijze wordt behandeld dan een ander in een vergelijkbare situatie wordt, is of zou worden behandeld, op grond van godsdienst, levensovertuiging, politieke gezindheid, ras, geslacht, nationaliteit, hetero- of homoseksuele gerichtheid<sup>2</sup> of burgerlijke staat Algemene wet gelijke behandeling indirect onderscheid indien een ogenschijnlijk neutrale bepaling, maatstaf of handelwijze personen met een bepaalde godsdienst, levensovertuiging, politieke gezindheid, ras, geslacht, nationaliteit, hetero- of homoseksuele gerichtheid<sup>2</sup> of burgerlijke staat in vergelijking met andere personen bijzonder treft. Algemene wet gelijke behandeling discriminatie mensen anders behandelen, achterstellen of uitsluiten op basis van (persoonlijke) kenmerken. College voor de rechten van de mens directe discriminatie de ongelijke behandeling van een persoon of groep personen ten opzichte van andere personen in een vergelijkbare situatie, op grond van een beschermd persoonskenmerk (discriminatiegrond). College voor de rechten van de mens, Discriminatie door risicoprofielen - een mensenrechtelijk toetsingskader indirecte discriminatie wanneer een ogenschijnlijk neutrale bepaling, maatstaf of handelwijze personen met een bepaald beschermd persoonskenmerk (discriminatiegrond) in vergelijking met andere personen in het bijzonder benadeelt, tenzij hiervoor een objectieve rechtvaardiging bestaat. College voor de rechten van de mens, Discriminatie door risicoprofielen - een mensenrechtelijk toetsingskader algoritmische fairness het vakgebied dat bestudeert hoe algoritmische systemen zich moeten gedragen om mensen eerlijk te behandelen, dat wil zeggen zonder discriminatie op grond van beschermde gevoelige kenmerken zoals leeftijd, geslacht, handicap, etnische of raciale afkomst, religie of geloofsovertuiging, of seksuele geaardheid The fairness handbook ground truth (NL vertaling?) waarde van de doelvariabele voor een bepaald item van gelabelde invoergegevens. <sup>5</sup> NEN-EN-ISO/IEC 22989:2023 en <sup>4</sup> etnisch profileren Het gebruik door overheidsinstanties van selectiecriteria als ras, huidskleur, taal, religie, nationaliteit of nationale of etnische afkomst bij de uitoefening van toezichts-, handhavings- en opsporingsbevoegdheden, zonder dat daarvoor een objectieve en redelijke rechtvaardiging bestaat. College voor de rechten van de mens, Discriminatie door risicoprofielen - een mensenrechtelijk toetsingskader discriminatiegrond Beschermde persoonskenmerken op basis waarvan het maken van onderscheid tussen personen verboden is. Bijvoorbeeld: ras, nationaliteit, religie, geslacht, seksuele gerichtheid, handicap of chronische ziekte College voor de rechten van de mens, Discriminatie door risicoprofielen - een mensenrechtelijk toetsingskader risicoprofiel Een verzameling van \u00e9\u00e9n of meer selectiecriteria op basis waarvan een bepaald risico op normovertreding wordt ingeschat en een selectiebeslissing wordt gemaakt. College voor de rechten van de mens, Discriminatie door risicoprofielen - een mensenrechtelijk toetsingskader groep deelverzameling van objecten in een domein die zijn gekoppeld omdat ze gemeenschappelijke kenmerken hebben. ISO/IEC TR 24027:2021 en <sup>4</sup>"},{"location":"onderwerpen/bias-en-non-discriminatie/#verschillende-vormen-van-bias","title":"Verschillende vormen van bias","text":"<p>Omdat bias op verschillende manieren kan ontstaan, zijn er allerlei verschillende vormen van bias, die hieronder gedefinieerd worden. Deze lijst is niet uitputtend. </p> Begrip Definitie Bron automatiseringsbias de neiging van mensen om de voorkeur te geven aan suggesties van geautomatiseerde besluitvormingssystemen en om tegenstrijdige informatie te negeren die zonder automatisering is verkregen, zelfs als deze correct is ISO/IEC TR 24027:2021 en <sup>4</sup> data bias dataeigenschappen die, als ze niet worden aangepakt, leiden tot AI-systemen die beter of slechter presteren voor verschillende groepen ISO/IEC TR 24027:2021 en <sup>4</sup> statistische bias soort consistente numerieke afwijking in een schatting ten opzichte van de werkelijke onderliggende waarde, inherent aan de meeste schattingen ISO/IEC TR 24027:2021 en <sup>4</sup> historische bias verwijzend naar de langdurige vooroordelen die in de loop der tijd in de samenleving zijn gecodeerd. Verwant aan, maar verschillend van, vooroordelen in historische beschrijving, of de interpretatie, analyse en verklaring van de geschiedenis. Een veel voorkomend voorbeeld van historische vooringenomenheid is de neiging om de wereld te bekijken vanuit een Westers of Europees perspectief NIST, Towards a Standard for identifying and managing bias in artificial intelligence activiteitenbias een soort selectievooroordeel dat optreedt wanneer systemen/platforms hun trainingsgegevens krijgen van de meest actieve gebruikers, in plaats van minder actieve (of inactieve) gebruikers. NIST, Towards a Standard for identifying and managing bias in artificial intelligence versterkingsbias ontstaat wanneer de verdeling over voorspellingsoutputs scheef is in vergelijking met de prior-verdeling van het voorspellingsdoel. NIST, Towards a Standard for identifying and managing bias in artificial intelligence cognitieve bias een brede term die in het algemeen verwijst naar een systematisch patroon van afwijking van rationele oordeels- en besluitvorming. In vele decennia van onderzoek naar oordeelsvorming en besluitvorming is een grote verscheidenheid aan cognitieve vertekeningen ge\u00efdentificeerd, waarvan sommige adaptieve mentale snelkoppelingen zijn die bekend staan als heuristieken. NIST, Towards a Standard for identifying and managing bias in artificial intelligence bevestigingsbias soort menselijke cognitieve bias die de voorkeur geeft aan voorspellingen van AI-systemen die reeds bestaande overtuigingen of hypotheses bevestigen ISO/IEC TR 24027:2021 en <sup>4</sup> implementatie bias ontstaat wanneer systemen worden gebruikt als beslissingshulp voor mensen, omdat de menselijke tussenpersoon kan handelen op voorspellingen op manieren die meestal niet zijn gemodelleerd in het systeem. Het zijn echter nog steeds individuen die het gebruikte systeem gebruiken NIST, Towards a Standard for identifying and managing bias in artificial intelligence evaluatie bias ontstaat wanneer de test- of externe benchmarkpopulaties niet in gelijke mate de verschillende delen van de gebruikerspopulatie vertegenwoordigen of door het gebruik van prestatiemaatstaven die niet geschikt zijn voor de manier waarop het model zal worden gebruikt NIST, Towards a Standard for identifying and managing bias in artificial intelligence meetbias ontstaat wanneer kenmerken en labels benaderingen zijn voor gewenste grootheden, waarbij mogelijk belangrijke factoren worden weggelaten of groeps- of ingangsafhankelijke ruis wordt ge\u00efntroduceerd die leidt tot differenti\u00eble prestaties. NIST, Towards a Standard for identifying and managing bias in artificial intelligence representatie bias ontstaat doordat subgroepen niet willekeurig worden geselecteerd in een steekproef, waardoor trends die voor \u00e9\u00e9n populatie worden geschat, niet generaliseerbaar zijn naar gegevens van een nieuwe populatie NIST, Towards a Standard for identifying and managing bias in artificial intelligence"},{"location":"onderwerpen/bias-en-non-discriminatie/#discriminatiegrond","title":"Discriminatiegrond","text":"<p>De discriminatiegrond beschrijft de beschermde persoonskenmerken op basis waarvan het maken van onderscheid tussen personen verboden is. Deze gronden zijn in verschillende bronnen vastgelegd. </p>"},{"location":"onderwerpen/bias-en-non-discriminatie/#de-grondwet","title":"De grondwet","text":"<p>De Grondwet stelt dat discriminatie wegens:</p> <ul> <li>godsdienst </li> <li>levensovertuiging </li> <li>politieke gezindheid </li> <li>ras </li> <li>geslacht </li> <li>handicap</li> <li>seksuele gerichtheid</li> <li>of op welke grond dan ook</li> </ul> <p>niet is toegestaan. </p>"},{"location":"onderwerpen/bias-en-non-discriminatie/#de-algemene-wet-gelijke-behandeling","title":"De Algemene wet gelijke behandeling","text":"<p>De Algemene wet gelijke behandeling legt een verbod onderscheid neer op grond van:</p> <ul> <li>godsdienst</li> <li>levensovertuiging</li> <li>politieke gezindheid</li> <li>ras</li> <li>geslacht</li> <li>nationaliteit</li> <li>hetero- of homoseksuele gerichtheid <sup>2</sup></li> <li>of burgelijke staat. </li> </ul> <p>Het in deze wet neergelegde verbod van onderscheid geldt niet ten aanzien van indirect onderscheid indien dat onderscheid objectief gerechtvaardigd wordt door een legitiem doel en de middelen voor het bereiken van dat doel passend en noodzakelijk zijn.</p>"},{"location":"onderwerpen/bias-en-non-discriminatie/#europees-verdrag-voor-de-rechten-van-de-mens","title":"Europees Verdrag voor de Rechten van de Mens","text":"<p>Het Europees Verdrag voor de Rechten van de Mens, artikel 14 stelt dat het genot van de rechten en vrijheden die in dat verdrag zijn vermeld, moet worden verzekerd zonder enig onderscheid op welke grond dan ook, zoals:</p> <ul> <li>geslacht</li> <li>ras</li> <li>kleur</li> <li>taal</li> <li>godsdienst</li> <li>politieke of andere mening</li> <li>nationale of maatschappelijke afkomst</li> <li>het behoren tot een nationale minderheid</li> <li>vermogen</li> <li>geboorte</li> <li>of andere status. </li> </ul>"},{"location":"onderwerpen/bias-en-non-discriminatie/#handvest-van-de-grondrechten-van-de-europese-unie","title":"Handvest van de grondrechten van de Europese Unie","text":"<p>Het Handvest van de grondrechten van de Europese Unie, artikel 21 stelt dat iedere discriminatie, met name op grond van:</p> <ul> <li>geslacht</li> <li>ras</li> <li>kleur</li> <li>etnische of sociale afkomst</li> <li>genetische kenmerken</li> <li>taal</li> <li>godsdienst</li> <li>politieke of andere denkbeelden</li> <li>het behoren tot een nationale minderheid</li> <li>vermogen</li> <li>geboorte</li> <li>een handicap</li> <li>leeftijd</li> <li>of seksuele gerichtheid</li> </ul> <p>is verboden. Daarnaast wordt expliciet vermeld dat binnen de werkingssfeer van de Verdragen en onverminderd de bijzondere bepalingen ervan, iedere discriminatie op grond van nationaliteit verboden is.</p> <p>Disclaimer</p> <p>Het Algoritmekader is nog volop in ontwikkeling. Op deze plek willen we vooral aan de slag gaan op een open en transparante wijze. Het is dus niet definitief. Dat betekent dat er dingen opstaan die niet af zijn en soms zelfs fout. Mocht er iets niet kloppen, laat het ons weten via GitHub.</p>"},{"location":"onderwerpen/bias-en-non-discriminatie/#mogelijke-hulpmiddelen-en-methoden","title":"Mogelijke hulpmiddelen en methoden","text":"HulpmiddelenThe Fairness HandbookHandreiking non-discriminatie by designDiscriminatie door risicoprofielen - Een mensenrechtelijk toetsingskader <ol> <li> <p>Zie ISO/IEC TR 24027:2021 en <sup>4</sup> \u21a9\u21a9</p> </li> <li> <p>Er is een wetsvoorstel om de term 'hetero- of homoseksuele gerichtheid' in de Algmemene wet gelijke behandeling (Awgb) te wijzigingen in 'seksuele gerichtheid'.  Met deze wijziging sluit de Awgb aan bij een eerdere wijziging van artikel 1 van de Grondwet.\u00a0\u21a9\u21a9\u21a9\u21a9\u21a9</p> </li> <li> <p>Zie NEN-EN-ISO/IEC 22989:2023 en <sup>4</sup> \u21a9</p> </li> <li> <p>Hoewel het gebruik van de NEN-ISO-normen in het Algoritmekader auteursrechtelijk is beschermd, heeft het Nederlands Normalisatie Instituut (NEN) voor het gebruik in het Algoritmekader toestemming verleend. Zie nen.nl voor meer informatie over NEN en het gebruik van hun producten.\u00a0\u21a9\u21a9\u21a9\u21a9\u21a9\u21a9\u21a9\u21a9</p> </li> <li> <p>De term ground truth impliceert niet dat de gelabelde invoergegevens consistent overeenkomen met de werkelijke waarde van de doelvariabelen.\u00a0\u21a9</p> </li> </ol>"},{"location":"onderwerpen/data/","title":"Verantwoord datagebruik","text":"<p>Overheden moeten verantwoord omgaan met de data die hun algoritmes gebruiken. De data moet voldoen aan regels voor bijvoorbeeld privacy. De kwaliteit van de data moet goed zijn. En overheden moeten deze gegevens goed beheren. Anders is het algoritme niet betrouwbaar.  </p>"},{"location":"onderwerpen/data/#wat-is-verantwoord-datagebruik","title":"Wat is verantwoord datagebruik?","text":"<p>Verantwoord datagebruik betekent:</p> <ul> <li>Rechtmatig gebruik van gegevens </li> <li>Goede datakwaliteit</li> <li>Goed databeheer</li> </ul>"},{"location":"onderwerpen/data/#rechtmatig-gebruik-van-data","title":"Rechtmatig gebruik van data","text":"<p>Net als organisaties mogen algoritmes niet zomaar gegevens verzamelen en gebruiken. Dit moet rechtmatig gebeuren: volgens de wettelijke regels. Zo moet je rekening houden met auteursrechten. Ook v\u00f3\u00f3rdat het algoritme in gebruik is, moet je rechtmatig omgaan met data. Dus tijdens het trainen, valideren en testen.</p> <p>Andere belangrijke regels gaan over privacy. Zo mag je algoritme alleen de minimale persoonsgegevens gebruiken die nodig zijn om het doel te bereiken. Technieken om dit te doen zijn:</p> <ul> <li>Anonimiseren: data zoveel mogelijk anoniem maken</li> <li>Pseudonimiseren: data moeilijker herleidbaar maken naar personen</li> <li>Aggregeren: data zoveel mogelijk combineren of samenvoegen tot 1 waarde, zoals een totaal of gemiddelde </li> </ul>"},{"location":"onderwerpen/data/#goede-datakwaliteit","title":"Goede datakwaliteit","text":"<p>Hoe slechter de datakwaliteit, hoe onbetrouwbaarder de uitkomsten van je algoritme. </p> <p>Je bepaalt en controleert zelf de kwaliteit van je dataset. Check bijvoorbeeld of alle gegevens juist, compleet en actueel zijn. En herken bias in je data.</p>"},{"location":"onderwerpen/data/#goed-databeheer-datagovernance-en-datamanagement","title":"Goed databeheer: datagovernance en datamanagement","text":"<p>Goed databeheer betekent dat je organisatie duidelijke afspraken maakt over het:</p> <ul> <li>opslaan en verwerken van data </li> <li>gebruik van data: welke data mag je waarvoor gebruiken? </li> <li>beveiligen van data</li> <li>bewaken van de datakwaliteit, zoals het actueel houden van de gegevens</li> <li>eigenaarschap van data, bijvoorbeeld de partij die het algoritme ontwikkelt</li> <li>documenteren en labelen van data (metadata)</li> </ul> <p>Leg de processen en afspraken hierover vast in de datagovernance van je organisatie. In een datamanagementstrategie beschrijf je hoe je organisatie data verzamelt, ordent en gebruikt. Zo kan je organisatie optimaal gebruikmaken van data. </p> <p>Hoe goed je organisatie data beheert, check je met datavolwassenheidsmodellen uit de Toolbox verantwoord datagebruik van de Interbestuurlijke Datastrategie (IBDS). Of gebruik de beslishulp datavolwassenheid. </p>"},{"location":"onderwerpen/data/#belang-van-verantwoord-datagebruik","title":"Belang van verantwoord datagebruik","text":"<p>Algoritmes kunnen veel schade veroorzaken in de maatschappij als ze de verkeerde gegevens gebruiken.</p> <p>Met verantwoord datagebruik voorkom je:</p> <ul> <li>verkeerde beslissingen doordat je algoritme resultaten baseert op data van slechte kwaliteit</li> <li>discriminerende effecten van algoritmes doordat je data bias bevat</li> <li>lekken van privacygevoelige informatie, zoals persoonsgegevens</li> <li>gebruik van data die niet rechtenvrij zijn, zoals teksten met auteursrechten</li> <li>dat resultaten niet te reproduceren zijn, doordat de data niet goed is opgeslagen</li> </ul>"},{"location":"onderwerpen/data/#hulpmiddelen","title":"Hulpmiddelen","text":"<ul> <li>Toolbox verantwoord datagebruik, Interbestuurlijke Datastrategie (IBDS)</li> <li>Richtlijnen voor \u2018FAIR\u2019 data, GO FAIR Foundation</li> </ul>"},{"location":"onderwerpen/duurzaamheid/","title":"Duurzaam werken met algoritmes","text":"<p>Overheden moeten duurzaam werken met hun ICT, zoals algoritmes. Dit betekent dat je algoritmes inkoopt, ontwikkelt en gebruikt op een manier die vriendelijk is voor mens en milieu. </p>"},{"location":"onderwerpen/duurzaamheid/#wat-is-duurzaam-werken-met-algoritmes","title":"Wat is duurzaam werken met algoritmes?","text":"<p>Je werkt duurzaam met algoritmes als je tijdens de hele levenscyclus keuzes maakt die passen bij de duurzame en sociale doelen van de overheid:</p> <ul> <li>klimaatneutraal werken in 2030</li> <li>50% minder gebruik van grondstoffen direct uit de natuur (zoals olie, gas en lithium) in 2030</li> <li>circulair werken in 2050: zonder afval, met alleen hergebruikte grondstoffen</li> <li>meer banen voor mensen met een arbeidsbeperking</li> <li>geen sociale misstanden in internationale productieketens, zoals slechte arbeidsomstandigheden of schending van mensenrechten</li> </ul> <p>Om bij te dragen aan deze doelen, kies je bijvoorbeeld voor:</p> <ul> <li>energiezuinig programmeren</li> <li>energiezuinig trainen van AI-systemen</li> <li>dataopslag in een duurzaam of \u2018groen\u2019 datacenter</li> </ul>"},{"location":"onderwerpen/duurzaamheid/#belang-van-duurzaam-werken","title":"Belang van duurzaam werken","text":"<p>Algoritmes kunnen veel impact hebben op het milieu. De rekenkracht die algoritmes nodig hebben op computers kost elektriciteit. En de datacenters die nodig zijn voor het opslaan van data, verbruiken veel energie, water en grondstoffen. Vooral complexe AI-systemen zoals Large Language Models (LLM\u2019s) verbruiken veel energie door training en gebruik en door opslag van grote datasets in datacenters. </p>"},{"location":"onderwerpen/duurzaamheid/#help-ons-deze-pagina-te-verbeteren","title":"Help ons deze pagina te verbeteren","text":"<p>Deel je idee, suggestie of opmerking via GitHub of mail ons via algoritmes@minbzk.nl.</p>"},{"location":"onderwerpen/fundamentele-rechten/","title":"Grondrechten beschermen in algoritmes","text":"<p>Als overheid moet je de grondrechten van burgers beschermen. Dit geldt ook als je algoritmes gebruikt voor publieke taken.</p>"},{"location":"onderwerpen/fundamentele-rechten/#wat-is-het-beschermen-van-grondrechten-in-algoritmes","title":"Wat is het beschermen van grondrechten in algoritmes?","text":"<p>Dit betekent dat je tijdens het ontwikkelen en gebruiken van algoritmes rekening houdt met de fundamentele rechten van de mens:</p> <ul> <li>grondrechten uit de Grondwet</li> <li>mensenrechtenverdragen zoals het Europees Verdrag tot bescherming van de rechten van de mens en de fundamentele vrijheden (EVRM).</li> </ul>"},{"location":"onderwerpen/fundamentele-rechten/#belang-van-grondrechten-beschermen","title":"Belang van grondrechten beschermen","text":"<p>Algoritmes kunnen grondrechten schenden. Een bekend probleem is bias in algoritmes. Hierdoor worden resultaten onbetrouwbaar en kun je mensen ongelijk behandelen.</p> <p>Belangrijke grondrechten die vaak worden geraakt door algoritmen zijn bijvoorbeeld:</p> <ul> <li>recht op persoonsgegevensbescherming</li> <li>verbod op ongelijke behandeling</li> <li>recht op eerbiediging van de persoonlijke levenssfeer</li> </ul> <p>Als overheid moet je hier goed op letten. Doe dit zo vroeg mogelijk in de levenscyclus. De maatregelen die we adviseren, beginnen al bij het ontwerpen en trainen van algoritmes.</p>"},{"location":"onderwerpen/fundamentele-rechten/#aanbevolen-maatregelen","title":"Aanbevolen maatregelen","text":"idMaatregelenpba-04Overleg regelmatig met belanghebbendenowp-06Inventariseer welke grondrechten het algoritme kan schenden en maak een belangenafwegingowp-07Maak een lijst van de meest kwetsbare groepen en bescherm hen extra"},{"location":"onderwerpen/fundamentele-rechten/#hulpmiddelen","title":"Hulpmiddelen","text":"HulpmiddelenAssessment List for Trustworthy Artificial Intelligence (ALTAI)De Ethische Data AssistentImpact Assessment Mensenrechten en AlgoritmesThe Fairness HandbookFramework for Meaningful EngagementHandreiking non-discriminatie by designDiscriminatie door risicoprofielen - Een mensenrechtelijk toetsingskader"},{"location":"onderwerpen/fundamentele-rechten/#help-ons-deze-pagina-te-verbeteren","title":"Help ons deze pagina te verbeteren","text":"<p>Deel je idee, suggestie of opmerking via GitHub of mail ons via algoritmes@minbzk.nl.</p>"},{"location":"onderwerpen/governance/","title":"Governance van algoritmes binnen je organisatie","text":"<p>Zorg voor effectieve governance van je algoritmes. Dit is het beleid van je organisatie voor het verantwoordelijk omgaan met algoritmes en AI-systemen. Leg bijvoorbeeld vast wie waarvoor verantwoordelijk is.</p>"},{"location":"onderwerpen/governance/#wat-is-governance-van-algoritmes-binnen-je-organisatie","title":"Wat is governance van algoritmes binnen je organisatie?","text":"<p>Algoritme-governance is de manier waarop je organisatie omgaat met algoritmes en AI-systemen. Je maakt duidelijke afspraken over processen, regels en verantwoordelijkheden. </p> <p>Deze afspraken maak je op 2 niveaus:</p>"},{"location":"onderwerpen/governance/#organisatieniveau","title":"Organisatieniveau","text":"<p>Hoe de organisatie met algoritmes in het algemeen omgaat, bijvoorbeeld:</p> <ul> <li>richtlijnen en gedragscode voor medewerkers</li> <li>strategie en visie</li> <li>werkwijze</li> <li>teamleden en hun verantwoordelijkheden, zoals chief data officers en algoritmefunctionarissen</li> </ul>"},{"location":"onderwerpen/governance/#toepassingsniveau","title":"Toepassingsniveau","text":"<p>Dit zijn afspraken over het beheer van de algoritmes zelf, bijvoorbeeld:</p> <ul> <li>best practices</li> <li>multidisciplinair ontwikkelen</li> <li>AI-levenscyclusmodellen</li> </ul>"},{"location":"onderwerpen/governance/#belang-van-algoritme-governance","title":"Belang van algoritme-governance","text":"<p>Zonder governance verlies je grip op het inkopen, ontwikkelen, gebruiken en uitfaseren van algoritmes en AI. Dit vergroot het risico op overtredingen van wetten en regels zoals de AI-verordening, Grondwet, Algemene Verordening Gegevensbescherming (AVG) en Auteurswet. </p> <p>Goede governance van algoritmes helpt bij het:</p> <ul> <li>correct uitvoeren van wetten en regels</li> <li>toepassen van je eigen strategie, doelstellingen en publieke waarden</li> </ul>"},{"location":"onderwerpen/governance/#aanpak-algoritme-governance","title":"Aanpak algoritme-governance","text":"<p>Algoritme-governance bepaal je zelf als organisatie. </p> <p>Houd in elk geval rekening met:</p> <ul> <li>organisatieverantwoordelijkheden: de minimale voorwaarden om te starten met algoritmes</li> <li>levenscyclus van algoritmes: waar je per fase op moet letten</li> </ul> <p>[!TIP] Zorg dat iemand verantwoordelijk is voor algoritme-governance. En betrek stakeholders.</p>"},{"location":"onderwerpen/governance/#vereisten","title":"Vereisten","text":"idVereistenaia-01Personeel en gebruikers zijn voldoende AI-geletterdaia-01Verboden AI-systemen mogen niet worden gebruikt.aia-02Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerdaia-03Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteemaia-11Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteemaia-14Hoog-risico-AI-systemen worden pas geleverd of gebruikt na een conformiteitsbeoordelingsprocedureaia-15Hoog-risico-AI-systemen zijn voorzien van een EU-conformiteitsverklaringaia-17Hoog-risico-AI-systemen zijn geregistreerd in de EU-databankaia-20Hoog-risico-AI-systemen worden gebruikt volgens de gebruiksaanwijzingaia-21Menselijke controle van hoog-risico-AI-systemen wordt uitgevoerd door mensen met voldoende kennis en mogelijkhedenaia-25Gebruiksverantwoordelijken controleren de registratie van het hoog-risico AI-systeem in de EU-databankaia-28Mensen over wie besluiten worden genomen door een hoog-risico-AI-systemen, krijgen op verzoek informatie over deze besluitenaia-31Als AI-modellen voor algemene doeleinden met systeemrisico\u2019s ernstige incidenten veroorzaken, wordt dit gedocumenteerd en gerapporteerdaia-32AI-modellen voor algemene doeleinden met systeemrisico\u2019s zijn voldoende beveiligd tegen cyberaanvallenaia-35Ernstige incidenten door hoog-risico-AI-systemen worden gemeld aan de toezichthouderaia-36Klokkenluiders kunnen veilig melden dat een organisatie zich niet houdt aan de AI-verordeningaut-01Auteursrechten zijn beschermdavg-06Organisaties kunnen bewijzen dat zij persoonsgegevens op de juiste manier verwerken"},{"location":"onderwerpen/governance/#aanbevolen-maatregelen","title":"Aanbevolen maatregelen","text":"idMaatregelenorg-01Bepaal of er genoeg experts beschikbaar zijnorg-04Stel beleid op voor een verantwoorde inzet van algoritmes binnen de organisatie.org-03Maak een plan voor het omgaan met risico\u2019sorg-04Zorg voor politiek-bestuurlijk bewustzijn, betrokkenheid, en verantwoordelijkheid.org-05Sluit algoritmegovernance aan op bestaande governancestructuren binnen de organisatie.org-06Gebruik een algoritme volwassenheidsmodel om te weten waar de organisatie staatorg-07Richt een algoritmegovernance in met three lines of defenceorg-08Maak gebruik van beslismomenten  in de algoritmelevenscyclusorg-09Richt algoritmegovernance op basis van de risicoclassificatie van algoritmes.org-10Taken en verantwoordelijkheden zijn toebedeeld in de algoritmegovernanceorg-11Maak afspraken over het beheer van gebruikersorg-12Controleer en verbeter regelmatig de kwaliteit van het algoritmeorg-13Maak afspraken over het beheer van wachtwoordenorg-14Maak afspraken over het wijzigen van de codepba-01Beschrijf het probleem dat het algoritme moet oplossenpba-02Beschrijf het doel van het algoritmepba-03Beschrijf waarom een algoritme het probleem moet oplossenpba-04Overleg regelmatig met belanghebbendenpba-05Beschrijf de wettelijke grondslag voor de inzet van het algoritmeowp-01Beschrijf de rollen en verantwoordelijkheden voor het ontwikkelen en gebruiken van algoritmesowp-05Bepaal het soort algoritme en de risicogroep en vereisten die hierbij horenowp-28Pas vastgestelde interne beleidskaders toe en maak aantoonbaar dat deze zijn nageleefd bij het ontwikkelen, inkopen en gebruiken van algoritmes.org-02Pas vastgestelde beleidskaders toeowk-02Maak een noodplan voor het stoppen van het algoritmever-03Controleer regelmatig of het algoritme voldoet aan alle wetten en regels en het eigen beleidimp-03Richt de juiste menselijke controle in van het algoritmeimp-06Spreek af hoe de organisatie omgaat met privacy-verzoekenimp-05Spreek af hoe medewerkers omgaan met het algoritme.imp-09Richt een proces in zodat burgers of andere belanghebbenden een klacht, bezwaar of beroep kunnen indienen over het gebruik van het algoritme en monitor dit proces.imp-01Maak een openbaar besluit over de inzet van het algoritmemon-03Maak een noodplan voor beveiligingsincidenten"},{"location":"onderwerpen/governance/#aanbevolen-hulpmiddelen","title":"Aanbevolen hulpmiddelen","text":"HulpmiddelenOnderzoekskader algoritmes Auditdienst Rijk 2023Toetsingskader Algoritmes Algemene Rekenkamer"},{"location":"onderwerpen/menselijke-controle/","title":"Menselijke controle over algoritmes","text":"<p>Algoritmes van de overheid moeten onder controle blijven van mensen. Presteert het algoritme niet goed, dan moet een mens dit kunnen aanpassen of stoppen.</p>"},{"location":"onderwerpen/menselijke-controle/#wat-is-menselijke-controle","title":"Wat is menselijke controle?","text":"<p>Menselijke controle over een algoritme of AI-systeem betekent dat mensen invloed hebben op de uitkomsten. Mensen moeten het ontwerp van het algoritme kunnen aanpassen. En mensen moeten het algoritme kunnen stoppen. Zo kun je op tijd ingrijpen als er iets fout gaat.</p>"},{"location":"onderwerpen/menselijke-controle/#belang-van-menselijke-controle","title":"Belang van menselijke controle","text":"<p>Algoritmes kunnen schade veroorzaken in de maatschappij. Gebruik je een algoritme voor een publieke taak, dan moet je dit continu op een of andere manier controleren. </p>"},{"location":"onderwerpen/menselijke-controle/#ontwerp","title":"Ontwerp","text":"<p>Tijdens het ontwerp van een algoritme of AI-systeem controleer je bijvoorbeeld of het algoritme op de juiste manier \u2018getraind\u2019 wordt. Maakt het bijvoorbeeld gebruik van een goede dataset, zonder bias, die representatief is voor de samenleving? En je controleert of het algoritme bepaalde groepen niet benadeelt. </p> <p>Voordat je een algoritme gaat gebruiken, is het belangrijk om het doel te bepalen. </p>"},{"location":"onderwerpen/menselijke-controle/#gebruik","title":"Gebruik","text":"<p>Tijdens het gebruik van een algoritme is menselijke controle belangrijk omdat de werking verandert in de loop der tijd:</p> <ul> <li>Situaties kunnen veranderen. Het algoritme kan daarvan niet op de hoogte zijn. Een routeplanner kent bijvoorbeeld niet alle werkzaamheden of veranderingen aan de wegen.</li> <li>AI-systemen leren soms nog bij. En soms is het niet duidelijk op welke data de uitkomsten gebaseerd zijn. Een beeldherkenningssysteem herkent bijvoorbeeld honden op foto\u2019s op basis van de achtergrond in plaats van de hond zelf.</li> <li>Nieuwe mogelijkheden ontstaan door technologische ontwikkelingen. Zo maken leerlingen en studenten massaal gebruik van large language modellen (LLM\u2019s) zoals ChatGPT.</li> </ul>"},{"location":"onderwerpen/menselijke-controle/#mensen","title":"Mensen","text":"<p>Er is maatschappelijke consensus dat alleen natuurlijke personen in staat zijn om een goede (ethische) afweging te maken over wanneer en welke controle nodig is. Menselijke controle kan je dus niet automatiseren. Mensen mogen zich hierbij wel laten helpen door computers of andere technologie. </p>"},{"location":"onderwerpen/menselijke-controle/#aanpak-menselijke-controle","title":"Aanpak menselijke controle","text":"<p>Je kunt op verschillende manieren controle houden over de prestaties van een algoritme:</p> <ul> <li>Technische controle: Controle uitoefenen op het algoritme zelf. Je bepaalt bijvoorbeeld dat een AI-systeem alleen mag 'bijleren\u2019 wanneer de data voldoet aan bepaalde voorwaarden voor sociale representativiteit.</li> <li>Contextuele controle: Controle van de omgeving van het algoritme. Je verbiedt bijvoorbeeld dat je organisatie het algoritme gebruikt in situaties met een hoog risico op schade.</li> <li>Controle door kennis: Je probeert de werking en risico\u2019s van je algoritmes zo goed mogelijk te begrijpen. Gaat het om een AI-systeem, dan heb je ook voldoende kennis over AI nodig.</li> </ul> <p>Wanneer en hoe je controle uitoefent, hangt af van het soort algoritme en risico, de levenscyclusfase van je project en je expertise. </p> <p>Bepaal in elk geval zo vroeg mogelijk wie in welke levenscyclusfase verantwoordelijk is voor menselijke controle. En beschrijf dit in een RACI-matrix of VERI-matrix. Want menselijke controle is nodig in verschillende fases, door verschillende mensen. Er is nooit 1 persoon verantwoordelijk voor de totale controle. </p> <p>Tijdens het gebruik kun je menselijke controle op de volgende manieren uitoefenen:</p> <ul> <li>Human in the loop: Een mens moet de acties starten van het algoritme. Het werkt niet uit zichzelf.</li> <li>Human on the loop: Mensen kunnen acties stoppen van het algoritme.</li> <li>Human above the loop: Mensen houden overzicht en kunnen ingrijpen bij strategische en ethische beslissingen.</li> <li>Human before the loop: Het algoritme interpreteert morele modellen die mensen vooraf bedenken. Deze oplossing is bedoeld voor volledig autonome algoritmes. Dit zijn algoritmes die zelf beslissingen moeten nemen, bijvoorbeeld door tijdsdruk.</li> </ul>"},{"location":"onderwerpen/menselijke-controle/#feedback","title":"Feedback","text":"<p>Na het bepalen van de manier van controleren, bepaal je de manier waarop je feedback krijgt over het algoritme: Wat voor soort informatie moet bij wie terechtkomen? Aan wie moet een gebruiker bijvoorbeeld rapporteren dat het AI-systeem niet meer goed werkt?</p>"},{"location":"onderwerpen/menselijke-controle/#aanbevolen-maatregelen","title":"Aanbevolen maatregelen","text":"idMaatregelenorg-12Controleer en verbeter regelmatig de kwaliteit van het algoritmepba-03Beschrijf waarom een algoritme het probleem moet oplossenowk-02Maak een noodplan voor het stoppen van het algoritmeimp-01Stel een werkinstructie op voor gebruikers.imp-03Richt de juiste menselijke controle in van het algoritmeimp-05Spreek af hoe medewerkers omgaan met het algoritme."},{"location":"onderwerpen/menselijke-controle/#hulpmiddelen","title":"Hulpmiddelen","text":"HulpmiddelenAssessment List for Trustworthy Artificial Intelligence (ALTAI)Framework for Meaningful Engagement"},{"location":"onderwerpen/menselijke-controle/#help-ons-deze-pagina-te-verbeteren","title":"Help ons deze pagina te verbeteren","text":"<p>Deel je idee, suggestie of opmerking via GitHub of mail ons via algoritmes@minbzk.nl.</p>"},{"location":"onderwerpen/privacy-en-gegevensbescherming/","title":"Privacy en gegevensbescherming","text":"<p>Overheidsinstanties verwerken vaak persoonsgegevens om hun taken uit te voeren en maatschappelijke waarden te cre\u00ebren. Met de opkomst van algoritmes en kunstmatige intelligentie (AI) worden deze gegevens steeds vaker gebruikt om processen te optimaliseren, zoals bij het beoordelen van subsidieaanvragen of het verlenen van vergunningen.  </p> <p>Bij het gebruik van algoritmes is van groot belang om aandacht te besteden aan privacy en gegevensbescherming. Deze technologie\u00ebn vari\u00ebren van eenvoudige rekenregels tot complexe machine learning-modellen en generatieve AI, elk met hun eigen specifieke risico\u2019s.  Bijvoorbeeld, eenvoudige AI kan basisberekeningen uitvoeren, terwijl complexere AI-voorspellingen kan doen of informatie kan genereren. Ongeacht de complexiteit is het identificeren van risico\u2019s en het implementeren van passende beheersmaatregelen essentieel om de privacy van burgers te waarborgen en gevoelige gegevens te beschermen. </p> <p>Bij de inzet van AI in de publieke sector moeten overheidsinstanties rekening houden met de vereisten uit privacywetgeving, zoals de Algemene Verordening Gegevensbescherming (AVG). Dit omvat onder andere het minimaliseren van gegevensgebruik, implementeren van een privacy by design werkwijze waar mogelijk, en het transparant zijn over hoe en waarom (persoons)gegevens worden verwerkt.  Het toewijzen van verantwoordelijkheden en het opstellen van duidelijke richtlijnen voor gegevensverwerking zijn belangrijke stappen in dit proces. </p> <p>Het bouwblok privacy en gegevensbescherming van algoritmes wordt ook ge\u00efntegreerd in de algoritmelevenscyclus.  Dit biedt inzicht in wanneer specifieke vereisten en maatregelen tijdens de ontwikkeling van algoritmes moeten worden toegepast.  Door deze vereisten in de levenscyclus te integreren, kunnen de gebruikers inzichten opdoen wanneer deze maatregelen kunnen worden ge\u00efmplementeerd. </p>"},{"location":"onderwerpen/privacy-en-gegevensbescherming/#hulpmiddelen","title":"Hulpmiddelen","text":"HulpmiddelenAssessment List for Trustworthy Artificial Intelligence (ALTAI)Data Protection Impact Assessment"},{"location":"onderwerpen/publieke-inkoop/","title":"Publieke inkoop","text":"<p>Door middel van publieke inkoop wordt door overheidsinstellingen software ingekocht. Deze software wordt ingekocht om ambtenaren te ondersteunen met hun werkzaamheden om zo maatschappelijk waarden te cre\u00ebren. Het kan bijvoorbeeld gaan om het inkopen van een systeem waarmee een aanvraag voor een subsidie of vergunning kan worden behandeld. Het virtueel vergaderen of het digitaal samenwerken aan documenten zijn hier ook voorbeelden van. </p> <p>Disclaimer</p> <p>Het Algoritmekader is nog volop in ontwikkeling. Op deze plek willen we vooral aan de slag gaan op een open en transparante wijze. Het is dus niet definitief. Dat betekent dat er dingen opstaan die niet af zijn en soms zelfs fout. Mocht er iets niet kloppen, laat het ons weten via GitHub.</p> <p>Software wordt vaak ontwikkeld door gespecialiseerde aanbieders en bevat steeds meer algoritmes. Het komt ook voor dat de overheid deze technologie zelf ontwikkelt. Deze algoritmes kunnen eenvoudig van aard zijn, zoals het maken van een eenvoudige berekening. Zij kunnen complexer van aard zijn, zoals een voorspelling geven of het genereren van informatie. In het laatste geval kan worden gedacht aan ChatGPT, Google Bard of Co-Pilot. Er zijn verschillende type technologie\u00ebn die vallen onder het bereik van algoritmes. In dit kader drukken we deze uit als \u2018rekenregel\u2019, \u2018machine learning\u2019 en \u2018generatieve AI\u2019. Elke technologie heeft eigen bijzondere aandachtspunten. Ook de bijbehorende risico\u2019s kunnen per type verschillen. Het identificeren van deze risico\u2019s en het treffen van beheersmaatregelen is daarbij van belang. Dat geldt in het bijzonder als algoritmes bijdragen aan de totstandkoming van overheidsbesluitvorming en impactvolle beslissingen die burgers en ondernemingen raken. </p> <p>Door bij publieke inkoop van software met algoritmes rekening te houden met vereisten die voorkomen uit wet- en regelgeving, toepassen van publieke waarden, het type algoritme of AI en de potenti\u00eble risico\u2019s die ontstaan bij het gebruiken ervan, kunnen negatieve gevolgen worden voorkomen. Publieke inkoop speelt daarom een belangrijke rol bij de totstandkoming van verantwoord ontwikkelde algoritmes en het gebruik daarvan door ambtenaren.  In dit deel van het Algoritmekader wordt nader ingegaan op deze vereisten. Er worden suggesties gedaan hoe deze vereisten kunnen worden nageleefd en welke rollen daarbij betrokken kunnen zijn. Waar mogelijk worden concrete voorbeelden uit de praktijk gegeven en zal worden aangegeven bij welk type algoritmes dit relevant is.</p> <p>Het publiek inkopen van algoritmes wordt ook gekoppeld aan de algoritme levenscyclus. Dit geeft een beeld van wanneer bepaalde vereisten en maatregelen, bij het ontwikkelen van algoritmes, moeten worden geadresseerd. Door deze vereisten ook te vertalen naar het inkoopproces, zullen de rollen binnen het inkoopproces beter in staat zijn om te duiden wanneer en hoe dit kan worden geadresseerd. Dit moet bijdragen aan een goed samenspel met aanbieders, zodat de kansen van algoritmes worden benut en de negatieve gevolgen worden voorkomen.  </p>"},{"location":"onderwerpen/publieke-inkoop/#algoritme-levenscyclus","title":"Algoritme levenscyclus","text":"<p>Algoritmes kunnen een grote impact hebben op onze maatschappij. Daarom is het van belang dat deze op een verantwoorde manier worden ontwikkeld en gebruikt. Het toepassen van de algoritme levenscyclus is hierover een bruikbare leidraad. De algoritme levenscyclus bestaat uit meerdere fasen. De werkzaamheden die noodzakelijk zijn om een verantwoord algoritme of AI te ontwikkelen, kunnen logisch worden gekoppeld aan deze fasen.  Deze levenscyclus kan worden gebruikt voor alle typen algoritmes. Het verschilt uiteraard wel per type wat moet worden gedaan en dit is mede afhankelijk van de risico classificatie. Bij hoog risico toepassing zal meer moeten worden gedaan om risico\u2019s te mitigeren dan als er sprake is van lage risico toepassingen. De levenscyclus geeft een bruikbaar overzicht voor leveranciers en opdrachtgevers wanneer welke werkzaamheden moeten worden uitgevoerd. Het laat ook zien welke werkzaamheden moeten zijn afgerond als algoritmes in de markt mogen worden gezet en klaar zijn voor gebruik. </p> <p>Bij het publiek inkopen van software met bijbehorende algoritmes zijn de wensen van de behoeftesteller en de doelstellingen van de organisatie van groot belang. Dit kan tot verschillende situaties leiden:</p> <p>\u2022   Een al ontwikkelde kant-en-klare oplossing voldoet direct aan deze wensen en doelstellingen;</p> <p>\u2022   Een al ontwikkelde oplossing moet eerst worden aangepast voordat deze kan worden gebruikt;</p> <p>\u2022   Er moet een nieuwe oplossing worden ontwikkeld om te voldoen aan de wensen. </p> <p>Deze inschatting is dus bepalend wat wel en niet van een product mag worden verwacht. Dit is relevant voor zowel de leverancier als de opdrachtgever. Het is aannemelijk dat als het om risicovolle (nog te ontwikkelen) algoritmes gaat, de opdrachtgever een intensieve bijdrage moet leveren aan de samenwerking om het product te kunnen gebruiken. De opdrachtgever zal bijvoorbeeld moeten aangeven wat de juridische en ethische grenzen zijn van de uiteindelijk werking van het algoritme of AI. Als een kant-en-klare oplossing wordt afgenomen, dan zal de leverancier moeten laten zien dat de ontwikkelde algoritmes voldoen aan alle vereisten en moet dit kunnen aantonen. </p> <p>De inzichten uit de algoritme levenscyclus kunnen ondersteunen bij bijvoorbeeld de behoeftestelling, het maken van make-or-buy beslissingen, de te hanteren aanbestedingsvorm, de totstandkoming van de selectie- en gunningseisen, contractspecificaties en de uitvoering en management van het contract. De algoritme levenscyclus kan worden geraadpleegd via het tabblad boven aan deze pagina. Per fase en per type algoritme of AI kan worden bekeken aan welke vereisten moet worden voldaan en welke beheersmaatregelen kunnen worden getroffen. </p>"},{"location":"onderwerpen/publieke-inkoop/#hulpmiddelen","title":"Hulpmiddelen","text":"<p>Hieronder volgt een overzicht van instrumenten die kunnen worden gebruikt om invulling te geven aan de vereisten en maatregelen.</p> HulpmiddelenInkoopvoorwaarden"},{"location":"onderwerpen/publieke-inkoop/#bruikbare-informatie-en-bronnen","title":"Bruikbare informatie en bronnen","text":"<p>Europese modelcontractbepalingen AI-systemen (hoog risico)</p> <p>Europese modelcontractbepalingen AI-systemen (niet hoog risico)</p> <p>Contractvoorwaarden voor algoritmes gemeente Amsterdam</p> <p>Inkoopproces</p> <p>Community of Practise Digitale Innovatie</p>"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/","title":"Technische robuustheid en veiligheid","text":"<p>Algoritmes van de overheid moeten robuust en veilig zijn. Dit betekent dat je algoritmes in elke situatie goed presteren, ook als er iets onverwachts gebeurt. Gaat er toch iets mis, dan is er een noodplan.</p>"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#wat-is-technisch-robuust-en-veilig","title":"Wat is technisch robuust en veilig?","text":"<p>Een technisch robuust en veilig algoritme presteert onder elke omstandigheid zoals het bedoeld is. </p> <p>Een robuust algoritme is:</p> <ul> <li>Nauwkeurig: Het algoritme geeft de juiste uitkomst voor het gewenste doel, of meldt dat de uitkomst onzeker is.</li> <li>Betrouwbaar: Ook in nieuwe of onverwachte situaties geeft het algoritme de juiste uitkomst.</li> <li>Reproduceerbaar: In dezelfde situaties vertoont het algoritme hetzelfde gedrag.</li> </ul> <p>Een algoritme is veilig onder deze omstandigheden:</p> <ul> <li>Geautoriseerde toegang: Alleen personen en systemen met toestemming kunnen het algoritme gebruiken of beheren.</li> <li>Confidentieel: Het algoritme kan geen vertrouwelijke of gevoelige informatie lekken door aanvallen.</li> <li>Integer: Kwaadwillenden kunnen nergens in de levenscyclus van het algoritme onbedoeld de controle van het model overnemen.</li> <li>Beschikbaar: Je kunt op elk moment het algoritme gebruiken waarvoor het bedoeld is. Gaat dit toch fout, dan ontstaat er geen grote schade.</li> </ul>"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#belang-van-robuuste-veilige-algoritmes","title":"Belang van robuuste, veilige algoritmes","text":"<p>Algoritmes kunnen grote schade veroorzaken aan de maatschappij. Met een technisch robuust en goed beveiligd algoritme voorkom je:</p> <ul> <li>onverwachte schadelijke uitkomsten, zoals verkeerde beslissingen of discriminatie door onvoldoende nauwkeurigheid </li> <li>uitval van het systeem</li> <li>lekken van informatie, zoals persoonsgegevens</li> <li>gebruik van het algoritme voor verkeerde doelen</li> <li>schade door misbruik of aanvallen van buitenaf</li> </ul>"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#gebruik-algoritmes-op-de-juiste-manier","title":"Gebruik algoritmes op de juiste manier","text":"<p>Gebruik een algoritme alleen voor het juiste doel en op de juiste manier. Dit is de manier die is getest en gecontroleerd. Wanneer je het algoritme gebruikt voor een ander doel of in een verkeerde context, zijn de resultaten niet meer betrouwbaar. </p> <p>Voorkom dat medewerkers op de verkeerde manier werken met het algoritme. Zij moeten weten wat het algoritme wel en niet kan. En wat ze moeten doen als het algoritme fouten maakt of niet goed werkt. Denk aan technische en organisatorische ondersteuning:</p> <ul> <li>Leid medewerkers op.</li> <li>Maak duidelijke afspraken over werkprocessen (governance).</li> <li>Stuur gebruikers in het juiste gebruik via interactie en technische verbeteringen in het ontwerp.</li> </ul>"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#controleer-regelmatig","title":"Controleer regelmatig","text":"<p>Begin zo vroeg mogelijk met regelmatige controles van de uitkomst en werking van het algoritme. In de praktijk verandert de omgeving en de situatie waarin het algoritme wordt gebruikt. Controleer daarom regelmatig of het algoritme nog werkt zoals het is bedoeld. </p>"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#voorbeeld","title":"Voorbeeld","text":"<p>Een algoritme leest kentekens tijdens parkeercontroles. Het herkent de juiste letters en cijfers op elk kenteken. Ook als het bord een andere kleur heeft, op een andere plek zit of vies is. Het algoritme is nauwkeurig en dus robuust.</p> <p>Een algoritme berekent het risico op fraude door mensen. Maar bij personen uit dezelfde groep geeft het algoritme de ene keer als uitkomst \u2018hoog risico\u2019 en de andere keer \u2018geen risico\u2019. De uitkomst is niet reproduceerbaar. Hierdoor is het algoritme niet robuust.</p>"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#controles-voorbereiden","title":"Controles voorbereiden","text":"<p>Bereid de controles voor tijdens de levenscyclusfases probleemanalyse, ontwerp en dataverkenning en datapreparatie. Onderzoek de situatie waarin je organisatie het algoritme gaat gebruiken: Wat zijn de risico\u2019s? Welke onderdelen van het algoritme moet je evalueren? Analyseer de kwaliteit en variatie van de data. Bedenk maatregelen waarmee je de risico\u2019s zoveel mogelijk voorkomt. En bedenk met welke methode je de controles gaat evalueren. </p> <p>Ontwikkel je het algoritme zelf, controleer dan tijdens de ontwikkeling al wat er gebeurt in de verschillende situaties die je verwacht. Experimenteer met nieuwe combinaties van de inputdata en gebruik verschillende representatieve test-sets.</p>"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#controles-uitvoeren","title":"Controles uitvoeren","text":"<p>Voer de controles uit tijdens de ontwikkelfase en de verificatie- en validatiefase. Test het algoritme goed. Evalueer hoe robuust en veilig het algoritme is. Verbeter het algoritme waar nodig. En monitor goed welke data het algoritme gebruikt, zodat je veranderingen in die data snel signaleert. Maak een noodplan voor als blijkt dat het algoritme niet meer werkt zoals het bedoeld was.</p> <p>Blijf regelmatig controleren tijdens de fases implementatie en monitoring en beheer. Dit zijn de fases waarin je het algoritme gebruikt. Presteert het algoritme niet goed, los het probleem dan op of stop het gebruik. </p> <p>[!TIP] Houd rekening met concept drift. Dit betekent dat de eigenschappen van je data in de loop van de tijd kunnen veranderen. Hierdoor trekt je algoritme mogelijk verkeerde conclusies. Zo was er v\u00f3\u00f3r 2020 een verband tussen thuiswerken en ziek zijn. Maar sinds de coronacrisis in 2020 is dit verband minder sterk, omdat gezonde mensen vaker thuiswerken. </p>"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#bescherm-algoritmes-tegen-aanvallen-en-bedreigingen","title":"Bescherm algoritmes tegen aanvallen en bedreigingen","text":"<p>Beveilig het ICT-systeem waarin het algoritme wordt gebruikt. Dit zijn bijvoorbeeld maatregelen uit de Baseline Informatiebeveiliging Overheid (BIO) die je standaard neemt voor beveiliging van ICT-systemen tegen cyberaanvallen.</p> <p>Beveilig de algoritmes zelf tegen cybercriminelen. Belangrijke bedreigingen voor algoritmes zijn:</p> <ul> <li>Trainingsdata van een AI-model aanpassen, waardoor het later fouten gaat maken tijdens het gebruik.</li> <li>Input van een algoritme aanpassen om het normale gedrag te omzeilen, of om het algoritme specifieke, ongewenste output te laten geven.</li> <li>Een \u2018achterdeurtje\u2019 inbouwen met toegang tot het algoritme, waardoor aanvallers het algoritme kunnen misbruiken.</li> <li>Intellectueel eigendom of kwetsbaarheden afleiden uit de details van een AI-model.</li> <li>Gevoelige informatie afleiden uit de eigenschappen van trainingsdata.</li> </ul> <p>Lees meer in het TNO-rapport Verkenning van het raakvlak cybersecurity en AI.</p> <p>Aandachtspunten voor het beschermen van algoritmes tegen specifieke dreigingen:</p> <ul> <li>Controleer of de trainingsdata geschikt, correct en betrouwbaar is.</li> <li>Controleer of de inputdata geschikt, correct en betrouwbaar is.</li> <li>Houd bij complexe algoritmes rekening met verborgen en onwenselijke functionaliteiten.</li> <li>Train je algoritme om bestand te zijn tegen aanvallen. </li> <li>Stimuleer veilig gebruik van het algoritme door gebruikers.</li> <li>Maak afspraken met leveranciers en controleer de geleverde algoritmes voor gebruik.</li> <li>Test periodiek of het algoritme weerbaar is tegen bekende aanvallen.</li> </ul> <p>Hiermee voorkom je:</p> <ul> <li>misleiding, doordat het algoritme niet werkt op de bedoelde manier</li> <li>verkeerde implementatie en daardoor een verkeerde werking</li> </ul> <p>Begin zo vroeg mogelijk met beveiligen. Beveilig in elk geval in de fases ontwikkelen, verificatie en validatie, implementatie, monitoring en beheer en uitfaseren.</p>"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#verklein-de-kans-op-schade","title":"Verklein de kans op schade","text":"<p>Veroorzaak zo min mogelijk schade als het toch fout gaat. En maak een noodplan voor incidenten. Het doel van dit plan is ervoor zorgen dat de fout zo min mogelijk gevolgen heeft voor de organisatie en de maatschappij. In het plan staat bijvoorbeeld wie wat moet doen als het systeem uitvalt.</p>"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#aanbevolen-maatregelen","title":"Aanbevolen maatregelen","text":"idMaatregelenorg-11Maak afspraken over het beheer van gebruikersorg-13Maak afspraken over het beheer van wachtwoordenorg-14Maak afspraken over het wijzigen van de codeowp-04Beschrijf welke techniek gebruikt wordt voor de beoogde toepassingowp-10Maak een Project Startarchitectuur (PSA) voor de ontwikkeling of inkoop van algoritmesowp-24Voer een risico-analyse met de aanbieder uit op het gebied van informatiebeveiliging bij een uitbestedingstrajectdat-04Geef data zoals persoonsgegevens een bewaartermijn met een vernietigingsproceduredat-07Gebruik bij machine learning technieken gescheiden train-, test- en validatiedata en houdt rekening met underfitting en overfitting.owk-01Ontwerp en ontwikkel het algoritme volgens de principes van \u2018security by design\u2019owk-04Maak logbestanden waarin staat wie wanneer toegang had tot de data en de codever-01Controleer regelmatig of het algoritme werkt zoals het bedoeld isimp-02Doe aselecte steekproeven om algoritmes met 'risicogestuurde selectie\u2019 te controlerenmon-01Maak back-ups van algoritmesmon-02Beveilig de softwaremon-03Maak een noodplan voor beveiligingsincidentenmon-04Monitor regelmatig op veranderingen in de data. Bij veranderingen evalueer je de prestaties en output van het algoritme."},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#hulpmiddelen","title":"Hulpmiddelen","text":"HulpmiddelenAssessment List for Trustworthy Artificial Intelligence (ALTAI)Baseline Informatiebeveiliging Overheid (BIO)"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#bronnen","title":"Bronnen","text":"<ul> <li>Natalia D\u00edaz-Rodr\u00edguez et al, 2023, Connecting the dots in trustworthy Artificial Intelligence: From AI principles, ethics, and key requirements to responsible AI systems and regulation, Information Fusion 99.</li> <li>Andrea Tocchetti, Lorenzo Corti, Agathe Balayn, Mireia Yurrita, Philip Lippmann, Marco Brambilla, and Jie Yang. 2022. A.I. Robustness: a Human-Centered Perspective on Technological Challenges and Opportunities. In ACM, New York, NY, USA</li> <li>Ronan Hamon, Henrik Junklewitz, Ignacio Sanchez, 2020, Robustness and Explainability of Artificial Intelligence: from technical to policy solutions, JRC Technical Report, EUR 30040 EN</li> <li>Bhanu Chander, Chinju John, Lekha Warrier, Gopalakrishnan Kumaravelan, 2024, Toward Trustworthy AI in the Context of Explainability and Robustness, ACM Computing Surveys</li> <li>Niels Brink, Yori Kamphuis, Yuri Maas, Gwen Jansen-Ferdinandus, Jip van Stijn, Bram Poppink, Puck de Haan, Irina Chiscop, 2023, Adversarial AI in de cyber domain, TNO-2023-R10292-EN</li> </ul>"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#help-ons-deze-pagina-te-verbeteren","title":"Help ons deze pagina te verbeteren","text":"<p>Deel je idee, suggestie of opmerking via GitHub of mail ons via algoritmes@minbzk.nl.</p>"},{"location":"onderwerpen/transparantie/","title":"Transparant zijn over algoritmes","text":"<p>Overheden moeten transparant zijn over hun algoritmes. Dit betekent dat je duidelijke informatie geeft over de algoritmes die je ontwikkelt of gebruikt.</p>"},{"location":"onderwerpen/transparantie/#wanneer-ben-je-transparant","title":"Wanneer ben je transparant?","text":"<p>Je draagt bij aan transparantie over algoritmes als je duidelijk uitlegt:</p> <ul> <li>dat je algoritmes ontwikkelt of gebruikt</li> <li>voor welk doel je deze algoritmes ontwikkelt of gebruikt</li> <li>wat voor soort algoritmes dit zijn</li> <li>welke code of programmeertaal je hiervoor gebruikt</li> <li>welke data je hiervoor gebruikt</li> <li>hoe uitkomsten tot stand komen</li> <li>hoe belanghebbenden bezwaar kunnen maken tegen gevolgen van het algoritme</li> </ul>"},{"location":"onderwerpen/transparantie/#belang-van-transparantie","title":"Belang van transparantie","text":"<p>Als je open bent over de algoritmes die je ontwikkelt of gebruikt, kunnen burgers en bedrijven zich beter verdedigen tegen mogelijke nadelige gevolgen. Verkeerd gebruik van algoritmes kan iemands leven namelijk ernstig be\u00efnvloeden. Bijvoorbeeld door discriminatie of een besluit dat niet klopt.</p> <p>Door uit te leggen hoe het algoritme werkt, kun je de beslissingen van het algoritme makkelijker controleren. Je leert sneller waarom het bepaalde keuzes maakt en waar de zwakke plekken zitten.</p> <p>Ook je organisatie is makkelijker te controleren. Omdat je transparant bent over algoritmes, kunnen burgers feedback geven. Journalisten zien wat je doet. En andere overheden kunnen hiervan leren.</p>"},{"location":"onderwerpen/transparantie/#aanpak-transparant-werken","title":"Aanpak transparant werken","text":"<p>Hoe je transparantie organiseert, hangt af van:</p> <ul> <li>het doel van je algoritme</li> <li>het soort algoritme waarmee je werkt</li> <li>wie de gebruikers zijn van het algoritme, bijvoorbeeld medewerkers of burgers</li> <li>de vereisten waar je aan moet voldoen</li> <li>de maatregelen die je neemt</li> <li>de doelgroep die je wil bereiken</li> <li>de levenscyclus-fase van je algoritme</li> </ul> <p>Onderzoek goed welk soort algoritme je gebruikt of wil gebruiken. Hoe groter de impact en het risico, hoe strenger de vereisten.</p> <p>De keuze voor het soort algoritme bepaalt ook hoe transparant je kunt zijn. Van rekenregels kun je namelijk precies uitleggen hoe deze tot een beslissing komen. Maar complexe AI-systemen zijn vaak een black box: niemand weet precies hoe deze systemen beslissingen maken. Volledige transparantie is dan niet mogelijk. In dat geval moet je de werking zo goed mogelijk onderzoeken. Probeer bijvoorbeeld in elk geval ernstige gevolgen zoals discriminatie te voorkomen. </p> <p>Tip</p> <p>Rekenregels zijn makkelijker uit te leggen dan AI-systemen. Als een rekenregel voldoende is voor het bereiken van je doel, dan is het ook makkelijker om transparant te zijn.</p>"},{"location":"onderwerpen/transparantie/#betrokken-partijen","title":"Betrokken partijen","text":"<p>Stem je informatie af op de betrokken partij. Zo moeten gebruikers de uitkomst van het algoritme voldoende begrijpen voor het nemen van onderbouwde beslissingen. En belanghebbenden zoals burgers moeten weten dat zij te maken hebben met een algoritme. Zij moeten snel en makkelijk kunnen vinden wat hun rechten zijn en hoe zij in beroep kunnen gaan. </p> Doelgroep Informeer bijvoorbeeld over Geef de informatie bijvoorbeeld via: Ontwikkelaar de werking, keuzes van het ontwikkelteam technische documentatie Gebruiker hoe uitkomsten tot stand komen, gebruikte data, wat het algoritme wel en niet kan gebruiksinstructies,  trainingen Medewerker contactpersonen, algoritmegebruik binnen de organisatie, afspraken over algoritmemanagement (ook wel: algoritmegovernance) intern algoritmeregister, trainingen Belanghebbende (iemand voor wie het algoritme gevolgen heeft) hoe een besluit tot stand kwam, mogelijkheden om bezwaar te maken, contactmogelijkheden brief over het besluit, webpagina over het algoritme Ge\u00efnteresseerde burger algoritmegebruik binnen de organisatie webpagina over het algoritme, algoritmeregister Auditor werking, ontwikkelproces, keuzes van het ontwikkelteam, hoe uitkomsten tot stand komen algoritmeregister, technische documentatie, programmeercode Onderzoeker of journalist algoritmegebruik binnen de organisatie algoritmeregister, technische documentatie, code"},{"location":"onderwerpen/transparantie/#aanbevolen-maatregelen","title":"Aanbevolen maatregelen","text":"idMaatregelenorg-04Stel beleid op voor een verantwoorde inzet van algoritmes binnen de organisatie.org-04Zorg voor politiek-bestuurlijk bewustzijn, betrokkenheid, en verantwoordelijkheid.pba-01Beschrijf het probleem dat het algoritme moet oplossenpba-02Beschrijf het doel van het algoritmepba-05Beschrijf de wettelijke grondslag voor de inzet van het algoritmeowp-08Bepaal welke documenten voor hoe lang gearchiveerd moeten wordenowp-13Maak vereisten voor algoritmes onderdeel van algemene inkoopvoorwaarden en de contractovereenkomst.owp-20Vul technische documentatie van aanbieder aan met relevante informatie vanuit de gebruiksverantwoordelijke.owp-22Bepaal in een aanbesteding of algoritmes van een aanbieder bepalende invloed hebben in een besluit richting personenpba-04Stel vast welke betrokkenen ge\u00efnformeerd moeten worden en welke informatie zij nodig hebben.owp-07Pas uitlegbaarheidstechnieken toe en evalueer en valideer deze.imp-10Maak gebruik van een algoritme dat bronvermelding kan genereren bij de output.org-02Pas vastgestelde beleidskaders toever-03Controleer regelmatig of het algoritme voldoet aan alle wetten en regels en het eigen beleidimp-01Stel een werkinstructie op voor gebruikers.imp-04Publiceer impactvolle algoritmes en hoog-risico-AI-systemen in het Algoritmeregisterimp-07Vermeld het gebruik van persoonsgegevens in een privacyverklaringimp-08Vermeld het gebruik van persoonsgegevens in het verwerkingsregisterimp-01Maak een openbaar besluit over de inzet van het algoritme"},{"location":"onderwerpen/transparantie/#hulpmiddelen","title":"Hulpmiddelen","text":"HulpmiddelenAssessment List for Trustworthy Artificial Intelligence (ALTAI)Impact Assessment Mensenrechten en AlgoritmesAlgoritmeregisterFramework for Meaningful Engagement"},{"location":"onderwerpen/transparantie/#help-ons-deze-pagina-te-verbeteren","title":"Help ons deze pagina te verbeteren","text":"<p>Deel je idee, suggestie of opmerking via GitHub of mail ons via algoritmes@minbzk.nl.</p>"},{"location":"overhetalgoritmekader/","title":"Soorten algoritmes","text":"<ul> <li> <p>Basiskennis algoritmes en AI</p> <p>Overzicht van de belangrijkste vereisten voor overheden die algoritmes of AI-systemen ontwikkelen of gebruiken.</p> </li> <li> <p>Soorten algoritmes</p> <p>Om te voldoen aan de vereisten, moet je weten met welk soort algoritme je werkt. Gaat het om simpele rekenregels of een AI-systeem?</p> </li> <li> <p>Risico en impact van algoritmes</p> <p>AI-systemen vallen mogelijk onder een risicogroep uit de AI-verordening. En wat voor impact hebben je algoritmes?</p> </li> <li> <p>Woordenlijst</p> <p>Uitleg van begrippen die je vaak tegenkomt op deze website.</p> </li> </ul>"},{"location":"overhetalgoritmekader/CONTRIBUTING/","title":"Bijdragen aan het Algoritmekader","text":"<p>Allereerst, bedankt dat je de tijd hebt genomen om een bijdrage te leveren! \u2764\ufe0f</p> <p>We waarderen alle soorten bijdragen enorm. Zie die Inhoudsopgave voor verschillende manieren waarop je kan bijdragen aan het Algoritmekader. Zorg ervoor dat je de relevante hoofdstukken even leest voordat je een bijdrage levert. Het zal het voor het team van het Algoritmekader een stuk makkelijker maken en de ervaring voor alle betrokkenen soepeler laten verlopen. We kijken uit naar alle bijdragen! \ud83c\udf89</p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#opmerking","title":"Opmerking","text":"<p>Werken in Github is voor het team Algoritmekader nieuw en experimenteel. Dit vraagt voor ons om een aangepaste werkwijze en hier is bepaalde expertise voor nodig.  Het begin is gemaakt en het team Algoritmekader is nog lerende om hier optimaal invulling aan te geven.  Hierdoor kan het iets langer duren voordat er wordt gereageerd op suggesties of toevoegingen.  We werken aan een duidelijk proces om hier goed mee om te gaan (deze guidelines zijn daar een voorbeeld van). Daarnaast werken we niet aan alle bouwblokken tegelijk. Deze worden \u00e9\u00e9n voor \u00e9\u00e9n opgepakt.  Aanbevelingen over onderwerpen die later op de planning staan kunnen daardoor ook iets langer duren om te verwerken, en worden mogelijk pas verwerkt wanneer dit bouwblok wordt uitgewerkt.  </p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#inhoudsopgave","title":"Inhoudsopgave","text":"<ul> <li>Code of Conduct</li> <li>Ik heb een vraag</li> <li>Ik wil iets bijdragen</li> <li>Ik wil een fout of bug melden</li> <li>Hoe we werken op GitHub</li> </ul>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#code-of-conduct","title":"Code of Conduct","text":"<p>Dit project en iedereen die eraan deelneemt, valt onder de Code of Conduct. Door deel te nemen, wordt van je verwacht dat je je aan deze code houdt. Meld onacceptabel gedrag aan algoritmes@minbzk.nl.</p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#ik-heb-een-vraag","title":"Ik heb een vraag","text":""},{"location":"overhetalgoritmekader/CONTRIBUTING/#maak-een-issue-aan","title":"Maak een issue aan","text":"<p>Voordat je een Issues gaat aanmaken, kan je bekijken of jouw vraag al tussen de bestaande Issues staat. Wellicht staat er al een issue tussen die jou vraag kan beantwoorden. </p> <p>Als je jouw vraag nog steeds wilt stellen, kan je een Issue aanmaken. </p> <ol> <li>Gebruik daarvoor de knop new issue.</li> <li>Schrijf je vraag of opmerking is en geef een heldere toelichting.</li> <li>Anderen kunnen nu opmerkingen toevoegen aan jouw issue.</li> <li>Het team van het Algoritmekader zal deze issue labelen als <code>question</code> en pakt jouw issue zo snel mogelijk op. Mogelijk neemt het team van het Algoritmekader contact op voor een verduidelijking of een oplossing.</li> </ol>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#stel-een-vraag-via-mail","title":"Stel een vraag via mail","text":"<p>Je kan je vragen ook altijd stellen door een mail te sturen naar algoritmes@minbzk.nl.</p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#ik-wil-iets-bijdragen","title":"Ik wil iets bijdragen","text":"<p>Er zijn verschillende manieren waarop je kan bijdragen. Zie hieronder de mogelijkheden. </p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#ter-kennisgeving","title":"Ter kennisgeving","text":"<p>Wanneer je bijdraagt aan dit project, moet je ermee akkoord gaan dat je 100% van de inhoud hebt geschreven, dat je de benodigde rechten op de inhoud hebt en dat de inhoud die je bijdraagt mag worden geleverd onder de Code of Conduct.</p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#sluit-je-aan-bij-een-werkgroep","title":"Sluit je aan bij een werkgroep","text":"<p>Voor sommige bouwblokken wordt er gewerkt met werkgroepen, om de informatie verder uit te werken. Deelname aan een werkgroep kost tijd. Werkgroepen komen regelmatig bij elkaar, en tussendoor worden bepaalde zaken uitgewerkt door werkgroepleden. Wil je op \u00e9\u00e9n van de onderwerpen meewerken? Stuur dan een bericht naar algoritmes@minbzk.nl.</p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#neem-deel-aan-een-sprint-review-klankbord-demo","title":"Neem deel aan een sprint review / klankbord / demo","text":"<p>Het team van het algoritmekader werkt in sprints van ongeveer 3 weken. Daarin werken we toe naar de volgende release van het Algoritmekader. Ongeveer eens in de 6 weken vindt er een nieuwe release plaats. Wanneer er een release is, wordt deze altijd toegelicht en gepresenteerd in een open online review / demo. Deze kan je vrijblijvend volgen. Zo blijf je op de hoogte en kun je een bijdrage leveren. Bekijk de agenda op Algoritmes Pleio voor de komende bijeenkomsten. </p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#ik-wil-een-fout-of-bug-melden","title":"Ik wil een fout of bug melden","text":"<p>Heb je een foutje gevonden in het Algoritmekader? Dan kan je deze melden door een Issue aan te maken. </p> <p>Voordat je een Issues gaat aanmaken, kan je bekijken of jouw gevonden fout al tussen de bestaande Issues staat. </p> <p>Als je de gevonden fout nog steeds wilt melden, kan je een Issue aanmaken. </p> <ol> <li>Gebruik daarvoor de knop new issue.</li> <li>Beschrijf de fout duidelijk en geef een heldere toelichting. Voeg waar mogelijk een screenshot toe. </li> <li>Het team van het Algoritmekader zal deze issue labelen als <code>bug</code> en pakt jouw issue zo snel mogelijk op. Mogelijk neemt het team van het Algoritmekader contact op voor een verduidelijking of een oplossing.</li> </ol>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#ik-wil-een-verbetering-voorstellen","title":"Ik wil een verbetering voorstellen","text":"<p>Heb je een suggestie of wil je een verbetering voorstellen? Dat kan gaan om een compleet nieuwe functionaliteit van de site of om kleine verbeteringen. Het volgen van onderstaande instructie helpt het team van het algoritmekader om je suggestie te begrijpen en gerelateerde suggesties te vinden.</p> <p>Je kan een suggestie doen door een Issue aan te maken of door een Pull Request te maken.</p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#voordat-je-een-suggestie-gaat-maken","title":"Voordat je een suggestie gaat maken","text":"<ul> <li>Voordat je een suggestie gaat maken, kan je bekijken of jouw suggestie al tussen de bestaande Issues staat. Wellicht bestaat er al een issue die jouw suggestie beschrijft, en zijn we er al mee bezig.</li> <li>Zoek uit of jouw idee past binnen het doel en de scope van het project. Wat zijn de voordelen van deze functionaliteit of toevoeging? Het is aan jou om het team van het Algoritmekader en de community te overtuigen dat dit een nuttige toevoeging is aan het Algoritmekader. Houd in gedachten dat we functioanliteiten willen die nuttig zijn voor de meerderheid van onze gebruikers en niet slechts voor een kleine groep.</li> </ul>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#een-issue-aanmaken","title":"Een issue aanmaken","text":"<p>Als je jouw suggestie nog steeds wilt doen, kan je een Issue aanmaken. </p> <ol> <li>Gebruik daarvoor de knop new issue.</li> <li>Beschrijf duidelijk jouw suggestie en geef een heldere toelichting en onderbouwing waarom dit een goede toevoeging zal zijn aan het Algoritmekader</li> <li>Het team van het Algoritmekader zal deze issue labelen als <code>enhancement</code> en pakt jouw issue zo snel mogelijk op. Mogelijk neemt het team van het Algoritmekader contact op voor een verduidelijking of een oplossing.</li> </ol> <p>Afhankelijk van de complexiteit en het onderwerp van jouw suggestie kan het even duren voordat deze wordt opgepakt door het team van het Algoritmekader. </p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#een-pull-request-maken","title":"Een pull-request maken","text":"<p>Kun je niet uit de voeten met de issues?  Bijvoorbeeld omdat je verschillende wijzigingsvoorstellen wilt doen? Je kan ook gebruik maken van een Fork en een Pull Request.</p> <p>Het team van Algoritmekader bekijkt daarna jouw aanpassingen en kan bij akkoord jouw aanpassingen mergen. Er zijn ook andere manieren om een pull request te doen. Meer daarover. </p> <p>Afhankelijk van de complexiteit en het onderwerp van jouw suggestie kan het even duren voordat deze wordt opgepakt door het team van het Algoritmekader. </p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#preview-van-een-pull-request","title":"Preview van een pull-request","text":"<p>We maken gebruik van de tool pr-preview-action om automatisch previews te maken van een pull-request.  Dit maakt het mogelijk om de wijzigingen die zijn gedaan in een pull-request al te bekijken in de uiteindelijke omgeving.  Wanneer er een pull-request gedaan wordt via een fork, leidt dit helaas tot een error, zie Issue #79. Dit blokkeert de pull-request niet. </p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#hoe-we-werken-op-github","title":"Hoe we werken op Github","text":"<p>We werken met Markdown bestanden.  Dit is bestandsformaat voor platte tekstbestanden en wordt door veel verschillende tools ondersteund. Dit maakt het eenvoudig om versiebeheer op het Algoritmekader toe te passen. </p> <p>Daarnaast maken gebruik van mkdocs en material for mkdocs om de informatie op een interactieve wijze inzichtelijk te maken op de website van het Algoritmekader. </p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#wil-je-een-nieuwe-pagina-aanmaken","title":"Wil je een nieuwe pagina aanmaken?","text":"<p>In het mkdocs.yml bestand staan de settings voor deze website.  In principe hoef je hier niets aan aan te passen, maar als je een nieuwe pagina wilt aanmaken kan het nodig zijn om hier een aanpassing in te doen. Onderdeel van deze settings is namelijk de navigatie voor de site (welke pagina's zijn zichtbaar, en welke pagina's vallen daaronder). Dit staat in de nav: sectie.  Indien je een nieuwe pagina wilt toevoegen, is het vaak nodig deze wijziging ook door te voeren in het mkdocs.yml bestand.</p>"},{"location":"overhetalgoritmekader/over-het-algoritmekader/","title":"Over het Algoritmekader","text":"<p>Het Algoritmekader is een hulpmiddel voor overheden die algoritmes, waaronder AI (artifici\u00eble intelligentie), gebruiken. Hierin vind je de wetten en regels, hulpmiddelen en adviezen per situatie. De informatie in het Algoritmekader is nog niet betrouwbaar. Het is een b\u00e8taversie. De definitieve versie verschijnt eind 2024.</p>"},{"location":"overhetalgoritmekader/over-het-algoritmekader/#verantwoord-gebruik-van-algoritmes","title":"Verantwoord gebruik van algoritmes","text":"<p>In het Algoritmekader vind je informatie over verantwoord gebruik van algoritmes. Bijvoorbeeld:</p> <ul> <li>Wie is waarvoor verantwoordelijk?</li> <li>Hoe voorkom je discriminatie (bias) in een algoritme?</li> <li>Hoe verwerk je gegevens op een veilige manier?</li> <li>Hoe voorkom je mensenrechtenschendingen?</li> <li>Welke inkoopvoorwaarden spreek je af voor algoritmes van een externe partij?</li> </ul> <p>De informatie is bedoeld voor medewerkers van de rijksoverheid, provincies, gemeentes en waterschappen.</p>"},{"location":"overhetalgoritmekader/over-het-algoritmekader/#informatie-van-de-overheid","title":"Informatie van de overheid","text":"<p>Het Algoritmekader is een website van het Ministerie van Binnenlandse Zaken en Koninkrijksrelaties. Het team Data, AI en Algoritmes stelt de informatie samen, op basis van:</p> <ul> <li> <p>alle wetten en regels, zoals de AI-verordening en de Algemene wet bestuursrecht</p> </li> <li> <p>belangrijke hulpmiddelen, zoals de IAMA (Impact Assessment Mensenrechten en Algoritmes)</p> </li> <li>adviezen en ervaringen van experts, zoals wetenschappers</li> </ul>"},{"location":"overhetalgoritmekader/over-het-algoritmekader/#versies","title":"Versies","text":"<p>Algoritmekader is de nieuwe naam van het Implementatiekader 'Verantwoorde inzet van algoritmen'. Dit rapport is de eerste versie. Door het verder ontwikkelen van dit rapport ontstond de website Algoritmekader.</p> <p>Sindsdien verschijnt elke maand een nieuwe b\u00e8taversie van het Algoritmekader. Deze b\u00e8taversies zijn nog niet betrouwbaar. De informatie is onvolledig. Er kunnen fouten in staan.</p> <p>Versie 2.0 is de definitieve, betrouwbare versie van het Algoritmekader. Deze versie verschijnt eind 2024.</p>"},{"location":"overhetalgoritmekader/over-het-algoritmekader/#iedereen-mag-meedenken","title":"Iedereen mag meedenken","text":"<p>De informatie in het Algoritmekader komt open source tot stand. Dat betekent dat iedereen kan meekijken en zijn mening mag geven, of een voorstel mag doen:</p> <ul> <li>Geef je vraag of wijziging door.</li> <li>Sluit je aan bij een werkgroep.</li> <li>Doe mee aan een (online) vergadering zoals onze demo na een nieuwe release van het Algoritmekader.</li> </ul>"},{"location":"overhetalgoritmekader/over-het-algoritmekader/#nieuwsbrief","title":"Nieuwsbrief","text":"<p>Via onze maandelijkse Nieuwsbrief Algoritmes blijf je op de hoogte over de ontwikkelingen van het Algoritmekader.</p>"},{"location":"overhetalgoritmekader/soorten-algoritmes/","title":"Soorten algoritmes","text":"<p>Om te voldoen aan de vereisten, moet je weten met welk soort algoritme je werkt. Gaat het om simpele rekenregels of een AI-systeem? En wat voor impact hebben je algoritmes?</p>"},{"location":"overhetalgoritmekader/soorten-algoritmes/#wanneer-is-het-een-algoritme","title":"Wanneer is het een algoritme?","text":"<p>Met een algoritme bedoelen we een set regels en instructies die een computer uitvoert, met 1 of meer van deze doelen:</p> <ul> <li>problemen oplossen</li> <li>vragen beantwoorden</li> <li>taken of processen uitvoeren</li> <li>besluiten nemen</li> </ul>"},{"location":"overhetalgoritmekader/soorten-algoritmes/#rekenregels","title":"Rekenregels","text":"<p>Rekenregels (ook wel: regelgebaseerde algoritmes) zijn de meest eenvoudige algoritmes. Dit zijn door mensen bedachte regels die het computersysteem precies moet opvolgen: als x gebeurt, dan doe je y.</p> <p>Rekenregels:</p> <ul> <li>zijn expliciet geprogrammeerd en bedacht door mensen</li> <li>bestaan uit vaste stappen om een taak uit te voeren</li> </ul> <p>Rekenregels zijn niet kunstmatig intelligent (AI). Rekenregels kunnen wel onderdeel zijn van een AI-systeem. </p>"},{"location":"overhetalgoritmekader/soorten-algoritmes/#voorbeelden","title":"Voorbeelden","text":"<ul> <li>Eenvoudige chatbots die burgers advies geven op basis van door mensen bedachte beslisbomen.</li> <li>Ondersteuning berekening uitkering dat adviseert over uitkeringen, op basis van door mensen bedachte beslisbomen. </li> <li>Prestatiemonitor dat risicoscores berekent van scholen, op basis van door mensen bedachte regels.</li> </ul>"},{"location":"overhetalgoritmekader/soorten-algoritmes/#zelflerende-algoritmes","title":"Zelflerende algoritmes","text":"<p>Zelflerende algoritmes zijn algoritmes die zichzelf trainen. Dit proces heet machinelearning. Hierdoor worden computers intelligent zonder dat mensen dit precies zo programmeren. Dit is een veel voorkomende vorm van AI. </p> <p>Zelflerende technieken zijn in elk geval:</p> <ul> <li>Supervised learning (gecontroleerd leren): Je algoritme leert van gegevens die je labelt met informatie. Je biedt bijvoorbeeld foto\u2019s aan met de labels: dit is wel een kat, dit is geen kat. Voorbeeld: Virtuele assistent Gem.</li> <li>Unsupervised learning (ongecontroleerd leren): Je laat het algoritme zelf patronen en structuren ontdekken in ongestructureerde gegevens zonder labels. Je biedt bijvoorbeeld foto\u2019s aan van dieren die het algoritme zelf moet groeperen. Voorbeeld: Polis voor participatieplatformen.</li> <li>Reinforcement learning (bekrachtiginsleren): Het algoritme leert door straf en beloning. Het doel is zo hoog mogelijk scoren in zo min mogelijk tijd. Je geeft bijvoorbeeld punten als het algoritme foto\u2019s sorteert die op katten lijken. Voorbeeld: I-VRI voor verkeerslichten.</li> <li>Deep learning: Supervised, unsupervised of reinforcement learning gecombineerd met diepe neurale netwerken. Dit zijn kunstmatige neurale netwerken met veel verschillende lagen. Hierdoor kun je nog ingewikkeldere problemen oplossen. Voorbeeld: Geautomatiseerde gezichtsvergelijking bij het RNI-inschrijfproces.</li> </ul>"},{"location":"overhetalgoritmekader/soorten-algoritmes/#ai-systeem","title":"AI-systeem","text":"<p>Met een AI-systeem bedoelen we een systeem dat kunstmatig intelligent is volgens de Europese AI-verordening. Dit zijn in elk geval systemen die gebruik maken van:</p> <ul> <li>supervised learning</li> <li>unsupervised learning</li> <li>reinforcement learning</li> <li>deep learning</li> </ul> <p>Tip</p> <p>Twijfel je of je algoritme onderdeel is van een AI-systeem? Raadpleeg een expert. Of beschouw het systeem voor de zekerheid als een AI-systeem.</p>"},{"location":"overhetalgoritmekader/soorten-algoritmes/#risicogroepen-ai-systemen","title":"Risicogroepen AI-systemen","text":"<p>AI-systemen vallen mogelijk onder een van de risicogroepen uit de AI-verordening:</p> <ul> <li>Risico op misleiding</li> <li>Hoog-risico-AI-systemen</li> <li>Verboden AI-systemen</li> </ul> <p>Het hangt ervan af waarvoor je dit AI-systeem gebruikt.</p>"},{"location":"overhetalgoritmekader/soorten-algoritmes/#impact-van-algoritmes","title":"Impact van algoritmes","text":"<p>Impactvolle algoritmes moet je publiceren in het Algoritmeregister. Dat moet in elk geval in deze situaties:</p> <ul> <li>Je algoritme is onderdeel van een hoog-risico-AI-systeem. </li> <li>Je algoritme heeft invloed op een proces met rechtsgevolgen voor burgers of organisaties. Bijvoorbeeld het wel of niet krijgen van boetes of subsidies.</li> <li>Je algoritme heeft invloed op de manier waarop de overheid burgers of organisaties indeelt, of contact met hen zoekt. Bijvoorbeeld bij het inschatten van risico\u2019s of het signaleren van fraude.</li> <li>Je overheidsorganisatie vindt zelf dat het algoritme impact heeft op de maatschappij. Bijvoorbeeld omdat het algoritme ingewikkeld is, veel data gebruikt, vaak in de media komt of onderzocht wordt door een toezichthouder.</li> </ul> <p>Een impactvol algoritme kan schade veroorzaken aan de maatschappij. Daarom zijn de regels strenger voor impactvolle dan voor niet-impactvolle algoritmes. </p> <p>Tip</p> <p>Twijfel je of je algoritme impactvol is of niet? Beschouw het algoritme dan als impactvol.</p> <p>Meer uitleg en voorbeelden vind je in de Handreiking Algoritmeregister.</p>"},{"location":"rollen/","title":"Rollen","text":"<ul> <li> <p>Beleid en advies</p> <p>Dit is degene die gaat over wat wenselijk is en adviseert bij de ontwikkeling en/of inzet van een algoritme. Hierbij horen rollen zoals de beleidsmedewerker, ethicus, CIO-adviseur, architect.</p> </li> <li> <p>Jurist</p> <p>Hier komt een tekstje.</p> </li> <li> <p>Ontwikkelaar</p> <p>De Ontwikkelaar omvat alle technische expertise.</p> </li> <li> <p>Projectleider</p> <p>De projectleider richt zich op het co\u00f6rdineren en aansturen van alle betrokken partijen en processen bij de ontwikkeling van algoritmes.</p> </li> </ul>"},{"location":"rollen/beleid-en-advies/","title":"Beleid en advies","text":"<p>Dit is degene die gaat over wat wenselijk is en adviseert bij de ontwikkeling en/of inzet van een algoritme. Hierbij horen rollen zoals de beleidsmedewerker, ethicus, CIO-adviseur, architect.</p>"},{"location":"rollen/jurist/","title":"Jurist","text":""},{"location":"rollen/ontwikkelaar/","title":"Ontwikkelaar","text":""},{"location":"rollen/ontwikkelaar/#algemeen","title":"Algemeen","text":"<p>De Ontwikkelaar omvat alle technische expertise. Dit zijn professionals die zich bezighouden met het analyseren, ontwikkelen, en implementeren van algoritmes en modellen. Dit zijn de specialisten die zorgen voor de technische kant van de algoritmeontwikkeling, inclusief programmeren, opschonen van data, data-analyse en het ontwerpen van informatieprocessen.</p>"},{"location":"rollen/ontwikkelaar/#relevantie","title":"Relevantie","text":"<p>Mensen met technische expertise spelen een cruciale rol bij het verantwoord ontwerpen en ontwikkelen van algoritmes. Zij zorgen ervoor dat algoritmes voldoen aan technische en ethische standaarden, en passen methodes toe om de duurzaamheid, eerlijkheid en transparantie van modellen te waarborgen. Technische experts zijn vaak ook verantwoordelijk voor het testen en optimaliseren van de algoritmes, en voor het implementeren van maatregelen om privacy en gegevensbescherming te waarborgen. In het Algoritmekader zijn er tal van vereisten, maatregelen en hulpmiddelen die specifiek relevant zijn voor technische experts.</p>"},{"location":"rollen/ontwikkelaar/#bijbehorende-functies","title":"Bijbehorende functies","text":"<ul> <li>Data-analist</li> <li>Data-scientist</li> <li>Data-engineer</li> <li>Developer</li> <li>Informatieanalist</li> <li>Softwareontwikkelaar</li> </ul>"},{"location":"rollen/projectleider/","title":"Projectleider","text":""},{"location":"rollen/projectleider/#algemeen","title":"Algemeen","text":"<p>De projectleider richt zich op het co\u00f6rdineren en aansturen van alle betrokken partijen en processen bij de ontwikkeling van algoritmes. Projectleiders zorgen ervoor dat projecten door de verschillende fasen van de levenscyclus van algoritmes worden geleid, van probleemanalyse tot monitoring &amp; beheer, of zelfs uitfasering.</p>"},{"location":"rollen/projectleider/#relevantie","title":"Relevantie","text":"<p>Projectmanagement binnen het Algoritmekader betekent het verbinden van benodigde expertises en het waarborgen dat alle stappen van het ontwikkelproces verantwoord en volgens de gestelde kaders worden uitgevoerd. Projectmanagers maken afspraken over de te navolgen vereisten en stellen prioriteiten in uit te voeren maatregelen. Zij houden contact met opdrachtgevers en verantwoordelijken om te zorgen dat de projectdoelen worden behaald en risico\u2019s worden gemitigeerd. Zij spelen een hoofdrol bij het realiseren van een verantwoorde en effectieve inzet van algoritmes binnen een organisatie.</p>"},{"location":"rollen/projectleider/#bijbehorende-functies","title":"Bijbehorende functies","text":"<ul> <li>Projectleider</li> <li>Product owner</li> <li>Proceseigenaar</li> <li>IT-projectmanager</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/","title":"Voldoen aan wetten en regels","text":"<ul> <li> <p>Vereisten</p> <p>Overzicht van de belangrijkste vereisten voor overheden die algoritmes of AI-systemen ontwikkelen of gebruiken.</p> </li> <li> <p>Maatregelen</p> <p>Overzicht van aanbevolen maatregelen voor verantwoord gebruik van algoritmes en AI-systemen. Het zijn adviezen om te voldoen aan de vereisten voor overheden. Andere maatregelen zijn ook mogelijk.</p> </li> <li> <p>Hulpmiddelen</p> <p>Overzicht van aanbevolen hulpmiddelen voor het verantwoord ontwikkelen, gebruiken, beoordelen en monitoren van algoritmes en AI-systemen.</p> </li> <li> <p>AI-verordening in het kort</p> <p>In de AI-verordening staan de Europese regels voor het verantwoord ontwikkelen en gebruiken van AI. Ongewenste AI is verboden vanaf 2 februari 2025. Andere AI-systemen moeten vanaf 2026 of v\u00f3\u00f3r 2030 voldoen aan bepaalde vereisten.</p> </li> <li> <p>Beslishulp AI-verordening</p> <p>Stel snel en gemakkelijk vast of de AI-verordening geldt voor jouw overheidsorganisatie. En aan welke vereisten je dan moet voldoen.</p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/","title":"AI-verordening in het kort","text":"<p>In de AI-verordening staan de Europese regels voor het verantwoord ontwikkelen en gebruiken van AI. Ongewenste AI is verboden vanaf 2 februari 2025. Andere AI-systemen moeten vanaf 2026 of v\u00f3\u00f3r 2030 voldoen aan bepaalde vereisten.</p> <p>Verordening (EU) 2024/1689 (AI-verordening)</p>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#over-de-ai-verordening","title":"Over de AI-verordening","text":"<p>De AI-verordening is de eerste uitgebreide wet over artifici\u00eble intelligentie (AI) ter wereld. De regels gelden voor alle Europese lidstaten. </p> <p>De AI-verordening trad in werking op 1 augustus 2024 en gaat stap voor stap gelden. De eerste regels gaan in op 2 februari 2025. Vanaf 2 augustus 2025 geldt de volgende set regels. Op 2 augustus 2027 gaan de laatste regels in. Dan is de hele AI-verordening van kracht.</p>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#europese-regels-voor-het-ontwikkelen-en-gebruiken-van-ai","title":"Europese regels voor het ontwikkelen en gebruiken van AI","text":"<p>De AI-verordening geldt in deze 3 situaties samen:</p> <ul> <li>Je ontwikkelt of gebruikt AI.</li> <li>Dit doe je namens een overheid, bedrijf of andere organisatie.</li> <li>Je organisatie is gevestigd in een EU-land.</li> </ul> <p>Het maakt niet uit waar je AI-producten ontwikkelt. Ontwikkel je buiten de EU, maar is je organisatie gevestigd in een EU-land? Dan geldt de EU-verordening.  </p>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#verantwoord-gebruik-van-ai","title":"Verantwoord gebruik van AI","text":"<p>Het doel van de AI-verordening is om verantwoord gebruik van AI te stimuleren in de hele EU. Daarom gelden in alle EU-landen dezelfde regels voor het:</p> <ul> <li>Verkleinen van risico\u2019s voor de gezondheid, veiligheid en grondrechten van mensen</li> <li>Beschermen van de democratie, de rechtsstaat en het milieu</li> </ul> <p>Het gaat dan om nieuwe risico\u2019s, zoals misleiding en discriminatie door AI-systemen. Bestaande regels zoals de Algemene verordening gegevensbescherming (AVG) en de Algemene wet bestuursrecht (Awb) beschermen voor een deel tegen de risico\u2019s van AI. De AI-verordening vult deze regels aan.</p>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#definitie-van-een-ai-systeem","title":"Definitie van een AI-systeem","text":"<p>De AI-verordening geldt voor AI-systemen. Volgens de verordening is dit: </p> <p>'(\u2026) een op een machine gebaseerd systeem dat is ontworpen om met verschillende niveaus van autonomie te werken en dat na de uitrol aanpassingsvermogen kan vertonen, en dat, voor expliciete of impliciete doelstellingen, uit de ontvangen input afleidt hoe output te genereren zoals voorspellingen, inhoud, aanbevelingen of beslissingen.'</p> <p>Hieronder vallen systemen die kunstmatig intelligent zijn door zelflerende technieken zoals:</p> <ul> <li>supervised learning</li> <li>unsupervised learning</li> <li>reinforcement learning (bekrachtiginsleren)</li> <li>deep learning</li> </ul> <p>Onder AI-systemen vallen ook systemen die gebruik maken van op logica en kennis gebaseerde benaderingen (knowledge and logic-based approaches) die leren, redeneren of modelleren mogelijk maken.</p> <p>Symbolische AI is meestal ook een AI-systeem. </p>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#uitzondering","title":"Uitzondering","text":"<p>Onder AI-systemen vallen geen systemen die gebaseerd zijn op door mensen gemaakte regels om automatisch handelingen uit te voeren.</p>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#risicogroepen","title":"Risicogroepen","text":"<p>De AI-verordening deelt AI op in risicogroepen. Hoe groter het risico van AI voor de samenleving, hoe strenger de regels uit de AI-verordening. Het hangt ervan af waarvoor je dit AI-systeem gebruikt.</p>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#risico-op-misleiding","title":"Risico op misleiding","text":"<p>Dit zijn AI-systemen die je gebruikt voor:</p> <ul> <li>interactie met mensen, zoals AI-chatbots</li> <li>genereren van content, zoals afbeeldingen laten maken door Dall-E en of audio en tekst</li> </ul> <p>Over deze systemen moet je transparant zijn. Gebruikers mogen niet denken dat zij te maken hebben met echte mensen of originele content.</p> <p>Zie AI-verordening, hoofdstuk IV.</p>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#hoog-risico-ai-systemen","title":"Hoog-risico-AI-systemen","text":"<p>Dit zijn AI-systemen die je gebruikt als veiligheidsonderdeel van bepaalde producten of AI-systemen die je gebruikt voor bepaalde diensten of processen.</p> <p>'Gebruiken als veiligheidsonderdeel' betekent dat je AI-systeem een belangrijke rol speelt in de veiligheid van een product. En dit product valt onder de harmonisatiewetgeving van de EU, zoals:</p> <ul> <li>machines</li> <li>speelgoed</li> <li>liften</li> <li>uitrusting en beveiligingssystemen voor plaatsen met ontploffingsgevaar</li> <li>radioapparatuur</li> <li>drukapparatuur</li> <li>pleziervaartuigen</li> <li>kabelbaaninstallaties</li> <li>gastoestellen</li> <li>medische hulpmiddelen</li> <li>hulpmiddelen voor het testen van menselijk materiaal (in-vitrodiagnostiek)</li> <li>auto-industrie</li> <li>luchtvaartindustrie</li> </ul> <p>Zie AI-verordening, bijlage I.</p> <p>'Gebruik voor bepaalde diensten of processen' zijn:</p> <ul> <li>Biometrie, zoals het herkennen of indelen van mensen op basis van hun vingerafdruk, gezicht of andere lichamelijke kenmerken.</li> <li>Kritieke infrastructuur, zoals het veilig houden van digitale netwerken en verkeersnetwerken en het leveren van elektriciteit, water, gas en warmte.</li> <li>Onderwijs en beroepsopleiding, zoals het bepalen welke studenten je toelaat en het beoordelen van hun prestaties of gedrag.</li> <li>Werkgelegenheid, personeelsbeheer en toegang tot zelfstandige arbeid, zoals het werven en selecteren van mensen, besluiten nemen die invloed hebben op hun contract en het beoordelen van hun prestaties of gedrag.</li> <li>Essenti\u00eble particuliere en openbare diensten, zoals bepalen wie recht heeft op uitkeringen, gezondheidszorg en andere belangrijke diensten en wie noodhulp krijgt van politie, brandweer en ambulance, het beoordelen van iemands financi\u00eble situatie, fraude opsporen en het bepalen van risico\u2019s en prijzen voor levensverzekeringen en ziektekostenverzekeringen.</li> <li>Rechtshandhaving, zoals iemands kans inschatten om slachtoffer of dader te worden, het gebruik van een leugendetector, het beoordelen van bewijsmateriaal en het opsporen van verdachten.</li> <li>Migratie, asiel en grenzen, zoals inschatten wat de kans is dat iemand gevaarlijk of illegaal is, het behandelen van aanvragen en klachten en het herkennen of opsporen van mensen.</li> <li>Rechtsbedeling en democratische processen, zoals het uitleggen van de wet aan een rechtbank, gerechtshof of de Hoge Raad, advies geven bij een geschil of het be\u00efnvloeden van de uitslag van een verkiezing.</li> </ul> <p>Zie AI-verordening, bijlage III.</p>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#verboden-ai-systemen","title":"Verboden AI-systemen","text":"<p>Dit zijn AI-systemen die:</p> <ul> <li>misleiden</li> <li>misbruik maken van kwetsbaarheden of gevoelige situaties, zoals het overhalen van mensen met schulden om iets te kopen</li> <li>sociale scores bijhouden voor gedrag van mensen en hen hiervoor straffen</li> <li>beoordelen hoe groot het risico is dat iemand een strafbaar feit pleegt</li> <li>afbeeldingen van gezichten \u2018scrapen\u2019 (verzamelen) via internet of bewakingscamera\u2019s en deze opslaan in een databank</li> <li>emoties herkennen van mensen op hun werkplek of op school</li> <li>biometrisch categoriseren: mensen indelen in gevoelige categorie\u00ebn zoals ras en geloof, op basis van lichamelijke kenmerken zoals huidskleur</li> <li>biometrisch identificeren op afstand voor rechtshandhaving, zoals gezichten herkennen via camera\u2019s op een openbaar plein (hiervoor gelden uitzonderingen in ernstige situaties zoals ontvoeringen en terrorisme)</li> </ul> <p>Zie AI-verordening, artikel 5.</p>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#2-februari-2025-stoppen-met-verboden-ai","title":"2 februari 2025: stoppen met verboden AI","text":"<p>Organisaties die verboden AI ontwikkelen of gebruiken, moeten deze producten v\u00f3\u00f3r 2 februari 2025 uitfaseren.</p>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#2-augustus-2026-ai-ontwikkelen-volgens-vereisten","title":"2 augustus 2026: AI ontwikkelen volgens vereisten","text":"<p>Organisaties die AI-systemen ontwikkelen, moeten ervoor zorgen dat deze producten v\u00f3\u00f3r 2026 voldoen aan bepaalde vereisten, zoals:</p> <ul> <li>Personen die toezicht houden op het systeem beschikken over de juiste kennis, kunde en autoriteit.</li> <li>Inputdata is voldoende relevant en representatief, voor zover dat mogelijk is.</li> <li>Als een gebruiksverantwoordelijke aanneemt dat het systeem niet meer voldoet aan de eisen uit de AI-verordening, stelt deze de aanbieder op de hoogte en onderbreekt het gebruik.</li> <li>Organisaties die beslissingen nemen over mensen met behulp van een hoog-risico-AI-systeem, informeren deze mensen hierover.</li> <li>Organisaties die AI gebruiken voor emotieherkenning of biometrische categorisatie van mensen, informeren deze mensen hierover. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#toezicht","title":"Toezicht","text":"<ul> <li>Nationale toezichthouders: controleren organisaties en kunnen straffen opleggen zoals een product uit de handel nemen</li> <li>AI-board: Europese raad voor artifici\u00eble intelligentie (nog in oprichting)</li> <li>AI-bureau: stelt richtlijnen op voor de AI-board</li> <li>Wetenschappelijk panel: advies van wetenschappers</li> <li>Adviesforum: advies van belanghebbenden</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#beslishulp-ai-verordening","title":"Beslishulp AI-verordening","text":"<p>Met de beslishulp AI-verordening bepaal je snel en gemakkelijk of jouw AI-product onder de AI-verordening valt. En wat je dan moet doen.</p>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#help-ons-deze-pagina-te-verbeteren","title":"Help ons deze pagina te verbeteren","text":"<p>Deel je idee, suggestie of opmerking via GitHub of mail ons via algoritmes@minbzk.nl.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/","title":"Hulpmiddelen","text":"<p>Overzicht van aanbevolen hulpmiddelen voor het verantwoord ontwikkelen, gebruiken, beoordelen en monitoren van algoritmes en AI-systemen.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/#richtlijnen-en-andere-hulpmiddelen","title":"Richtlijnen en andere hulpmiddelen","text":"<p>Met hulpmiddelen bedoelen we hulpmiddelen voor verantwoord en effectief gebruik van algoritmes en AI-systemen, zoals:</p> <ul> <li>richtlijnen</li> <li>standaarden</li> <li>leidraden</li> <li>handboeken</li> </ul> <p>Deze hulpmiddelen helpen je bij het op een rij zetten, beoordelen en verbeteren van de kenmerken, prestaties, effecten en risico\u2019s van algoritmes en AI.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/#hoe-we-hulpmiddelen-selecteren","title":"Hoe we hulpmiddelen selecteren","text":"<p>Hulpmiddelen die we aanbevelen, zijn:</p> <ul> <li>relatief bekend onder ambtenaren</li> <li>in gebruik door overheid, wetenschap of industrie </li> <li>positief beoordeeld door gebruikers</li> <li>geschikt voor algoritmes of AI-systemen van overheden</li> </ul> <p>Staat een instrument niet in onze selectie, dan kan het nog steeds een goed instrument zijn voor jouw organisatie. Er zijn dus meer hulpmiddelen mogelijk. We maken een selectie om 2 redenen:</p> <ul> <li>Een selectie is duidelijker. Als we alle hulpmiddelen aanbieden, is het voor gebruikers moeilijker te bepalen welk instrument of welke combinatie het meest geschikt is. Daarvoor lijken de hulpmiddelen te veel op elkaar.</li> <li>Een selectie kunnen we controleren op kwaliteit. We kunnen niet alle hulpmiddelen controleren.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/#sommige-hulpmiddelen-zijn-verplicht","title":"Sommige hulpmiddelen zijn verplicht","text":"<p>Als een instrument verplicht is, staat dit er duidelijk bij. Een verplicht hulpmiddel is bijvoorbeeld de Data protection impact assessment (DPIA).</p> <p>De meeste hulpmiddelen zijn niet verplicht. Bepaal zelf of je er gebruik van maakt. </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/#overzicht-hulpmiddelen","title":"Overzicht hulpmiddelen","text":"HulpmiddelenAssessment List for Trustworthy Artificial Intelligence (ALTAI)Baseline Informatiebeveiliging Overheid (BIO)De Ethische Data AssistentData Protection Impact AssessmentImpact Assessment Mensenrechten en AlgoritmesAlgoritmeregisterThe Fairness HandbookFramework for Meaningful EngagementHandreiking non-discriminatie by designInkoopvoorwaardenDiscriminatie door risicoprofielen - Een mensenrechtelijk toetsingskaderOnderzoekskader algoritmes Auditdienst Rijk 2023Toetsingskader Algoritmes Algemene Rekenkamer"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/#help-ons-deze-pagina-te-verbeteren","title":"Help ons deze pagina te verbeteren","text":"<p>Deel je idee, suggestie of opmerking via GitHub of mail ons via algoritmes@minbzk.nl.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/ALTAI/","title":"Assessment List for Trustworthy Artificial Intelligence (ALTAI)","text":"<p>OntwerpOntwikkelenJuristOntwikkelaarProjectleiderBeleid en adviesPrivacy en gegevensbeschermingDuurzaamheidFundamentele rechtenTechnische robuustheid en veiligheidTransparantieMenselijke controleData</p> <p>Direct naar de ALTAI</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/ALTAI/#hulpmiddel","title":"Hulpmiddel","text":"<p>In 2019 publiceerde de High-Level Expert Group on Artificial Intelligence (AI HLEG), opgericht door de Europese Commissie, de Ethics Guidelines for Trustworthy Artificial Intelligence. De ALTAI is een hulpmiddel dat ontwikkelaars en organisaties helpt hun AI-systemen te beoordelen, gebaseerd op deze Ethics Guidelines for Trustworthy Artificial Intelligence. Het helpt te bepalen of het AI-systeem dat wordt ontwikkeld, ingezet, aangeschaft of gebruikt, voldoet aan zeven vereisten van betrouwbare AI:</p> <ul> <li>Menselijke tussenkomst en toezicht;</li> <li>Technische robuustheid en veiligheid;</li> <li>Privacy en gegevensbeheer;</li> <li>Transparantie;</li> <li>Diversiteit, non-discriminatie en eerlijkheid;</li> <li>Maatschappelijk en ecologisch welzijn;</li> <li>Verantwoordelijkheid</li> </ul> <p>De ALTAI is bedoeld voor zelfevaluatie. Het hulpmiddel is verankerd in de bescherming van de fundamentele rechten van mensen, de term die in de Europese Unie wordt gebruikt om te verwijzen naar de mensenrechten die zijn vastgelegd in de EU-verdragen, het Handvest van de Grondrechten, en het internationale mensenrechtenrecht. </p> <p>De ALTAI is bedoeld voor flexibele inzet: organisaties kunnen gebruikmaken van de relevante onderdelen van dit hulpmiddel voor een specifiek AI-systeem of er elementen aan toevoegen die zij passend achten, rekening houdend met de sector waarin zij opereren. Het helpt organisaties te begrijpen wat betrouwbare AI inhoudt, in het bijzonder welke risico's een AI-systeem zou kunnen meebrengen en hoe deze risico's kunnen worden geminimaliseerd terwijl de kansen van AI worden gemaximaliseerd. Organisaties halen het meeste waarde uit de ALTAI door de gestelde vragen uitgebreid te beantwoorden, die zijn bedoeld om zorgvuldige reflectie te stimuleren en passende vervolgacties aan te formuleren, en een organisatiecultuur te bevorderen die zich inzet voor de ontwikkeling van betrouwbare AI-systemen. Het vergroot het bewustzijn van de mogelijke impact van AI op de samenleving, het milieu, consumenten, werknemers en burgers (in het bijzonder kinderen en mensen die tot gemarginaliseerde groepen behoren). </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/ALTAI/#relevantie","title":"Relevantie","text":"<p>De ALTAI biedt houvast bij het evalueren van in hoeverre een betreffend AI-systeem voldoet aan de zeven vereisten van betrouwbare AI, zoals geformuleerd door de EU. Deze zeven vereisten en de ALTAI hebben samen de basis gevormd voor de AI-verordening. </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/ALTAI/#auteur","title":"Auteur","text":"<p>De ALTAI is ontwikkeld door de High-Level Expert Group on Artificial Intelligence van de Europese Commissie. </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/ALTAI/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"Maatregelpba-03 - Beschrijf waarom een algoritme het probleem moet oplossenowp-06 - Inventariseer welke grondrechten het algoritme kan schenden en maak een belangenafwegingimp-03 - Richt de juiste menselijke controle in van het algoritme6-imp-06-proces-privacyrechtenmon-02 - Beveilig de softwarepba-05 - Beschrijf de wettelijke grondslag voor de inzet van het algoritmeowp-03 - Beschrijf voor welk doel het algoritme persoonsgegevens gebruikt en waarom dit mag3-dat-03-persoonsgegevens-beschrijvendat-04 - Geef data zoals persoonsgegevens een bewaartermijn met een vernietigingsprocedureowp-07 - Maak een lijst van de meest kwetsbare groepen en bescherm hen extraimp-04 - Publiceer impactvolle algoritmes en hoog-risico-AI-systemen in het Algoritmeregisterver-01 - Toets het algoritme op biasver-01 - Controleer regelmatig of het algoritme werkt zoals het bedoeld isowk-03 - Analyseer de privacy-risico\u2019s en neem maatregelen om deze risico\u2019s laag te houdenowk-01 - Ontwerp en ontwikkel het algoritme volgens de principes van \u2018security by design\u2019"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/BIO/","title":"Baseline Informatiebeveiliging Overheid (BIO)","text":"<p>OntwerpImplementatieMonitoring en beheerJuristOntwikkelaarProjectleiderTechnische robuustheid en veiligheid</p> <p>Direct naar de BIO</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/BIO/#hulpmiddel","title":"Hulpmiddel","text":"<p>De BIO is het basisnormenkader voor informatiebeveiliging voor alle overheidslagen, waardoor een gezamenlijke norm voor informatiebeveiliging is ontstaan. Het gebruik van 1 normenkader voor de gehele overheid biedt een aantal voordelen:</p> <ul> <li>Het versterken van de informatieveiligheid door betere afstemming binnen ketens van overheden en andere partijen;</li> <li>Administratieve lastenverlichting bij overheid en bedrijven, zowel afnemers als leveranciers, door uniforme beveiligingsnormen bij de overheid;</li> <li>Aansluiting bij internationale regelgeving en standaarden;</li> <li>Vermindering van onderhoudskosten.</li> </ul> <p>Op dit moment wordt er gewerkt aan de BIO2.0. Omdat de BIO2.0 pas eind 2024 van kracht zal worden, is op 1 juni 2023 de handreiking BIO2.0-opmaat opgeleverd. In deze handreiking is de indeling van de controls, doelstellingen en overheidsmaatregelen in deel 2 van de BIO in lijn gebracht met de 2022-versie van de ISO-27002. Naast tekstuele wijzigingen, zijn ook een aantal overheidsmaatregelen geactualiseerd, vanwege nieuwe dreigingen, zoals ransomware. Naast de verhoging van de feitelijke veiligheid, wordt ook geanticipeerd op aanpassingen die in de BIO2.0 zullen worden doorgevoerd. Overheidsorganisaties doen er goed aan deze actualisatie in hun beveiliging door te voeren.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/BIO/#relevantie","title":"Relevantie","text":"<p>Iedere overheidsorganisatie is verplicht de BIO in te voeren. De BIO is in december 2018 vastgesteld door de ministerraad voor de Rijksoverheid. Daarvoor was door de gemeenten, waterschappen en provincie reeds besloten tot invoering van de BIO. De overheidslagen zijn per 1 januari 2019 gestart met de implementatie van de BIO. Iedere overheidslaag heeft daarvoor zelf een implementatiepad opgesteld. De minister van BZK heeft bepaald dat in het digitale verkeer met het Rijk de BIO wordt gehanteerd.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/BIO/#auteur","title":"Auteur","text":"<p>De interbestuurlijke werkgroep-BIO draagt zorg voor het onderhoud op de BIO. Onder het voorzitterschap van BZK zijn in de werkgroep de 4 overheidskoepels vertegenwoordigd: CIO Rijk, Vereniging Nederlandse Gemeenten, InterProvinciaal Overleg en Unie van Waterschappen. Verder bestaat de werkgroep uit een aantal grote uitvoeringsorganisaties, het Forum Standaardisatie, het Nationaal Cybersecurity Centrum en het Centrum voor Informatiebeveiliging &amp; Privacybescherming. Besluitvorming over de BIO vindt plaats in het kern-IBO, waarin onder voorzitterschap van BZK vertegenwoordigers van de 4 overheidskoepels zitting hebben.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/BIO/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"MaatregelNone"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/DEDA/","title":"De Ethische Data Assistent","text":"<p>ProbleemanalyseOntwerpBeleid en adviesJuristOntwikkelaarProjectleiderDataFundamentele rechten</p> <p>Direct naar DEDA</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/DEDA/#hulpmiddel","title":"Hulpmiddel","text":"<p>DEDA is ontwikkeld door de Data School van de Universiteit Utrecht en bestaat uit een toolkit die helpt bij het in kaart brengen van ethische kwesties bij dataprojecten, bij het documenteren van het beraadslagingsproces en bij de bevordering van de verantwoording aan de diverse stakeholders en het publiek.</p> <p>DEDA bestaat uit een poster voor brainstormsessies, een interactieve vragenlijst en een handleiding. Alle tools zijn gepubliceerd door de Data School van de Universiteit Utrecht.</p> <p>DEDA bevordert verantwoordingsplicht, onderwijst gebruikers, communiceert problemen en ondersteunt projectmanagement.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/DEDA/#relevantie","title":"Relevantie","text":"<p>DEDA is een belangrijk hulpmiddel omdat het helpt bij de vroege identificatie en bespreking van ethische kwesties in dataprojecten. Net als de IAMA, biedt DEDA een gestructureerde aanpak om de implicaties van datagebruik en algoritmische besluitvorming te beoordelen. Het ondersteunt overheden bij het naleven van het zorgvuldigheidsbeginsel en maakt ethische afwegingen inzichtelijk als onderdeel van de besluitvorming. Door een interactieve vragenlijst en documentatie bevordert DEDA verantwoordingsplicht en transparantie.</p> <p>DEDA stimuleert interdisciplinaire samenwerking en helpt beleidsmakers, juristen en ontwikkelaars de ethische dimensies van data-analyse beter te begrijpen. Dit draagt bij aan zorgvuldige en rechtvaardige datagedreven oplossingen binnen de publieke sector. DEDA draagt bij aan transparantie en uitlegbaarheid van datagebruik, essentieel voor publiek vertrouwen.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/DEDA/#auteur","title":"Auteur","text":"<p>DEDA is ontwikkeld door de Data School van de Universiteit Utrecht. DEDA is in nauwe samenwerking met data-analisten ontwikkeld. Inmiddels is DEDA een wijdverspreid instrument, waar de Utrecht Data School ook trainingen en begeleiding bij geeft. Via deze link is meer informatie te vinden. </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/DEDA/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"Maatregelpba-03 - Beschrijf waarom een algoritme het probleem moet oplossen2-owp-02-gebruikte-data"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/DPIA/","title":"Data Protection Impact Assessment","text":"<p>ProbleemanalyseOntwerpDataverkenning en datapreparatieBeleid en adviesJuristProjectleiderPrivacy en gegevensbescherming</p> <p>Direct naar de DPIA</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/DPIA/#hulpmiddel","title":"Hulpmiddel","text":"<p>Is je organisatie van plan persoonsgegevens te verwerken, maar levert dat waarschijnlijk een hoog privacyrisico op?  Dan is je organisatie verplicht eerst een 'data protection impact assessment' (DPIA) uit te voeren.  Als organisatie moet je zelf bepalen of de gegevensverwerking een hoog privacyrisico oplevert.  En je dus een DPIA moet uitvoeren.  De volgende criteria kunnen hierbij helpen:</p> <ul> <li>Wat er in de Algemene verordening gegevensbescherming (AVG) staat over wanneer je een DPIA moet uitvoeren.</li> <li>De lijst van de Autoriteit Persoonsgegevens (AP) met soorten verwerkingen waarvoor je een DPIA moet uitvoeren.</li> <li>De 9 criteria voor een DPIA van de Europese privacytoezichthouders.</li> </ul> <p>De AVG geeft aan dat je in ieder geval een DPIA moet uitvoeren als je als organisatie:</p> <ul> <li>Systematisch en uitgebreid persoonlijke aspecten van mensen beoordeelt en dit gebeurt op basis van geautomatiseerde verwerking van persoonsgegevens, waaronder profiling. En hierop besluiten baseert die gevolgen hebben voor mensen. Bijvoorbeeld dat zij geen lening kunnen afsluiten. Een voorbeeld hiervan is creditscoring.</li> <li>Op grote schaal bijzondere persoonsgegevens verwerkt.</li> <li>Strafrechtelijke gegevens verwerkt.</li> <li>Op grote schaal en systematisch mensen volgt in een publiek toegankelijk gebied. Bijvoorbeeld met cameratoezicht.</li> </ul> <p>Een DPIA moet in een vroeg stadium van de beleids- of projectontwikkeling worden uitgevoerd.  Op dat moment kan namelijk nog zonder vooroordelen worden nagedacht over de gevolgen en kan het voorstel nog makkelijker worden herzien.  Dit voorkomt ook latere, kostbare aanpassingen in processen, herontwerp van systemen of zelfs stopzetten van een project.  Behalve aan het begin van een project kan een DPIA ook op andere momenten en meermaals worden uitgevoerd en geactualiseerd.  Als het voorstel wijzigt, wordt een DPIA opnieuw uitgevoerd.  Als de gegevensverwerkingen of de gevolgen ervan veranderen, moet de DPIA worden geactualiseerd.  Volgens de European Data Protection Board (EDPB) moet een DPIA iedere drie jaar worden ge\u00ebvalueerd.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/DPIA/#relevantie","title":"Relevantie","text":"<p>Een organisatie is bij wet verplicht een DPIA uit te voeren wanneer de verwerking van persoonsgegevens een hoog privacyrisico oplevert. Wanneer hier sprake van is binnen jouw organisatie, dan is de DPIA per definitie relevant voor jou. </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/DPIA/#auteur","title":"Auteur","text":"<p>De DPIA is ontwikkeld door de Europese Unie in het kader van de AVG. </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/DPIA/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"Maatregelowk-03 - Analyseer de privacy-risico\u2019s en neem maatregelen om deze risico\u2019s laag te houden"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/IAMA/","title":"Impact Assessment Mensenrechten en Algoritmes","text":"<p>ProbleemanalyseOntwerpVerificatie en validatieMonitoring en beheerProjectleiderOntwikkelaarJuristBeleid en adviesFundamentele rechtenTransparantie</p> <p>Direct naar het IAMA</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/IAMA/#hulpmiddel","title":"Hulpmiddel","text":"<p>Het Impact Assessment voor Mensenrechten bij de inzet van Algoritmes (IAMA) is een instrument voor overheidsorganen om een interdisciplinaire dialoog en besluitvorming te faciliteren bij de ontwikkeling en inzet van algoritmische systemen.  Het IAMA stelt een reeks vragen die moeten worden besproken en beantwoord om een zorgvuldige afweging van de inzet van algoritmen te waarborgen.  Dit proces is onderverdeeld in drie fasen: voorbereiding, input en throughput, en output en toezicht, waarbij steeds aandacht wordt besteed aan het vierde onderdeel van het IAMA: de impact op mensenrechten.  Het IAMA fungeert als naslagwerk voor de besluitvorming en is gekoppeld aan andere relevante richtlijnen en instrumenten, zoals de gegevensbeschermingseffectbeoordeling (ook wel DPIA).  Hierdoor biedt het een overkoepelend kader dat helpt om algoritmen verantwoord te implementeren en mogelijke risico\u2019s, zoals inbreuken op grondrechten, te identificeren en te mitigeren.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/IAMA/#relevantie","title":"Relevantie","text":"<p>Het IAMA kan op dit moment op veel politieke en internationale belangstelling rekenen.  In zowel de Eerste als Tweede Kamer zijn hierover moties ingediend en vragen gesteld.  Daarbij is het IAMA een van de weinige instrumenten in de EU die een interdisciplinaire discussie rondom (de ontwikkeling, inzet en monitoring van) algoritmes, AI en grondrechten initieert en bevordert. </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/IAMA/#auteur","title":"Auteur","text":"<p>Het IAMA is ontwikkeld door de Utrecht Data School. De auteurs van het IAMA zijn prof. mr. Janneke Gerards, dr. Mirko Tobias Sch\u00e4fer, Arthur Vankan en Iris Muis, allen werkzaam aan de Universiteit Utrecht. Opdrachtgever voor de ontwikkeling is het Ministerie van Binnenlandse Zaken.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/IAMA/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"<p>Geen maatregelen beschikbaar voor dit hulpmiddel.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/IAMA/#bronnen","title":"Bronnen","text":"<p>Impact Assessment Mensenrechten en Algoritmes</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/IAMA/#voorbeeld","title":"Voorbeeld","text":"<p>Benieuwd naar ervaringen in de praktijk? Bekijk het rapport IAMA in Actie voor de lessons learned van 15 IAMA-trajecten bij Nederlandse overheidsorganisaties. </p> <p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/algoritmeregister/","title":"Algoritmeregister","text":"<p>Monitoring en beheerProjectleiderOntwikkelaarTransparantie</p> <p>Direct naar het Algoritmeregister</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/algoritmeregister/#hulpmiddel","title":"Hulpmiddel","text":"<p>De regering wil dat de overheid algoritmes verantwoord gebruikt.  Mensen moeten erop kunnen vertrouwen dat algoritmes voldoen aan de waarden en normen van de samenleving.  En er moet uitleg zijn over hoe algoritmes werken.  Het Algoritmeregister helpt hierbij.  Wanneer overheidsorganisaties open zijn over algoritmes en hun toepassing, kunnen burgers, organisaties en media de overheid kritisch volgen.</p> <p>Je kunt hier meer lezen over de doelen van het Algoritmeregister.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/algoritmeregister/#relevantie","title":"Relevantie","text":"<p>In de Handreiking Algoritmeregister staan bruikbare handvatten voor overheidsorganisaties om met publicatie van hun algoritmes aan de slag te gaan.  Hierin wordt bijvoorbeeld duidelijkheid gegeven over welke doelen we ermee bereiken, welke algoritmes erin thuishoren en welke organisaties erin kunnen publiceren.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/algoritmeregister/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"Maatregelimp-04 - Publiceer impactvolle algoritmes en hoog-risico-AI-systemen in het Algoritmeregister"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/algoritmeregister/#bronnen","title":"Bronnen","text":"<p>Algoritmeregister</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/algoritmeregister/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/fairness-handbook/","title":"The Fairness Handbook","text":"<p>ProbleemanalyseOntwerpProjectleiderBias en non discriminatieFundamentele rechten</p> <p>Direct naar het Fairness Handbook</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/fairness-handbook/#hulpmiddel","title":"Hulpmiddel","text":"<p>Het Fairness Handbook biedt overheidsorganisaties een gedetailleerde richtlijn om eerlijkheid in algoritmen te waarborgen en schadelijke vooroordelen binnen AI-systemen te verminderen. Het handboek, dat origineel is ontwikkeld voor de Gemeente Amsterdam, richt zich op het voorkomen en mitigeren van vooroordelen en oneerlijke uitkomsten (bias) door middel van een gestructureerde Fairness Pipeline. Deze pipeline behandelt alle fasen van het ontwikkelproces, van het formuleren van het probleem tot de uiteindelijke implementatie en monitoring. Dit hulpmiddel biedt inzicht in de soorten schadelijke effecten van AI (zoals representatiebias en denigratieschade) en introduceert specifieke technieken, zoals het uitvoeren van een bias-analyse en het gebruik van contra-feitelijke scenario's (counterfactual fairness), om te controleren of de algoritmen rechtvaardige resultaten opleveren.</p> <p>Naast praktische technieken voor het meten en mitigeren van vooroordelen, definieert het Fairness Handbook verschillende eerlijkheidsprincipes en bijbehorende statistische metrics. Deze metrics helpen ontwikkelaars en beleidsmakers om de prestaties van modellen te analyseren en verschillen in modelprestaties tussen verschillende groepen te detecteren. Door de nadruk te leggen op transparantie, zowel in de keuze van datasets als in de manier waarop het model beslissingen neemt, helpt het handboek om het vertrouwen in AI-systemen te vergroten en discriminerend gedrag in algoritmen te verminderen.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/fairness-handbook/#relevantie","title":"Relevantie","text":"<p>Het Fairness Handbook biedt ondersteuning voor overheden die streven naar verantwoorde, niet-discriminerende algoritmische besluitvorming. Het handboek ondersteunt overheidsinstanties bij het identificeren en corrigeren van vooroordelen in datasets en algoritmes, waardoor het risico op schadelijke effecten, zoals ongelijke verdeling van kansen of kwaliteit van dienstverlening, wordt geminimaliseerd. Het hulpmiddel sluit nauw aan bij andere hulpmiddelen, zoals de IAMA, door richtlijnen te geven voor het beoordelen van specifieke eerlijkheidsaspecten in de context van datagebruik en algoritmeontwikkeling.</p> <p>Door de combinatie van technische en niet-technische benaderingen bevordert het Fairness Handbook een holistische benadering van algoritmische eerlijkheid. Er wordt rekening gehouden met zowel de technische als de sociale en ethische dimensies. Dit maakt het een bruikbaar hulpmiddel voor diverse overheidsprojecten, waaronder de ontwikkeling van AI-toepassingen in het sociaal domein en besluitvormingsprocessen waarbij kansengelijkheid van groot belang is.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/fairness-handbook/#auteurs-en-ontwikkeling","title":"Auteurs en Ontwikkeling","text":"<p>Het Fairness Handbook is ontwikkeld in 2022 door de Gemeente Amsterdam, met als doel de eerlijkheid en transparantie van haar AI-systemen te verbeteren. Het project is tot stand gekomen in samenwerking met diverse stakeholders, waaronder datawetenschappers, ethici en beleidsmakers, om ervoor te zorgen dat het handboek aansluit bij de bredere maatschappelijke behoeften en regelgeving. Door deze samenwerking biedt het Fairness Handbook een gebalanceerd perspectief, met aandacht voor zowel technische oplossingen als ethische en juridische overwegingen die nodig zijn voor verantwoorde AI-toepassingen.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/fairness-handbook/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"Maatregeldat-01 - Controleer de datakwaliteitver-01 - Toets het algoritme op biasimp-02 - Doe aselecte steekproeven om algoritmes met 'risicogestuurde selectie\u2019 te controleren"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/fairness-handbook/#bronnen","title":"Bronnen","text":"<p>The Fairness Handbook</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/fairness-handbook/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld van het gebruik van het Fairness Handbook op het gebied van algoritmen? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/framework-meaningful-engagement/","title":"Framework for Meaningful Engagement","text":"<p>ProbleemanalyseOntwerpProjectleiderBeleid en adviesMenselijke controleTransparantieFundamentele rechten</p> <p>Direct naar het Framework for Meaningful Engagement</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/framework-meaningful-engagement/#hulpmiddel","title":"Hulpmiddel","text":"<p>Het Framework for Meaningful Engagement biedt organisaties een praktische aanpak om verschillende stakeholders effectief te betrekken in processen rondom AI en algoritmes. Het beschrijft stapsgewijs hoe men betrokkenheid kan ontwerpen en uitvoeren, met de nadruk op drie pijlers:</p> <ol> <li>een gedeelde doelstelling</li> <li>een betrouwbaar proces</li> <li>een zichtbare impact</li> </ol> <p>Het framework helpt organisaties om input van belanghebbenden daadwerkelijk te integreren, wat leidt tot duurzamere, inclusievere besluitvorming.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/framework-meaningful-engagement/#relevantie-voor-het-algoritmekader","title":"Relevantie voor het Algoritmekader","text":"<p>Betekenisvolle betrokkenheid van stakeholders is cruciaal voor verantwoord algoritmegebruik. Voor overheden biedt dit framework handvatten om transparanter te zijn over de ontwikkeling en impact van algoritmes en om een goed proces in te richten bij het gebruik van een algoritme. Dit sluit aan bij eisen rond menselijke controle.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/framework-meaningful-engagement/#auteurs-en-ontwikkeling","title":"Auteurs en ontwikkeling","text":"<p>Het framework is ontwikkeld door de European Center for Not-for-Profit Law Stichting (ECNL) en SocietyInside, als onderdeel van de Deense Tech for Democracy Initiative. De totstandkoming vond plaats via een consultatieproces met bijdragen van meer dan 150 individuen en organisaties wereldwijd, waaronder belanghebbenden uit het maatschappelijk middenveld, bedrijfsleven en overheden. Het framework bouwt voort op de VN-richtlijnen voor bedrijfs- en mensenrechten.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/framework-meaningful-engagement/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"Maatregelimp-03 - Richt de juiste menselijke controle in van het algoritmever-03 - Controleer regelmatig of het algoritme voldoet aan alle wetten en regels en het eigen beleidver-01 - Controleer regelmatig of het algoritme werkt zoals het bedoeld isowp-06 - Inventariseer welke grondrechten het algoritme kan schenden en maak een belangenafwegingowp-07 - Maak een lijst van de meest kwetsbare groepen en bescherm hen extrapba-01 - Beschrijf het probleem dat het algoritme moet oplossenpba-02 - Beschrijf het doel van het algoritmepba-03 - Beschrijf waarom een algoritme het probleem moet oplossenpba-04 - Overleg regelmatig met belanghebbendenorg-01 - Bepaal of er genoeg experts beschikbaar zijn"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/framework-meaningful-engagement/#bronnen","title":"Bronnen","text":"<ul> <li>ECNL - Framework for Meaningful Engagement</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/","title":"Handreiking non-discriminatie by design","text":"<p>OntwikkelenImplementatieProjectleiderOntwikkelaarBias en non discriminatieFundamentele rechten</p> <p>Direct naar de Handreiking non-discriminatie by design</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/#hulpmiddel","title":"Hulpmiddel","text":"<p>Deze handreiking legt uit welke vragen en principes leidend zijn bij het ontwikkelen en implementeren van een AI-systeem met het oog op het discriminatieverbod, vanuit zowel juridisch, technisch, als organisatorisch perspectief. De handreiking is een praktisch toepasbaar ontwerpkader dat ontwikkelaars helpt om al in de ontwikkelfase van een AI-systeem discriminerende patronen zoveel mogelijk te identificeren, te voorkomen en te bestrijden.</p> <p>Er zijn 4 uitgangspunten die leidend zijn in de handreiking:</p> <ol> <li>Diversiteit</li> <li>Context</li> <li>Controleerbaarheid</li> <li>Evaluatie.</li> </ol>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/#relevantie","title":"Relevantie","text":"<p>Stuk over relevantie voor het AK volgt nog. Net als bij het IAMA, is dit document een manier om een multidisciplinaire discussie te faciliteren en stimuleren. Hierbij kunnen verschillende rollen betrokken worden door de projectleider: data-scientists, juristen, de functionaris gegevensbescherming (FG), aangevuld met domeinspecialisten.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/#wanneer-toepassen","title":"Wanneer toepassen?","text":"<p>De handreiking is primair geschreven voor teams die zelf AI-systemen bouwen. Het gaat in op verschillende fases van ontwikkeling: probleemanalyse, dataverkenning en datapreparatie, ontwikkeling, implementatie en evaluatie. Daarnaast kan deze handreiking dienen voor opdrachtgevers van AI-systemen, ofwel om vooraf offrerende partijen te vragen aan te geven hoe zij rekening zullen houden met de diverse punten uit de handreiking, ofwel om tijdens het proces mee te kijken en op relevante punten aanwijzingen te geven, ofwel om achteraf te controleren of een opgeleverd product aan alle relevante voorwaarden voldoet. </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/#relatie-tot-iama","title":"Relatie tot IAMA","text":"<p>Gebruikers van zowel de Handreiking non-discriminatie by design als het IAMA geven enkele verschillen tussen de twee instrumenten. Deze bevindingen zijn te vinden in het rapport 'Bekendheid, toepasbaarheid en toegevoegde waarde handreiking \u201cnon-discriminatie by design\"' van de Auditdienst Rijk.</p> <p>Zij geven aan dat het IAMA wordt gezien als instrument voor het nagaan van de impact van grondrechten in algemenere zin, waar de Handreiking zich specifiek richt op discriminatie. De handreiking bevat dan weer meer praktische voorbeelden die kunnen helpen bij begrip en afwegingen, waar de IAMA wat abstracter is.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/#relatie-tot-het-fairness-handbook","title":"Relatie tot het Fairness Handbook","text":"<p>Over het Fairness Handbook werd in het rapport aangegeven dat het een technischere uitwerking bevat dan de Handreiking. Het Handbook biedt wellicht meer houvast voor iemand die analyses maakt om inzicht te geven in de prestaties van het algoritme met het oog op \u2018fairness\u2019 en \u2018bias\u2019. Dit komt doordat het Handbook meer details geeft over de technische stappen die nodig zijn om te komen tot bepaalde analyses.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/#relatie-tot-toetsingskader-risicoprofielen-van-college-voor-de-rechten-van-de-mens","title":"Relatie tot Toetsingskader Risicoprofielen van College voor de Rechten van de Mens","text":"<p>Ook het toetsingskader voor discriminatie door risicoprofielen van het College voor de Rechten van de Mens kan worden gebruikt om te bepalen of er discriminatie plaatsvindt. Dit kader is afkomstig uit 2021 en er wordt gewerkt aan een nieuwe versie, die waarschijnlijk eind 2024 zal verschijnen. De verschillende stappen die daarin gebruikt worden om te bepalen of een risicoprofiel tot discriminatie leidt op grond van ras of nationaliteit, zijn zeer relevant. Daarvoor hebben zij een beslisboom ontwikkeld.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"Maatregeldat-01 - Controleer de datakwaliteitver-01 - Toets het algoritme op biasimp-02 - Doe aselecte steekproeven om algoritmes met 'risicogestuurde selectie\u2019 te controleren"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/#bronnen","title":"Bronnen","text":"<ul> <li>Handreiking non-discriminatie by design</li> <li>Onderzoeksrapport Bekendheid, toepasbaarheid en toegevoegde waarde handreiking 'non-discriminatie by design'</li> <li>Toetsingskader voor discriminatie door risicoprofielen van het College voor de Rechten van de Mens (2021)</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld van het gebruik van de Handreiking non-discriminatie by design op het gebied van algoritmen? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/inkoopvoorwaarden/","title":"Inkoopvoorwaarden","text":"<p>ProbleemanalyseOntwerpJuristProjectleiderBeleid en adviesPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/inkoopvoorwaarden/#hulpmiddel","title":"Hulpmiddel","text":"<p>Voorbeelden of templates van inkoopvoorwaarden kunnen helpen om een contract op te stellen dat een organisatie in staat stelt veilige en verantwoorde algoritmen of AI-systemen in te kopen. Deze worden ook wel eens modelcontractbepalingen genoemd. Deze voorwaarden of bepalingen kunnen opgenomen worden wanneer er een contract wordt afgesloten met een leverancier van een algoritme of algoritmisch systeem.  Er kunnen dan bijvoorbeeld beperkingen gelden om onaanvaardbare risico's van AI te vermijden, of bepaalde voorwaarden gesteld worden waaraan een algoritme juist moet voldoen.  Ook kunnen bepaalde voorwaarden worden opgenomen op basis van de vereisten in het Algoritmekader.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/inkoopvoorwaarden/#europese-commissie","title":"Europese Commissie","text":"<p>De Europese contractvoorwaarden voor AI bieden aanbestedende organisaties de mogelijkheid om specifieke clausules op te nemen in de overeenkomst. Op deze manier worden afspraken gemaakt over onderwerpen die in lijn zijn met de aankomende AI-Act. Er zijn 2 versies van de AI-inkoopvoorwaarden opgesteld: een set voorwaarden voor AI-toepassingen met een hoog-risicoprofiel en een set voorwaarden voor AI-toepassingen met een laag-risicoprofiel.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/inkoopvoorwaarden/#gemeente-amsterdam","title":"Gemeente Amsterdam","text":"<p>De Europese contractvoorwaarden voor AI zijn gebaseerd op onder andere de modelbepalingen die de Gemeente Amsterdam al eerder opstelde. Deze dienen als voorbeeld voor andere gemeenten die algoritmische toepassingen willen inkopen.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/inkoopvoorwaarden/#ai-module-bij-arbit-2022","title":"AI-module bij ARBIT-2022","text":"<p>De AI-module bij de ARBIT is gebaseerd op het gepubliceerd model van de Europese Commissie dat hierboven beschreven wordt. Via een verwijzing in de gebruikte modelovereenkomst kan de AI-module onderdeel gaan uitmaken van een onder de ARBIT te sluiten overeenkomst.</p> <p>De ARBIT zijn de Algemene Rijksinkoopvoorwaarden bij IT\u2011overeenkomsten (ARBIT) en zijn bedoeld voor kleine en middelgrote IT-inkopen door de overheid. Lees meer hierover op de website van PIANOo.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/inkoopvoorwaarden/#relevantie","title":"Relevantie","text":"<p>Steeds meer organisaties kopen algoritmische toepassingen in die veel impact hebben op gebruikers of beslissingen. Het is daarom van belang dat aanbestedende overheidsorganisaties afspraken maken met leveranciers, zodat de werking van de algoritmische toepassing transparant is en op een veilige en verantwoorde manier gebruikt wordt. Verschillende organisaties hebben daarom (voorbeeld-)contractvoorwaarden voor het inkopen van AI-systemen beschikbaar gesteld. Denk aan de Europese Commissie en de Gemeente Amsterdam.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/inkoopvoorwaarden/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"Maatregeldat-08 - Zorg dat je controle of eigenaarschap hebt over de dataowp-16 - Laat aanbieder(s) bewijs leveren dat de door hen ontwikkelde algoritmes geen inbreuk maken op de auteursrechten van derden met de trainingsdata en de output.owp-15 - Maak het leveren van bewijs voor het voldoen aan de vereisten voor algoritmes onderdeel van de beoordeling van een inschrijving.owp-13 - Maak vereisten voor algoritmes onderdeel van algemene inkoopvoorwaarden en de contractovereenkomst.owp-23 - Laat de aanbieder aangeven welke mate van opleiding en ondersteuning bij de implementatie nodig is om de beoogde algoritmes verantwoord te gebruiken.2-owp-11-data-beschikbaarheid"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/inkoopvoorwaarden/#bronnen","title":"Bronnen","text":"<ul> <li>Modelbepalingen voor gemeenten voor verantwoord gebruik van Algoritmische toepassingen</li> <li>Contractvoorwaarden voor het inkopen van artifici\u00eble intelligentie (AI)</li> <li>AI-module bij de modelovereenkomst ARBIT-2022</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/inkoopvoorwaarden/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld van het gebruik van modelbepalingen of contractvoorwaarden op het gebied van algoritmen? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/mensenrechtelijktoetsingskader/","title":"Discriminatie door risicoprofielen - Een mensenrechtelijk toetsingskader","text":"<p>ProbleemanalyseOntwerpBeleid en adviesJuristBias en non discriminatieFundamentele rechten</p> <p>Direct naar het Mensenrechtelijk Toetsingskader</p> <p>Let op!</p> <p>Dit toetsingskader wordt momenteel vernieuwd. Een nieuwe versie wordt hier gepubliceerd zodra beschikbaar. </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/mensenrechtelijktoetsingskader/#hulpmiddel","title":"Hulpmiddel","text":"<p>Dit toetsingskader helpt overheidsfunctionarissen om te bepalen wanneer risicoprofielen leiden tot discriminatie op grond van ras of nationaliteit. Het presenteert de (denk)stappen die doorlopen moeten worden om te toetsen of een risicoprofiel binnen de grenzen van het discriminatieverbod blijft. Het is belangrijk om te benadrukken dat het hierbij gaat om de juridische ondergrens van het discriminatieverbod, zoals geformuleerd door internationale en nationale rechters. Aan de regels uit dit toetsingskader moet de overheid zich dus ten minste houden. Dit laat onverlet dat de overheid kan beslissen om strengere regels te hanteren.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/mensenrechtelijktoetsingskader/#noot-voor-de-lezer","title":"Noot voor de lezer","text":"<p>Dit toetsingskader is gebaseerd op geldende verdragen, wetten en jurisprudentie tot aan november 2021. De normen en jurisprudentie op dit terrein zijn echter continu in ontwikkeling. Zo heeft het gerechtshof Den Haag in 2023 in een belangrijke uitspraak vastgesteld dat het gebruik van etnische kenmerken als een van de selectiecriteria voor controle, zoals dat plaatsvond binnen het \u2018Mobiel Toezicht Veiligheid\u2019 door de Koninklijke Marechaussee, in strijd is met het discriminatieverbod.</p> <p>Ook op Europees niveau is er nieuwe relevante jurisprudentie verschenen. Dit alles biedt een verdere aanscherping en concretisering van de geldende normen. Het College werkt daarom op dit moment aan een aangepast en doorontwikkeld toetsingskader waarin alle nieuwe ontwikkelingen worden verwerkt. </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/mensenrechtelijktoetsingskader/#relevantie","title":"Relevantie","text":"<p>Het spreekt voor zich dat overheidsinstanties zich bij het uitvoeren van hun taken moeten onthouden van discriminatie. Recente voorbeelden zoals de Kinderopvangtoeslagaffaire laten echter zien dat het in de praktijk toch mis kan gaan. Duidelijk is dat discriminerende elementen toch in risicoprofielen voorkomen. Dat heeft er mede mee te maken dat het voor medewerkers van uitvoeringsinstanties niet altijd duidelijk is wat in welke context wel en niet mag.</p> <p>Er komt daarbij veel kijken bij de beoordeling of een risicoprofiel binnen de grenzen van het discriminatieverbod blijft, zeker wanneer afkomst-gerelateerde kenmerken als selectiecriteria binnen dit risicoprofiel een rol spelen. In alle gevallen zal nauwkeurig afgewogen moeten worden welke kenmerken voor welke doeleinden worden gebruikt en hoe zich dat verhoudt tot het toepasselijke wettelijke kader. Dit toetsings- kader biedt handvatten voor het maken van deze afweging. </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/mensenrechtelijktoetsingskader/#auteur","title":"Auteur","text":"<p>Het Mensenrechtelijk Toetsingskader is ontwikkeld door het College voor de Rechten van de Mens.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/mensenrechtelijktoetsingskader/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"Maatregelver-01 - Toets het algoritme op bias"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/onderzoekskader-adr/","title":"Onderzoekskader algoritmes Auditdienst Rijk 2023","text":"<p>OntwerpImplementatieMonitoring en beheerProjectleiderBeleid en adviesGovernance</p> <p>Direct naar het Onderzoekskader Algoritmes</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/onderzoekskader-adr/#hulpmiddel","title":"Hulpmiddel","text":"<p>Dit onderzoekskader is een instrument om de beheersing van algoritmes in kaart te brengen. Het geeft inzicht in de risico\u2019s die algoritmes met zich meebrengen en met welke maatregelen deze risico\u2019s beheerst (kunnen) worden. </p> <p>Het onderzoekskader is in eerste instantie bedoeld als instrument voor auditors om de beheersing en werking van algoritmes binnen overheidsorganisaties te onderzoeken, maar is ook bruikbaar voor andere partijen om inzicht te krijgen in de huidige en/of gewenste beheersing van algoritme(s).</p> <p>Het kader richt zich op algoritmes die binnen overheidsorganisaties gebruikt worden. Het is ingericht op algoritmes die zelf van voorbeelden leren, zoals machine learning, maar is ook toepasbaar op regelgebaseerde algoritmes. Het kader is ook bruikbaar voor andere organisaties en kan bij verschillende fases van de levenscyclus van een algoritme worden ingezet. Mogelijk zijn niet alle thema\u2019s relevant gezien de context van het algoritme. De opdrachtgever en auditor(s) dienen daarom voorafgaand aan een onderzoek te analyseren en te bepalen welke thema\u2019s en onderwerpen worden onderzocht. Het onderzoekskader is ingedeeld in 4 thema\u2019s: </p> <ul> <li>Sturing en Verantwoording</li> <li>Privacy</li> <li>Data en Model</li> <li>Informatiebeveiliging</li> </ul> <p>Ethiek raakt alle thema\u2019s en komt daarom bij elk thema in het kader terug. Elk thema bevat deelgebieden en de risico\u2019s en beheersmaatregelen die daarbij horen (inclusief de bron). Ook deze kunnen weer gerelateerd zijn aan een ander thema. Een apart werkbestand voor auditors is opgesteld wat kan worden gebruikt bij het uitvoeren van een onderzoek. Dit bestand heeft dezelfde opbouw, maar bevat ook invulvelden om als auditor het risico (kans x impact) in te schatten en de bevindingen op te nemen. Daarnaast zijn toelichtingen en voorbeelden van checks en evidence opgenomen per beheersmaatregel.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/onderzoekskader-adr/#relevantie","title":"Relevantie","text":"<p>Het onderzoekskader is ontwikkeld met behulp van nationale en internationale richtlijnen en kaders, rapporten en instrumenten, zoals de Ethics guidelines for trustworthy AI van de Europese Commissie (EC), Impact Assessment voor Mensenrechten bij de inzet van Algoritmes (IAMA), de richtlijnen van het ministerie van JenV, het DPIA model Rijksoverheid (gebaseerd op o.a. AVG) en de Guiding Principles Trustworthy AI Investigations van NOREA (beroepsvereniging IT-auditors Nederland). De bron van de betreffende risico\u2019s en beheersmaatregelen is tevens opgenomen.</p> <p>Dit onderzoekskader is erg overkoepelend (net als het toetsingskader van de Algemene Rekenkamer). Er zijn dan ook veel maatregelen in het Algoritmekader gebaseerd op maatregelen die in het kader van de ADR staan. Bekijk alle maatregelen van het Algoritmekader hier.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/onderzoekskader-adr/#auteur","title":"Auteur","text":"<p>Het Onderzoekskader Algoritmes is ontwikkeld door de Auditdienst Rijk  </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/onderzoekskader-adr/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"<p>Geen maatregelen beschikbaar voor dit hulpmiddel.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/toetsingskader-algemene-rekenkamer/","title":"Toetsingskader Algoritmes Algemene Rekenkamer","text":"<p>Monitoring en beheerVerificatie en validatieProjectleiderBeleid en adviesJuristGovernance</p> <p>Direct naar het Toetsingskader</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/toetsingskader-algemene-rekenkamer/#hulpmiddel","title":"Hulpmiddel","text":"<p>Het toetsingskader omvat 5 perspectieven op algoritmes, elk met hun belangrijkste risico's geformuleerd. Het gaat om Sturing en Verantwoordelijkheid, Model en Data, Privacy, IT-beheer en Ethiek. Voor elk risico is er een specifieke onderzoeksvraag opgesteld. Door deze vragen te beantwoorden en een score toe te kennen, krijgt de gebruiker inzicht in hoe goed het gekozen algoritme de risico's beheerst.</p> <p>De mate van risico voor een specifiek algoritme wordt bepaald door twee factoren: de gebruikte geavanceerde technieken en de impact van het algoritme op de burger.</p> <p>Het toetsingskader is in eerste instantie bedoeld als toetsinstrument voor auditors (controleurs en toezichthouders). Zij kunnen dit kader gebruiken om de risico's van het beoordeelde algoritme in beeld te krijgen.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/toetsingskader-algemene-rekenkamer/#relevantie","title":"Relevantie","text":"<p>Het digitale toetsingskader 'Aandacht voor algoritmes' is ontwikkeld vanwege de toenemende maatschappelijke aandacht voor algoritmes en de behoefte aan een integraal instrument voor toetsing en analyse. Het is gebaseerd op bestaande informatie en raamwerken, zowel binnen het Rijk als door externe partijen zoals NOREA en grote accountantskantoren.</p> <p>Dit onderzoekskader is erg overkoepelend (net als het onderzoekskader van de ADR). Er zijn dan ook veel maatregelen in het Algoritmekader gebaseerd op maatregelen die in het kader van de Algemene Rekenkamer staan. Bekijk alle maatregelen van het Algoritmekader hier.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/toetsingskader-algemene-rekenkamer/#auteur","title":"Auteur","text":"<p>Het Toetsingskader Algoritmes is ontwikkeld door de Algemene Rekenkamer </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/toetsingskader-algemene-rekenkamer/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"<p>Geen maatregelen beschikbaar voor dit hulpmiddel.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/","title":"Maatregelen","text":"<p>Overzicht van aanbevolen maatregelen voor verantwoord gebruik van algoritmes en AI-systemen. Het zijn adviezen om te voldoen aan de vereisten voor overheden. Andere maatregelen zijn ook mogelijk.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/#alle-maatregelen-zijn-adviezen","title":"Alle maatregelen zijn adviezen","text":"<p>De maatregelen zijn niet verplicht. Het zijn adviezen uit:</p> <ul> <li>Toetsingskader Algoritmes, Algemene Rekenkamer</li> <li>Onderzoekskader algoritmes, Auditdienst Rijk</li> <li>nationale en internationale standaarden (NEN, JTC21 en ISO)</li> <li>onze werkgroepen</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/#voorbeeld","title":"Voorbeeld","text":"<p>Onderzoek het ontwikkelde algoritme op onbewuste vooringenomenheid (discriminatie) door middel van een bias-analyse.</p> <p>Deze maatregel helpt om te voldoen aan de vereiste om niet te discrimineren. Maar deze maatregel is niet verplicht. Je organisatie mag ook eigen maatregelen nemen. Zolang je uiteindelijk maar voldoet aan de vereiste.</p> <p>Tip</p> <p>Aantal maatregelen verschilt per situatie</p> <p>Welke maatregelen handig zijn in jouw situatie, hangt af van:</p> <ul> <li>de fase in de levenscyclus van je project</li> <li>de vereisten waar jouw organisatie aan moet voldoen</li> <li>jouw rol in de organisatie</li> </ul> <p>Tip</p> <p>Met \u00e9\u00e9n maatregel voldoe je soms aan meerdere vereisten.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/#help-ons-deze-pagina-te-verbeteren","title":"Help ons deze pagina te verbeteren","text":"<p>Deel je idee, suggestie of opmerking via GitHub of mail ons via algoritmes@minbzk.nl.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-01-benodigde-expertise-en-capaciteit/","title":"Bepaal of er genoeg experts beschikbaar zijn","text":"<p>org-01OrganisatieverantwoordelijkhedenProjectleiderBeleid en adviesGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-01-benodigde-expertise-en-capaciteit/#maatregel","title":"Maatregel","text":"<p>Bepaal welke expertise en capaciteit noodzakelijk is voor het ontwikkelen, inkopen en gebruiken van algoritmes en stel vast of er voldoende expertise en capaciteit beschikbaar is.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-01-benodigde-expertise-en-capaciteit/#toelichting","title":"Toelichting","text":"<ul> <li>Bepaal welke expertise en capaciteit binnen de organisatie noodzakelijk is voor het ontwikkelen, inkopen en gebruiken van algoritmes.</li> <li>Dit is sterk afhankelijk van de specifieke toepassing en de inzichten die voortkomen uit risicoanalyses. Hoe complexer en risicovoller de toepassing, des te meer expertise en capaciteit noodzakelijk is. </li> <li>Interne en externe actoren die betrokken zijn bij het ontwikkelen, inkopen en gebruik moeten over voldoende expertise en capaciteit beschikken om hun taken naar behoren uit te voeren.</li> <li>Stel vast of er afhankelijkheden van externe aanbieders ontstaan.  </li> <li>Bepaal voorafgaand aan het (laten) ontwikkelen of inkopen van algoritmes of voldoende expertise en capaciteit beschikbaar is om tot een verantwoorde inzet ervan te komen.</li> <li>Leg vast of er voldoende expertise en capaciteit beschikbaar is en onderbouw dit in projectdocumentatie.</li> <li>Om menselijke controle te kunnen uitoefenen in verschillende fases van de ontwikkeling (of inkoop) van algortimes moet de mens bepaalde kennis, tijd en vaardigheden hebben. Alleen met de juiste kennis, tijd en vaardigheden kunnen risico\u2019s op tijd ge\u00efdentificeerd en afgedekt worden. Deze kennis en expertise kan ook buiten de organisatie liggen, maar dan is het belangrijk om verantwoordelijkheden goed vast te leggen.     </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-01-benodigde-expertise-en-capaciteit/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.12 </li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 1.04</li> <li>Competencies and governance practices for AI in the public sector. Zie hoofdstuk 4</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-01-benodigde-expertise-en-capaciteit/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-02-beleid_opstellen_inzet_algoritmes/","title":"Stel beleid op voor een verantwoorde inzet van algoritmes binnen de organisatie.","text":"<p>org-04OrganisatieverantwoordelijkhedenBeleid en adviesGovernanceTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-02-beleid_opstellen_inzet_algoritmes/#maatregel","title":"Maatregel","text":"<p>Stel beleid op voor een verantwoorde inzet van algoritmes binnen de organisatie. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-02-beleid_opstellen_inzet_algoritmes/#toelichting","title":"Toelichting","text":"<p>Een duidelijk beleid over de inzet van algoritmes helpt organisaties te voldoen aan de vereisten voor het verantwoord gebruik ervan. Hierin worden zaken beschreven als:</p> <ul> <li> <p>Hoe de inzet van algoritmes gaat bijdragen aan het realiseren van de organisatiedoelstellingen. </p> </li> <li> <p>Het beschrijven van de stappen die moeten worden gezet om algoritmes op een verantwoorde wijze in te gaan zetten. Dit is afhankelijk en verschilt per type algoritme en de bijbehorende risicoclassificatie.</p> </li> <li> <p>Het beschrijven van welke hulpmiddelen in welke gevallen moeten worden ingezet om te voldoen aan de vereisten die gelden voor algoritmes. Hierbij kan worden gedacht aan:</p> <ul> <li>Een Impact Assessment Mensenrechten en Algoritmes.</li> <li>Een Data Protection Impact Assessment.</li> <li>Het hanteren van inkoopvoorwaarden.</li> </ul> </li> <li> <p>Hoe burgers worden ge\u00efnformeerd over de inzet van algoritmes door de organisatie (communicatiestrategie) en welke kanalen hiervoor kunnen worden gebruikt. Hierbij kan worden gedacht aan:</p> <ul> <li>Het Algoritmeregister voor het publiceren van hoog risico AI-systemen of impactvolle algoritmes. </li> <li>Een algemene pagina op de website met informatie over de inzet van algoritmes.</li> <li>Het verwerkingsregister.</li> <li>Een intern registratiesysteem, bijvoorbeeld voor het registreren van laag risico of niet-impactvolle algoritmes zodat deze informatie voor medewerkers beschikbaar is.</li> <li>In welke gevallen een (openbaar) besluit wordt genomen door het bestuur over de inzet van een algoritme. </li> </ul> </li> <li> <p>Er is beschreven welke informatie over welke typen algoritmes wordt gecommuniceerd met betrokkenen bij de ontwikkeling of gebruik ervan door de organisatie. </p> </li> <li> <p>Er is beschreven welke stappen worden gezetten in het geval dat er incidenten ontstaan rondom de inzet van algoritmes, denk hierbij aan een discriminatieprotocol.</p> </li> <li> <p>Dit beleidsdocument is beschikbaar en toegankelijk voor ge\u00efnteresseerden. </p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-02-beleid_opstellen_inzet_algoritmes/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-02-beleid_opstellen_inzet_algoritmes/#risico","title":"Risico","text":"<p>Zonder duidelijk beleid over de inzet van algoritmes kan het gebeuren dat algoritmes worden ontwikkeld of gebruikt die niet passend zijn binnen de organisatie. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-02-beleid_opstellen_inzet_algoritmes/#voorbeelden","title":"Voorbeelden","text":"<ul> <li>Controle op algoritmes</li> <li>ISO/IEC 42001: Artificial intelligence (AI) Management System</li> <li>Webpagina van gemeente Amsterdam over algoritmes.</li> </ul> <p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-03-toepassen_risicobeheer/","title":"Maak een plan voor het omgaan met risico\u2019s","text":"<p>org-03OrganisatieverantwoordelijkhedenProjectleiderBeleid en adviesGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-03-toepassen_risicobeheer/#maatregel","title":"Maatregel","text":"<p>Pas risicobeheer gestructureerd toe voorafgaand en gedurende de ontwikkeling en gebruik van algoritmes.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-03-toepassen_risicobeheer/#toelichting","title":"Toelichting","text":"<ul> <li>Bepaal tijdig, bijvoorbeeld in de probleemanalyse- of ontwikkelfase, om wat voor toepassing het gaat (algoritme of AI-systeem) en bepaal welke risicoclassificatie hierbij hoort.</li> <li>Bepaal op basis van de toepassing en de risicoclassificatie, welke aspecten van risicobeheer moeten worden toegepast.</li> <li>Inventariseer tijdig, bijvoorbeeld in de probleemanalayse- of ontwikkelfase, bij betrokken experts welke beleidskaders en hulpmiddelen binnen de organisatie moeten worden ingezet om risicobeheer toe te passen.</li> <li>Bepaal op basis van de levenscyclus van een algoritme of AI-systeem wanneer welke aspecten van risicobeheer moeten worden toegepast. </li> <li>Maak inzichtelijk op welke niveaus risicobeheer kan en moet worden belegd bij het ontwikkelen en gebruiken van algoritmes.</li> <li>Daarbij gaat het om het identificeren, analyseren, evalueren (afhankelijk van de risicobereidheid), behandelen (risicoreactie, o.a. maatregelen), monitoren &amp; beoordelen en communiceren &amp; rapporteren van risico's.</li> <li>Gedurende de levenscyclus van een algoritme of AI-systemen kunnen nieuwe risico's ontstaan waar mogelijk nieuwe maatregelen voor moeten worden getroffen. Het is van belang dat iteratief wordt gewerkt aan mitigerende maatregelen en dat risicobeheer periodiek wordt toegepast.</li> </ul> <p>Let op! Sommige maatregelen in het Algoritmekader gaan dieper in op het uitvoeren van risicoanalyses. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-03-toepassen_risicobeheer/#risico","title":"Risico","text":"<p>Risico's worden niet (tijdig) vastgesteld en adequaat geadresseerd en behandeld.  </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-03-toepassen_risicobeheer/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.13 </li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 1.03</li> <li>Algoritmekader</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-03-toepassen_risicobeheer/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-04-politiek-bestuurlijke-verantwoordelijkheid/","title":"Zorg voor politiek-bestuurlijk bewustzijn, betrokkenheid, en verantwoordelijkheid.","text":"<p>org-04OrganisatieverantwoordelijkhedenProjectleiderBeleid en adviesGovernanceTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-04-politiek-bestuurlijke-verantwoordelijkheid/#maatregel","title":"Maatregel","text":"<p>Zorg voor politiek-bestuurlijk bewustzijn, betrokkenheid, en verantwoordelijkheid. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-04-politiek-bestuurlijke-verantwoordelijkheid/#toelichting","title":"Toelichting","text":"<ul> <li>Voor een passende algoritmegovernance is politiek-bestuurlijk bewustzijn, betrokkenheid en verantwoordelijkheid essentieel. </li> <li>De kernvraag voor publieke organisaties bij de inzet van algoritmen is altijd: Hoe wegen we (als publieke organisatie of samenleving) de voordelen en nadelen van de inzet van algoritmen? </li> <li>Dit is per definitie een kwalitatieve en politieke vraag.</li> <li>Dit gaat niet alleen over direct opbrengsten maar ook over lange termijn en indirecte effecten, de mate waarin de inzet van technologie bijdraagt aan de legitimiteit van publieke organisatie en hoe burgers met deze technologie worden bejegend. </li> <li>Om te zorgen voor politiek-bestuurlijke betrokkenheid kan het helpen om een meerjarige visie/strategie rondom verantwoorde inzet te formuleren waar een communicatiestrategie richting burgers onderdeel van is.</li> <li>Zorg ervoor dat bestuurders bewust zijn van de voor- en nadelen van de inzet van algoritmes en daarnaar kunnen handelen.</li> <li>Dit ondersteunt teams bij het maken van de juiste overwegingen bij de ontwikkeling en gebruik van algoritmes. Het geeft ook inzicht wanneer de politiek of bestuurlijk verantwoordelijke(n) moeten worden betrokken bij het project om beslissingen te nemen, bijvoorbeeld of de mate van onbewuste vooringenomenheid (bias) binnen acceptabele grenzen ligt. </li> <li>Het doorlopen van een concrete casus voor de ontwikkeling en gebruik van een algoritme, inclusief het uitvoeren van een IAMA, kan waardevolle informatiegeven om een meerjarige visie of strategie op te stellen. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-04-politiek-bestuurlijke-verantwoordelijkheid/#bronnen","title":"Bronnen","text":"<p>Kleur bekennen - vervolgonderzoek algoritmes</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-04-politiek-bestuurlijke-verantwoordelijkheid/#risico","title":"Risico","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-04-politiek-bestuurlijke-verantwoordelijkheid/#voorbeelden","title":"Voorbeelden","text":"<p>Voorbeeld gemeente Rotterdam</p> <p>\u00c9\u00e9n van de belangrijkste hoofdconclusies van het rapport Kleur Bekennen van de gemeente Rotterdam, opgesteld door de Algemene Rekenkamer, onderstreept het belang van actief bestuur binnen algoritme- en AI-governance: </p> <p>\"Het ontbreekt aan een politiek-bestuurlijk kader dat duidelijk maakt welke normen en principes leidend zijn bij de ontwikkeling en het gebruik van algoritmes. Dit heeft als effect dat belangrijke besluit over bijvoorbeeld wenselijkheid, haalbaarheid, transparantie en bias bij de ambtelijke organisatie komen te liggen. Deze besluiten vragen om een politieke afweging\".</p> <p>De algoritmegovernance van de Gemeente Rotterdam bestaat uit de volgende onderdelen: </p> <ol> <li>een visie op de inzet van algoritmes;</li> <li>instrumentarium voor risicobeheersing dat onder andere bestaat uit een risico-assessment en een mensenrechtenassessment; </li> <li>een uiteenzetting van rollen en verantwoordelijkheden en; </li> <li>een omschrijving van de verantwoordelijkheden voor controle en advies.</li> </ol> <p>Deze stappen volgen kan helpen bij het inrichten van een algoritmegovernance.</p> <p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-05-bestaande-governance/","title":"Sluit algoritmegovernance aan op bestaande governancestructuren binnen de organisatie.","text":"<p>org-05OrganisatieverantwoordelijkhedenProjectleiderBeleid en adviesGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-05-bestaande-governance/#maatregel","title":"Maatregel","text":"<p>Sluit algoritmegovernance aan op bestaande governancestructuren binnen de organisatie.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-05-bestaande-governance/#toelichting","title":"Toelichting","text":"<p>Bij de vormgeving van een algoritmegovernance van een organisatie is het van belang om aansluiting en samenwerking te bewerkstelligen met huidige governancestructuren binnen de organisatie, zoals:</p> <ul> <li> <p>IT governance</p> </li> <li> <p>datagovernance</p> </li> <li> <p>informatiebeveiliging zoals governance rondom de NIS2 richtlijn</p> </li> <li> <p>privacygovernance</p> </li> </ul> <p>Deze governancestructuren kunnen waardevolle aanknopingspunten bieden voor algoritmegovernance, omdat hierin vaak al duidelijke afspraken zijn gemaakt en processen zijn geschreven om bijvoorbeeld risico's zo goed mogelijk te managen. In veel organisaties werken bijvoorbeeld privacy- en informatiebeveiliging en informatiebeheerders nauw samen van strategisch organisatieniveau tot operationeel, omdat deze onderwerpen raken aan beide domeinen.  Voor een verantwoorde inzet van algoritmes zullen deze expertise moeten gaan samengewerkt met andere expertise, zoals die van data science en ethiek. Het is van belang dat deze expertises tijdig en voldoende ruimte krijgen om samen te werken, zodat de functionele en niet functionele requirements kunnen worden gedefinieerd voor een verantwoorde inzet van algoritmes. Stel vast waar deze expertise elkaar nodig hebben en waar deze zelfstandige taken en verantwoordelijkheden hebben.  Voorgaande geeft inzichten om te bepalen in hoeverre algoritmegovernance, naast de bestaande governancestructuren, moet worden ingericht.</p> <p>De volgende vragen kunnen bedragen om bovenstaande inzichtelijk te krijgen: - Welke lessen zijn geleerd met de implementatie van de AVG of de toepassing van de BIO? - Is er iemand intern verantwoordelijk gemaakt voor (toezicht op) algoritmes? - Hoe werken experts vanuit verschillende onderwerpen zoals privacy, informatiebeheer, informatiebeveiliging en data op dit moment samen als het gaat om de inzet van algoritmes?</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-05-bestaande-governance/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-05-bestaande-governance/#risico","title":"Risico","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-05-bestaande-governance/#voorbeelden","title":"Voorbeelden","text":"<p>Een concreet voorbeeld van samen optrekken is deze handreiking om de IAMA en DPIA gezamelijk uit te voeren.</p> <p>Voorbeeld: Ervaringen Kadaster</p> <ol> <li>Bij inwerkingtreding van de AVG ging men snel aan de slag met DPIA\u2019s, vinkenlijstjes. Let op voor een schijndossier: Begrijp wat er toegepast moet worden, voordat je aan de slag gaat; niet uitvoeren om maar te laten zien dat je eraan voldoet.</li> <li>Nadenken over governance. De FG is bij de wet geregeld, maar er is meer nodig. Welke profielen heeft de ondersteuning voor de uitvoering; (centrale) privacy officers en is hier ruimte voor?</li> <li>Zorg dat interpretaties over wet- en regelgeving gelijk zijn binnen de organisatie en de collega\u2019s die binnen de governance structuur samenwerken.</li> <li>Er is beleid gemaakt, maar in de praktijk is te weinig capaciteit om dit uit te voeren. Stel een realistisch beleidsplan op om de gestelde doelen daadwerkelijk te kunnen realiseren. </li> </ol> <p>Centrale privacy officer Kadaster</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/","title":"Gebruik een algoritme volwassenheidsmodel om te weten waar de organisatie staat","text":"<p>org-06OrganisatieverantwoordelijkhedenProjectleiderBeleid en adviesGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/#maatregel","title":"Maatregel","text":"<p>Breng de volwassenheid van je organisatie op het gebied van algoritmes in kaart.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/#toelichting","title":"Toelichting","text":"<ul> <li>Om tot een passende algoritmegovernance voor een organisatie te komen, moet eerst worden vastgesteld wat op dit moment al is ingericht binnen een organisatie op het gebied van algoritmes.</li> <li>Hiervoor kan een volwassenheidsmodel worden toegepast.</li> <li>Op basis hiervan kunnen vervolgstappen worden gedefinieerd, zodat je een handelingsperspectief hebt om je organisatie te organiseren. Ook kunnen deze uitkomsten helpen bewustzijn over de uitdagingen te vergroten.</li> <li>Het is denkbaar dat het realiseren van algoritmegovernance vraagt om een organisatieverandering. De noodzaak voor implementatie van de AI-Verordening kan hier een katalysator voor zijn. Pas daarom verandermanagementtechnieken toe.</li> <li>Deel deze informatie met het bestuur en zorg dat hier bewustzijn ontstaat. Bepaal vervolgens hoe algoritmegovernance moet worden ingericht.</li> <li>Het is aan te raden om verantwoordelijkheden te beleggen voor het realiseren van algoritmegovernance.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/#risico","title":"Risico","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/#voorbeelden-van-volwassenheidsmodellen","title":"Voorbeelden van volwassenheidsmodellen","text":"<p>Er zijn verschillende modellen om het volwassenheidsniveau te bepalen. Deze modellen richten zich niet altijd specifiek op het beheer van algoritmes, maar kijken breder naar algoritmes in de organisatie of naar ethische vraagstukken. Governance is altijd een onderdeel van deze modellen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/#ai-ethics-maturity-model-van-krijger-thuis-de-ruiter-ligthart-broekman-2023","title":"AI ethics maturity model van Krijger, Thuis, de Ruiter, Ligthart &amp; Broekman (2023)","text":"<p>Het AI ethics maturity model van Krijger, Thuis, de Ruiter, Ligthart &amp; Broekman (2023) brengt de volwassenheid op verschillende niveau's in kaart op basis van zes categorie\u00ebn:</p> <ul> <li>awareness &amp; culture</li> <li>policy</li> <li>governance</li> <li>communication &amp; training</li> <li>pevelopment proces</li> <li>tooling</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/#het-datavolwassenheidsmodel-van-de-ibds","title":"Het Datavolwassenheidsmodel van de IBDS","text":"<p>Het datavolwassenheidmodel van de Interbestuurlijke Datastrategie (IBDS) kijkt naar hoe goed organisaties omgaan met data. Dit model is ook belangrijk voor kunstmatige intelligentie (AI), omdat data daar een grote rol speelt. Het model heeft een beslishulp datavolwassenheid waarmee bepaald kan worden hoe volwassen een organisatie is met data. IBDS biedt ook een gids met verschillende manieren om de datavolwassenheid in kaart te brengen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/#innovatie-en-volwassenheid","title":"Innovatie en volwassenheid","text":"<p>Het gebruik van algoritmes wordt vaak gezien als een vorm van innovatie. Hoe kan AI helpen bij het ondersteunen van nieuwe idee\u00ebn en het vinden van nieuwe toepassingen? Een voorbeeld van een volwassenheidsmodel over innovatie is de Innovatie Maturity Scan van Innoveren met Impact.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/#mitre-ai-maturity-model-en-organizational-assessment-tool","title":"MITRE AI Maturity Model en Organizational Assessment Tool","text":"<p>Het AI Maturity Model en de bijbehorende Organizational Assessment Tool zijn ontwikkeld door de Amerikaanse organisatie MITRE. MITRE is een non-profitorganisatie en enigzins vergelijkbaar met het Nederlandse TNO. Dit volwassenheidsmodel onderscheidt een zestal pijlers in de AI volwassenheid van een organisatie en daarbij een vijftal volwassenheidsniveaus. Het volwassenheidsmodel en assessment zijn goed gedocumenteerd.</p> <p></p> <p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes\\@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-07-intern-toezicht/","title":"Richt een algoritmegovernance in met three lines of defence","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-07-intern-toezicht/#maatregel","title":"Maatregel","text":"<p>Richt een algoritmegovernance in met three lines of defence.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-07-intern-toezicht/#toelichting","title":"Toelichting","text":"<p>Een inrichting van algoritmegovernance die vaak wordt toegepast is het three lines of defence model:</p> <ul> <li>De eerste linie gaat over eigenaarschap, ontwikkeling, gebruik en risicobeheersing van algoritmes.</li> <li>De tweede linie identificeert, beoordeelt en rapporteert over risico\u2019s en het uitgevoerde gebruik algoritmes.</li> <li>De derde verdedigingslinie controleert de werking van de governance en betreft interne advisering en toetsing. </li> </ul> <p>Schuett (2022) presenteert het three lines of defence model als volgt:</p> <p></p> <p>Het toepassen van een 'three lines of defence' is slechts \u00e9\u00e9n aspect van het toepassen van algoritmegoverance. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-07-intern-toezicht/#voorbeelden","title":"Voorbeelden","text":"<p>Onder andere de UWV en de Gemeente Rotterdam hanteren dit model met drie linies. Bij de gemeente Rotterdam zijn bijvoorbeeld de drie lijnen ingevuld via de volgende rollen en verantwoordelijkheden: \u201cDe eerste lijn bestaat uit de proceseigenaren en de operationeel verantwoordelijken. Proceseigenaren zijn verantwoordelijk voor de gehele algoritmetoepassing en de operationeel verantwoordelijken voor de ontwikkeling. De tweede lijn is de algoritme expert, die een onafhankelijke toezicht- en adviestaak heeft. De derde lijn wordt volgens de stukken die gaan over de algoritme governance vervuld door Financial audit.\u201d (Rekenkamer Rotterdam, 2024) </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-08-beslismoment-levenscyclus/","title":"Maak gebruik van beslismomenten  in de algoritmelevenscyclus","text":"<p>org-08OrganisatieverantwoordelijkhedenProjectleiderBeleid en adviesGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-08-beslismoment-levenscyclus/#maatregel","title":"Maatregel","text":"<p>Maak gebruik van beslismomenten in de levenscyclus van een algoritme.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-08-beslismoment-levenscyclus/#toelichting","title":"Toelichting","text":"<ul> <li>Algoritmegovernance kan op de levenscyclus aansluiten door 'gates' of controlepunten in te voeren. Deze gates bevatten belangrijke mijlpalen om te beoordelen of de juiste taken zijn uitgevoerd, of ethische afwegingen zijn geamaakt, of documentatie heeft plaatsgevonden en of akkoord is ingewonnen (go/no-go moment) bij de verantwoordelijke(n) om naar de volgende fase te mogen. </li> <li>Het is belangrijk om te weten dat toepassing van deze \u2018gates\u2019 niet altijd hetzelfde is. Dit kan namelijk verschillen afhankelijk van het type algoritme. </li> <li>Een hoog-risico-AI-systeem moet aan meer vereisten voldoen dan een niet impactvol algoritme. Een hoog-risico AI-systeem moet daarom binnen de gates worden getoetst op meer onderdelen dan een niet impactvol algoritme.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-08-beslismoment-levenscyclus/#bronnen","title":"Bronnen","text":"<ul> <li>Hulpmiddel handelingsruimte waardevolle AI in de zorg ([presentatie](https://nlaic.com/wp-content/uploads/2022/06/04a.</li> <li>Hulpmiddel-Handelingsruimte-Waardevolle-AI-voor-gezondheid-en-zorg.pdf))(samenvatting) is beschikbaar via de NL AI Coalitie en Data voor gezondheid</li> <li>UWV Beleidsdocument model risico management, Modellevenscyclus (blz 21), 29 september 2021</li> <li>Lifecyclemanagement in het toetsingskader van de Algemene Rekenkamer nr (1.07) .</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-08-beslismoment-levenscyclus/#risico","title":"Risico","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-08-beslismoment-levenscyclus/#voorbeelden","title":"Voorbeelden","text":"<p>Hieronder volgen twee voorbeelden van hoe governance effectief kan worden ge\u00efntegreerd in de levenscyclus van algoritmen en AI-modellen:</p> <p>Ministerie VWS In de levenscyclus</p> <p>In het hulpmiddel handelingsruimte waardevolle AI in de zorg is tussen elke fase in de levenscyclus een \u2018gate\u2019 geplaatst. Tussen de afronding van een fase en de start van de daaropvolgende fase wordt een formele poort geplaatst. Om door deze poort te gaan, moet de voorgaande fase volledig zijn afgerond: vraagstukken dienen beantwoord te zijn, activiteiten uitgevoerd en aan interne en externe vereisten dient te zijn voldaan. Deze zaken kunnen in de vorm van documentatie aan de organisatie worden opgeleverd, waarna een gesprek of review kan plaatsvinden.</p> <p>Het vormgeven van deze overgangen geeft verantwoordelijke stakeholders binnen de organisatie een structuur om de ontwikkeling en inzet van algoritmen in elke fase te beoordelen en bij te sturen. De gezamenlijke kernvraag voor alle betrokkenen in de gates is: Geloven we dat de voordelen van de inzet (en ontwikkeling) van dit algoritme opwegen tegen eventueel te verwachten nadelen? En hoe gaan we om met deze dilemma's? Daarbij kunnen opvolgende fasen in de levenscyclus een eigen accentvraag kennen, zoals \u201cIs het beoogde algoritme wenselijk?\u201d in de probleemanalyse fase tot \u201cLevert het algoritme nog de waarde op die we beogen?\u201d tijdens de monitoring- en beheerfase.</p> <p></p> <p>Voorbeeld: Het UWV</p> <p>In haar modellevenscyclus [^3] maakt het UWV gebruik van een gelaagdheid in de \u201cgates\u201d door gebruik te maken van een zachte en harde knip tussen de opvolgende fasen. Enerzijds is er een zachte knip voorzien door aan het eind van elke fase de mogelijkheid te laten om een stap terug te zetten in de levenscyclus. Mocht het onduidelijk zijn wat de beoogde voordelen zijn ten opzichte van de nadelen, of er onvoldoende invulling gegeven is aan de vereisten/activiteiten, dan kan het algoritme of AI-model ontwikkelproces bij een zachte knip een stap terugnemen in de levenscyclus. Anderzijds zijn er 4 harde grenzen in de levenscyclus aangebracht waarin formele vereisten aan het ontwikkeltraject worden opgelegd.</p> <p></p> <p>Voorbeeld: BD (Analytische en Cognitieve Technologie - CoE Cognitieve Oplossingen)</p> <p>Enkele ervaringen m.b.t. levencyclus: Plot sleutelmomenten en mijlpaal momenen in die nodig zijn om het proces te kunnen laten werken en bepaal de requirements die daarmee samenhangen. Richt als eerste een basis (b.v. voor low risk) de AI-governance in op operationeel niveau, implementeer deze basis en stel gaandeweg/ondertussen op basis van o.a. best practices de requirements op naar de \"wereld\" er om heen (tactisch en strategisch niveau). </p> <p></p> <p>Voorbeeld: Algoritmeprocesmodel Ministerie van Defensie</p> <p>Het Ministerie van Defensie heeft een \"algoritmeprocesmodel\" ontwikkeld. Op level 1 is het een levenscyclus zoals ook in het Algoritmekader. Op level 2  wordt ingegaan op de rollen en verantwoordelijkheden. Op level 3 zijn ook formulieren om op specifieke momenten in de AI-levenscyclus de juiste documentatie op te leveren. N.B.: Defensie heeft dit ingericht in Sharepoint, waardoor verantwoordelijken te koppelen zijn aan activiteiten in de levenscyclus.</p> <p></p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-09-governance-per-risicocategorie/","title":"Richt algoritmegovernance op basis van de risicoclassificatie van algoritmes.","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-09-governance-per-risicocategorie/#maatregel","title":"Maatregel","text":"<p>Richt algoritmegovernance in op basis van de risicoclassificatie van algoritmes.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-09-governance-per-risicocategorie/#toelichting","title":"Toelichting","text":"<ul> <li>Er is een verschil in de vereisten die van toepassing zijn op type algoritmes. Dit is mede afhankelijk van de risioclassificatie en de impact van het algoritme op betrokkenen.</li> <li>Zo zullen op basis van de AI-verordening meer vereisten moeten worden nageleefd bij hoog-risico AI-systemen, dan voor een AI-systeem met een beperkt risico. </li> <li> <p>Dit betekent dat algoritmegovernance uitgebreider moet zijn voor de risicovollere, complexere toepassingen dan voor de eenvoudige, niet-risicovolle toepassingen.</p> </li> <li> <p>Stel daarom tijdig vast om welk type algoritme het gaat en welke vereisten hiervoor gelden. Dat draagt eraan bij dan alleen wordt gefocust op het realiseren van de vereisten waar daadwerkelijk aan moet worden voldaan. Dit zorgt ervoor dat projecten sneller kunnen worden gerealiseerd.</p> </li> <li>Let op dat niet enkel naar de AI-verordening wordt gekeken. Ook op impactvolle algoritmes die niet vallen onder het bereik van de AI-Verordening zijn ook vereisten van toepassing, en moet algoritmegovernance op worden toegepast.</li> <li>Is algoritmegovernance nieuw bij jouw organisatie, dan kan het helpen om een use-case met beperkt risico grondig te doorlopen om hiervan te leren.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-09-governance-per-risicocategorie/#bronnen","title":"Bronnen","text":"Bekijk alle vereisten <p>Geen vereisten beschikbaar voor deze maatregel.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-09-governance-per-risicocategorie/#risico","title":"Risico","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-09-governance-per-risicocategorie/#voorbeelden","title":"Voorbeelden","text":"<p>De gemeente Rotterdam kiest ervoor om de algoritmegovernance alleen in te zetten bij hoog-risico AI-toepassingen.  Deze risicoclassificatie volgt de AI-Verordening. Voor laag-risico toepassingen geldt de standaard governance van de gemeente: de informatiebeveiligings- en privacy governance (Kleur Bekennen, Rekenkamer Rotterdam, 2024, p.71). Tabel 1 geeft inzicht in verschillende typen algoritmen en AI-toepassingen. De afbeelding uit hetzelfde rapport geeft een flowchart van hoe de governance anders is afhankelijk van de risico-categorie. </p> <p></p> <p>In dit voorbeeld is ook het principe gehanteerd dat naast hoog-risico volgens de AI-verordening, bij ieder algoritme aan de hand van een drietal vragen moet worden besloten of een uitgebreidere algoritmegovernance nodig is. * Is de werking van het algoritme niet volledig \u00e9n beknopt uit te leggen aan een gemiddelde Rotterdammer? * Ontbreekt er een menselijke beoordeling voordat de uitkomst van het algoritme in de praktijk wordt gebracht door middel van een concrete handeling van de gemeente? * Is het voorstelbaar dat de algoritmetoepassing uitmondt in een onrechtvaardige handeling van de gemeente tegen burgers of bedrijven</p> <p>Kijk zelf goed wat passend is voor jouw organisatie. </p> <p>Voorbeeld BD (Analytische en Cognitieve Technologie | CoE Cognitieve Oplossingen): * Richt als eerste een basis (b.v. voor low risk) algoritmegovernance in op operationeel niveau, implementeer deze basis en stel gaandeweg/ondertussen op basis van o.a. best practices de requirements op naar de \"wereld\" er om heen (tactisch en strategisch niveau). </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-10-inrichten-taken-en-verantwoordelijkheden-algoritmegovernance/","title":"Taken en verantwoordelijkheden zijn toebedeeld in de algoritmegovernance","text":"<p>org-10OrganisatieverantwoordelijkhedenProjectleiderBeleid en adviesGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-10-inrichten-taken-en-verantwoordelijkheden-algoritmegovernance/#maatregel","title":"Maatregel","text":"<p>Taken en verantwoordelijkheden zijn toebedeeld in de algoritmegovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-10-inrichten-taken-en-verantwoordelijkheden-algoritmegovernance/#toelichting","title":"Toelichting","text":"<ul> <li>Bij het vormgeven van een doeltreffende algoritmegovernance is het beleggen van expliciete taken en verantwoordelijkheden cruciaal.</li> <li>Het beleggen van deze taken en verantwoordelijkheden zorgt voor een actiegerichte structuur waarin duidelijkheid bestaat over wie wanneer aan zet is.</li> <li>Denk hierbij aan het opstellen van een RACI-matrix en pas dit binnen de organisatie toe per risicoclassificatie voor algoritmes. </li> <li>Rollen en verantwoordelijkheden kunnen worden gekoppeld aan de vereisten en maatregelen die moeten worden gerealiseerd in de verschillende fasen van de levenscyclus van een algoritme.</li> <li>Organisaties zullen zelf moeten beoordelen welke taken en verantwoordelijkheden ze willen koppelen aan de beschikbare (of nieuwe) rollen binnen hun organisaties.  </li> <li>Zie hieronder een mogelijk voorbeeld van hoe dit eruit kan zien. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-10-inrichten-taken-en-verantwoordelijkheden-algoritmegovernance/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-10-inrichten-taken-en-verantwoordelijkheden-algoritmegovernance/#risico","title":"Risico","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-10-inrichten-taken-en-verantwoordelijkheden-algoritmegovernance/#voorbeelden","title":"Voorbeelden","text":"<p>Three lines of defence - diverse organisaties</p> <p>Het three lines of defence model dat zowel de gemeente Rotterdam als het UWV hanteert biedt hiervoor handvatten. De essentie van dit model is het scheiden van drie niveau\u2019s in verantwoordelijkheden om effectieve governance mogelijk te maken. Daarnaast wordt in veel governance structuren een RACI model opgesteld om rollen en verantwoordelijkheden expliciet te maken. </p> <p>RACI matrix - diverse organisaties</p> <p>RACI is de afkorting voor Responsible (Verantwoordelijk \u2013 uitvoerder van de taak), Accountable (Aanspreekbaar \u2013 eigenaar van de taak), Consulted (Geconsulteerd) en Informed (Ge\u00efnformeerd). De gemeente Rotterdam heeft de interactie tussen rollen/verantwoordelijkheden van algoritme/AI governance en de volledige datamanagement structuur in een RACI model vormgegeven (Bron: Kleur bekennen rekenkamer Rotterdam). Wees bewust dat iedere organisatie anders is, en waarschijnlijk op een andere RACI-matrix uitkomt. </p> <p></p> <p>Niet alles town down vast te leggen - CoE Belastingdienst</p> <p>Het te regide vastleggen van functies en bijbehorende taken en verantwoordelijkheden kan nadelen hebben. Een team bij de belastingdienst (Analytische en Cognitieve Technologie | CoE Cognitieve Oplossingen) heeft ervaren dat het definieren van werkpakketten in plaats van uitwerkte functies beter werkt. Alles dient belegd te zijn, maar alles op microniveau vastleggen is vaak niet te doen zonder in de praktijk te staan, en kan avenrechts werken. Wees als algoritmegovernance nog nieuw is zeker in het begin bewust dat inrichting altijd beter kan; ga grondig maar ook flexibel te werk.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-11-gebruikersbeheer/","title":"Maak afspraken over het beheer van gebruikers","text":"<p>org-11OrganisatieverantwoordelijkhedenProjectleiderBeleid en adviesTechnische robuustheid en veiligheidGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-11-gebruikersbeheer/#maatregel","title":"Maatregel","text":"<p>Richt gebruikersbeheer in, waarmee bepaald wordt wie toegang heeft tot wat, en wat er bijvoorbeeld gebeurt bij indiensttreding, functiewijziging en uitdiensttreding.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-11-gebruikersbeheer/#toelichting","title":"Toelichting","text":"<p>Gebruikersbeheer zorgt ervoor dat accounts en autorisaties beheerst worden aangevraagd, geautoriseerd, gewijzigd en ingetrokken bij indiensttreding, functiewijziging en uitdiensttreding. Ook wordt functievermenging voorkomen bij toegang en gebruik van het algoritme, de data of de uitkomsten van een algoritme.</p> <p>Bij het inrichten van gebruikersbeheer moeten aan de volgende elementen worden gedacht:</p> <ul> <li>Gebruikers en beheerders krijgen slechts toegang tot functionaliteit die zij uit hoofde van hun functie nodig hebben (need to know, need to use). Daartoe is een beschrijving beschikbaar welke rollen en rechten per applicatie bij een functie horen (BIO 6.1.2, 9.2.2 en 9.4).</li> <li>Het verlenen en muteren van accounts en toegangsrechten vindt plaats na goedkeuring door een bevoegde functionaris. Dit aan de hand van een actueel mandaatregister waaruit blijkt welke personen beslissende bevoegdheden hebben voor het verlenen van een bepaald type (niveau) toegangsrechten danwel functieprofielen (BIO 9.2.1.2, 9.2.2.1, 9.4).</li> <li>Er bestaat functiescheiding tussen het aanvragen, autoriseren en doorvoeren van wijzigingen in gebruikersaccounts en toegangsrechten (BIO 9.2.1.2, 9.2.2.1, 9.2.3).</li> <li>Functiewijzigingen en uitdiensttredingen worden bewaakt voor aanpassen van de toegangsrechten en voor intrekken van de identiteits- en authenticatiemiddelen (BIO 9.2.2, 9.2.6).</li> <li>Het aantal accounts met verhoogde rechten is beperkt en verklaard, en staat in logische verhouding tot de beheerders en of ICT-afdeling (BIO 9.1.2.(1), 9.2.3, 9.2.4).</li> <li>Gebruikersaccounts en beheeraccounts dienen altijd persoonsgebonden en verklaard te zijn, zodat handelingen altijd te herleiden zijn naar \u00e9\u00e9n verantwoordelijke (BIO 9.1, 9.4.2).</li> <li>Eindgebruikers hebben geen directe toegang tot de onderliggende componenten (zoals de database) (BIO 9.2.3, 13.1.3).</li> <li>Toegangsrechten op onderliggende componenten dienen periodiek, minimaal jaarlijks, ge\u00ebvalueerd te worden. Dit interval dient te zijn beschreven in het toegangsbeleid en zijn bepaald op basis van het risiconiveau. De uitkomsten van de evaluatie en de opvolging daarvan worden vastgelegd (BIO 9.2.5).</li> </ul> <p>Voor deze maatregelen is het van belang om aandacht te hebben voor de volgende zaken:</p> <ul> <li>Autorisatiematrix en beschrijving rollen/rechten per systeem(laag)</li> <li>Lijst met wijzigingen rollen en bijbehorende goedkeuringen</li> <li>Overzicht aantallen en rechten per (systeem)laag</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-11-gebruikersbeheer/#risico","title":"Risico","text":"<p>Er bestaan meerdere risico's wanneer er geen gebruikersbeheer is: - Toegangsrechten kunnen niet meer up-to-date zijn, bijvoorbeeld wanneer er geen rekening wordt gehouden met het IDU-proces (). Er bestaat dan het risico dat gebruikers toegang tot de omgeving van het algoritme, de data of de uitkomsten van het algoritme hebben die zij niet zouden mogen hebben. - Wanneer functievermenging niet wordt voorkomen bij toegang en gebruik van het algoritme, bestaat het risico dat er ongeautoriseerde wijzigingen worden doorgevoerd aan het algoritme, de data of de uitkomsten van het algoritme. - Wanneer gebruik wordt gemaakt van generieke-, groeps- of onpersoonlijke accounts, bestaat het risico dat handelingen niet te herleiden zijn naar een verantwoordelijke persoon.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-11-gebruikersbeheer/#bronnen","title":"Bronnen","text":"<ul> <li>Baseline Informatiebeveiliging Overheid</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, IB.10 t/m IB.17</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 4.01, 4.02, 4.04, 4.05</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-11-gebruikersbeheer/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/","title":"Controleer en verbeter regelmatig de kwaliteit van het algoritme","text":"<p>org-12OrganisatieverantwoordelijkhedenMonitoring en beheerProjectleiderBeleid en adviesGovernanceMenselijke controle</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/#maatregel","title":"Maatregel","text":"<p>Richt een proces in voor een periodieke evaluatie van de kwaliteit van het algoritme.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/#toelichting","title":"Toelichting","text":"<ul> <li>Het is van belang dat een proces wordt ingericht waarmee periodiek de kwaliteit van algoritmes wordt ge\u00ebvalueerd.</li> <li>Bij kwaliteit van een algoritme kan worden gedacht aan doeltreffenheid, doelmatigheid, betrouwbaarheid en accuraatheid (geschiktheid), non-discriminatie en menselijke controle.</li> <li>Hieronder vallen het analyseren en evalueren van ingediende klachten en incidenten.</li> <li>Hieronder vallen ook het analyseren evalueren van besluiten door of aan de hand van het algoritmen.</li> <li>Na verloop van tijd kan de accuraatheid van machine learning modellen bijvoorbeeld wijzigen of kan het gebeuren dat bepaalde groepen (indien van toepassing) anders worden behandeld.</li> <li>Het is van belang dat monitoringsactiviteiten worden ingericht om deze kwaliteitsaspecten tijdig te beoordelen.</li> <li>Als er ongewenste wijzigingen plaatsvinden met betrekking tot de kwaliteit, moeten die worden ge\u00ebvalueerd en zullen maatregelen moeten worden getroffen om deze te herstellen.</li> <li>Het proces moet er voor zorgen dat de juiste experts of stakeholders worden betrokken bij het proces van evaluatie en het treffen van passende maatregelen.</li> </ul> <p>Let op! Sommige maatregelen in het Algoritmekader gaan dieper in op het uitvoeren van risicoanalyses. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/#risico","title":"Risico","text":"<p>Zonder evaluatie van de kwaliteit van het algoritme is er geen goede sturing, beheersing en verantwoording mogelijk als er ongewenste wijzigingen plaatsvinden in het algoritme of AI-systeem. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.15, SV.16, SV.17 </li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 1.08</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-13-wachtwoordbeheer/","title":"Maak afspraken over het beheer van wachtwoorden","text":"<p>org-13OrganisatieverantwoordelijkhedenProjectleiderOntwikkelaarTechnische robuustheid en veiligheidGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-13-wachtwoordbeheer/#maatregel","title":"Maatregel","text":"<p>Richt wachtwoordbeheer in, waarmee bepaald wordt hoe wachtwoorden worden opgeslagen, wanneer wijzigingen moeten plaatsvinden en waaraan wachtwoorden moeten voldoen. Hiermee wordt de toegang tot bijvoorbeeld ontwikkelomgevingen geregeld op een veilige manier.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-13-wachtwoordbeheer/#toelichting","title":"Toelichting","text":"<p>Bij het inrichten van wachtwoordbeheer moeten de volgende zaken worden toegepast:</p> <ul> <li>Alle wachtwoorden van gebruikers en beheerders dienen periodiek te worden gewijzigd, met een maximum van 1 jaar (BIO 9.4.3). Initi\u00eble wachtwoorden en wachtwoorden die gereset zijn, hebben een maximale geldigheidsduur van 24 uur en moeten bij het eerste gebruik worden gewijzigd.</li> <li>Voor toegang vanuit een onvertrouwde omgeving dient twee-factor authenticatie te worden gebruikt (BIO 9.4.2.1). Als er geen gebruik wordt gemaakt van two-factor authenticatie, is de wachtwoordlengte minimaal 8 posities en complex van samenstelling. In situaties waar geen two-factor authenticatie mogelijk is, wordt minimaal halfjaarlijks het wachtwoord vernieuwd.</li> <li>Na een periode van maximaal 15 minuten inactiviteit dient de toegang tot de applicatie te worden vergrendeld en na 10 foutieve inlogpogingen dient het account geblokkeerd te worden (BIO 11.2.9, BIO 9.4.3). De tijdsduur dat een account wordt geblokkeerd na overschrijding van het aantal keer foutief inloggen is vastgelegd.</li> <li>Wachtwoorden mogen niet in originele vorm (plaintext) worden opgeslagen, maar dienen versleuteld te worden. (NIST 5.1.1.2)</li> <li>De eisen aan wachtwoorden moeten geautomatiseerd worden afgedwongen.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-13-wachtwoordbeheer/#risico","title":"Risico","text":"<p>Als het wachtwoordbeheer van onvoldoende kwaliteit is, kan oneigenlijke toegang plaatsvinden tot het algoritme of uitkomsten van het algoritme, bijvoorbeeld doordat het wachtwoord te eenvoudig is.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-13-wachtwoordbeheer/#bronnen","title":"Bronnen","text":"<ul> <li>Baseline Informatiebeveiliging Overheid</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, IB.6 t/m IB.9</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 4.03</li> <li>NIST 5.1.1.2</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-13-wachtwoordbeheer/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-14-wijzigingenproces/","title":"Maak afspraken over het wijzigen van de code","text":"<p>org-14OrganisatieverantwoordelijkhedenProjectleiderOntwikkelaarTechnische robuustheid en veiligheidGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-14-wijzigingenproces/#maatregel","title":"Maatregel","text":"<p>Richt een wijzigingenproces in, waarmee bepaald wordt hoe codewijzigingen plaatsvinden.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-14-wijzigingenproces/#toelichting","title":"Toelichting","text":"<p>Bij het inrichten van een proces om wijzigingen aan de code te mogen aanbrengen, kunnen aan de volgende elementen worden gedacht:</p> <ul> <li>Wijzigingen dienen van te voren te worden geautoriseerd door de systeemeigenaar of product owner. (BIO 12.1.2)</li> <li>Wijzigingen worden getest in een andere omgeving dan de productieomgeving. (BIO 12.1.4, 14.2.3, 14.2.9, 14.3.1)</li> <li>Wijzigingen worden door de systeemeigenaar of product owner goedgekeurd op basis van gedocumenteerde testresultaten en pas daarna doorgevoerd in de productieomgeving. (BIO 12.1.2, 14.2.2, 14.2.9)</li> <li>Er dient functiescheiding te zijn ingericht tussen het aanvragen, goedkeuren en doorvoeren van wijzigingen om onbevoegde en onbedoelde wijzigingen te beperken. (BIO 6.1.2, 14.2.2)</li> <li>Er dient periodiek controle plaats te vinden op wijzigingen aan het systeem, zodanig dat oneigenlijke wijzigingen worden gesignaleerd. (BIO 9.4.4, 12.4.1)</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-14-wijzigingenproces/#risico","title":"Risico","text":"<p>Als een formeel wijzigingenproces ontbreekt bestaat het risico van ongeautoriseerde toegang, wijziging of beschadiging van de code van het algoritme, of de uitkomsten van het algoritme.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-14-wijzigingenproces/#bronnen","title":"Bronnen","text":"<ul> <li>Baseline Informatiebeveiliging Overheid</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, IB.1 t/m IB.5</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 4.07 </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-14-wijzigingenproces/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/","title":"Stel een protocol vast voor de situatie dat er (een vermoeden van) discriminatie door een algoritme is geconstateerd en pas dit wanneer nodig toe.","text":"<p>imp-10OrganisatieverantwoordelijkhedenImplementatieProjectleiderBeleid en adviesBias en non discriminatie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/#maatregel","title":"Maatregel","text":"<p>Stel een protocol vast voor de situatie dat er (een vermoeden van) discriminatie door een algoritme is geconstateerd en pas dit wanneer nodig toe.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/#toelichting","title":"Toelichting","text":"<p>De inzet van algoritme kan onbedoeld leiden tot discriminerende effecten.  Het is van belang om als organisatie een protocol te hebben vastgesteld waarin is uitgewerkt hoe wordt omgegaan met situaties waarin (een vermoeden van) discriminatie door een algoritme is geconstateerd. In een dergelijk protocol kunnen de handelingen worden beschreven die moeten worden uitgevoerd om deze situatie te gaan herstellen. Het vaststellen van een dergelijk protocol geeft ontwikkelaar en gebruikers (vooraf) duidelijkheid wat van hen wordt verwacht en wat zij kunnen doen om discriminatie door algoritmes te voorkomen. Een voorbeeld hiervan is het analyseren van de data op datakwaliteit en bias in de data en toets regelmatig je algoritmisch systeem op bias. </p> <p>Het Ministerie van Binnenlandse Zaken en Koninkrijksrelaties heeft een discriminatieprotocol opgesteld wat organisaties handvatten biedt.</p> <p>Een discriminatieprotocol kan de volgende stappen bevatten:</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/#stap-1-vermoeden-van-onrechtmatigheid","title":"Stap 1: Vermoeden van onrechtmatigheid","text":"<p>Een vermoeden van bevooroordeeldheid of discriminatie kan vanuit verschillende partijen gemeld worden.  Signalen hiervoor kunnen worden ontvangen vanuit de interne organisatie, bijvoorbeeld door de betrokken ontwikkelaars, gebruikers of beheerders, of door externe partijen, zoals belanghebbenden, toezichthouder, journalisten. </p> <ul> <li>Zorg dat signalen tijdig bij de goede medewerkers terecht komen. </li> <li>Indien er sprake is van zo'n vermoeden, zorg je dat bijvoorbeeld de uitvoerend directeur, de interne toezichthouder en/of de CIO en CDO hierover worden ge\u00efnformeerd. </li> <li>Maak met de verantwoordelijken een afweging of het betreffende systeem in werking kan blijven of dat bijvoorbeeld het noodplan voor het stopzetten van het algoritme (tijdelijk) in gang moet worden gezet. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/#stap-2-inzicht-en-overzicht","title":"Stap 2: Inzicht en overzicht","text":"<p>Het is van belang om inzicht en overzicht te krijgen over de oorzaak en de gevolgen van eventuele discriminerende effecten van het algoritme.  Daarvoor kan worden gedacht aan het uitvoeren van een bias analyse.</p> <ul> <li>Bepaal wie er verantwoordelijk is voor het uitvoeren van het onderzoek.</li> <li>Bepaal of je een onafhankelijk onderzoek wilt doen naar het algoritme.</li> <li>Breng in kaart wat de omvang van het probleem is. Hoe lang doet het probleem zich al voort, en hoeveel mensen betreft het?</li> <li>Ga snel met (vertegenwoordigers van) gedupeerden in gesprek over de gevolgen en de mogelijke schade</li> <li>Trek een conclusie of er sprake is van discriminatie, of een sterk vermoeden van discriminatie. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/#stap-3-beperken-schade","title":"Stap 3: Beperken schade","text":"<p>Bepaal welke mitigerende maatregelen er genomen moeten worden. Als er in het onderzoek is vastgesteld dat er sprake is van discriminatie, dan moet het betreffende systeem worden stopgezet. Hierbij kan je denken aan:</p> <ul> <li>Het in werking stellen van het het noodplan voor het stopzetten van het algoritme, indien dat in stap 1 nog niet gebeurd is. </li> <li>Aanpassingen in het algoritme, de werkinstructies of de bijbehorende processen.</li> <li>Indien het algoritme essentieel is in de uitvoer kan er sprake zijn van een een proportionaliteitsvraagstuk. In dat geval moet er worden bezien wat de alternatieven zijn, en of er delen van het systeem kunnen worden uitgeschakeld.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/#stap-4-melden-en-informeren","title":"Stap 4: Melden en informeren","text":"<p>De conclusies van de eerdere stappen moeten, indien nodig, worden gemeld bij de betreffende instanties. De eventuele gedupeerde burgers dienen te worden ge\u00efnformeerd over de gevolgen.</p> <ul> <li>Als er sprake is van een hoog-risico-AI-systeem moeten ernstige incidenten worden gemeld bij de markttoezichtautoriteiten. Zie artikel 73 van de AI-verordening en artikel 3 (49.c) van de AI-verordening.</li> <li>Voor alle algoritmes geldt: Informeer de interne toezichthouder, de externe toezichthouder en de politiek, afhankelijk van hoeveel mensen geraakt en gedupeerd zijn en de impact. </li> <li> <p>Informeer de betrokken burgers over de sitatie. Maak indien nodig excuses en geef de mensen die (mogelijk) geraakt zijn uitleg zodat zij:</p> <ul> <li>begrijpen wat er is gebeurd</li> <li>weten wat de waarschijnlijke gevolgen zijn</li> <li>welke mitigerende maatregelen zijn genomen</li> <li>waar mensen terecht kunnen met vragen</li> <li>op de hoogte zijn van het proces rondom de afhandeling van de schade.</li> </ul> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/#stap-5-registratie-en-afhandeling","title":"Stap 5: Registratie en afhandeling","text":"<ul> <li>Registreer het algoritme in het algoritmeregister, indien dat nog niet gebeurd is.</li> <li>Zorg voor goede klachtenafhandeling en herstelprocedures. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/#bronnen","title":"Bronnen","text":"<ul> <li>Discriminatieprotcol van het Ministerie van Binnenlandse Zaken en Koninkrijksrelaties</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-01-formuleren-probleemdefinitie/","title":"Beschrijf het probleem dat het algoritme moet oplossen","text":"<p>pba-01ProbleemanalyseProjectleiderGovernanceTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-01-formuleren-probleemdefinitie/#maatregel","title":"Maatregel","text":"<p>Formuleer en documenteer wat de aanleiding is om een algoritme in te willen zetten.  Formuleer duidelijk de probleemdefinitie en probleemafbakening waarvoor het algoritme een oplossing zou moeten vormen. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-01-formuleren-probleemdefinitie/#toelichting","title":"Toelichting","text":"<p>Formuleer de probleemdefinitie en probleemafbakening zo concreet en precies mogelijk. Maak dit waar mogelijk kwantificeerbaar. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-01-formuleren-probleemdefinitie/#risico","title":"Risico","text":"<p>Het algoritme dient niet het onderliggende probleem.  Zonder eenduidigheid over het op te lossen probleem is geen sturing op en verantwoording over het algoritme mogelijk. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-01-formuleren-probleemdefinitie/#bronnen","title":"Bronnen","text":"<ul> <li>Impact Assessment Mensenrechten en Algoritmes, 1.01</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.1</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-01-formuleren-probleemdefinitie/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-02-formuleren-doelstelling/","title":"Beschrijf het doel van het algoritme","text":"<p>pba-02ProbleemanalyseProjectleiderGovernanceTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-02-formuleren-doelstelling/#maatregel","title":"Maatregel","text":"<p>Het doel en de eventuele subdoelen van het algoritme moeten zo specifiek mogelijk zijn geformuleerd, en waar mogelijk gekwantificeerd.  Maak de consequenties van het algoritme specifiek en zorg dat het doel van het algoritme formeel is vastgesteld en vastgelegd. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-02-formuleren-doelstelling/#toelichting","title":"Toelichting","text":"<ul> <li> <p>Het doel van de inzet van een algoritme dient zo concreet en specifiek mogelijk gedefinieerd te worden.  Indien er meerdere doelen zijn, is het belangrijk om een zekere rangorde te maken: wat zijn de belangrijkste doelen? En waarom? Welke doelen zijn subdoelen, waarvoor het minder belangrijk is om deze te realiseren?</p> </li> <li> <p>Indien mogelijk, dienen de doelstellingen gekwantificeerd te worden (SMART). </p> </li> <li> <p>Om te zorgen voor voldoende draagvlak voor de beoogde doelen, is het noodzaak om voldoende belanghebbenden te betrekken.  Hierbij kan het ook helpen om burgers te betrekken bij de totstandkoming van de doelstellingen, bijvoorbeeld door middel van een burgerpanel of het betrekken van belangengroepen. </p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-02-formuleren-doelstelling/#risico","title":"Risico","text":"<p>Het algoritme dient niet het beoogde doel en onderliggend probleem.  Zonder eenduidigheid over het doel is geen sturing op en verantwoording over het algoritme mogelijk.  Er is dan een groter risico op fouten en/of verschillen in interpretatie. </p> <p>Wanneer doelstellingen niet meetbaar zijn gemaakt, is het onmogelijk om achteraf te kwantificeren of de doelstellingen zijn behaald.  Doelstellingen zijn in dat geval moeilijk bespreekbaar.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-02-formuleren-doelstelling/#bronnen","title":"Bronnen","text":"<ul> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 1.01, 1.02</li> <li>Impact Assessment Mensenrechten en Algoritmes, 1.2</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.3</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-02-formuleren-doelstelling/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-03-onderbouwen-gebruik-algoritme/","title":"Beschrijf waarom een algoritme het probleem moet oplossen","text":"<p>pba-03ProbleemanalyseProjectleiderGovernanceMenselijke controle</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-03-onderbouwen-gebruik-algoritme/#maatregel","title":"Maatregel","text":"<p>Bepaal en documenteer waarom het gewenst of nodig is om een algoritme in te zetten om het probleem te kunnen aanpakken. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-03-onderbouwen-gebruik-algoritme/#toelichting","title":"Toelichting","text":"<ul> <li> <p>Bepaal waarom het gewenst of nodig is om een algoritme in te zetten, en of er ook alternatieven zijn om het probleem op te lossen.  Documenteer de onderbouwing waarom een algoritme een betere oplossing zou bieden dan een niet-geautomatiseerd of niet-digitaal proces. </p> </li> <li> <p>Maak een bewuste afweging of een algoritme het juiste middel is om het probleem op doelmatige en doeltreffende wijze op te lossen, en documenteer deze afweging.</p> </li> <li> <p>Beoordeel of de gewenste oplossing is toegestaan op grond van de AI-Verordening. </p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-03-onderbouwen-gebruik-algoritme/#risico","title":"Risico","text":"<p>Het algoritme is niet het juiste middel om het probleem op te lossen. Het risico daarbij bestaat dat het probleem niet wordt opgelost. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-03-onderbouwen-gebruik-algoritme/#bronnen","title":"Bronnen","text":"<ul> <li>Impact Assessment Mensenrechten en Algoritmes, 1.01</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.2</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-03-onderbouwen-gebruik-algoritme/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-04-betrek-belanghebbenden/","title":"Overleg regelmatig met belanghebbenden","text":"<p>pba-04ProbleemanalyseOntwerpImplementatieProjectleiderGovernanceFundamentele rechten</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-04-betrek-belanghebbenden/#maatregel","title":"Maatregel","text":"<p>Breng in kaart welke belanghebbenden er zijn en betrek hen op verschillende momenten in de levenscyclus.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-04-betrek-belanghebbenden/#toelichting","title":"Toelichting","text":"<p>Het betrekken van belanghebbenden is van belang in bijna alle fasen van de levenscyclus. Belanghebbenden zijn onder meer eindgebruikers, mensen en rechtspersonen die door het algoritme geraakt kunnen worden en vertegenwoordigende organisaties.</p> <p>In de fase van de probleemanalyse is het allereerst van belang in kaart te brengen welke stakeholders er zijn. Wie gaan bijvoorbeeld werken met het algoritme (eindgebruikers)? En welke demografie\u00ebn worden geraakt door een algoritme? Bij wie liggen de voordelen en bij wie liggen de nadelen? Ga in gesprek met deze belanghebbenden - al dan niet vertegenwoordigd door belangenorganisaties zoals burgerrechtenorganisaties - over het te ontwerpen algoritme en de context waarin het gebruikt wordt. Zij kunnen waardevolle inzichten en wensen delen, wat kan bijdragen aan een betere werking van het algoritme. </p> <p>Enkele voorbeelden hierbij zijn: - Het betrekken van burgers bij het ontwerpen van een algoritme in de ontwerpfase.  - Het bespreken welke definitie en metriek van fairness past bij de context met de proceseigenaar en een ethicus. - Het betrekken van domeinexperts in de fase van dataverkenning en datapreparatie, om zo in kaart te brengen wat de data features betekenen en waar zij vandaan komen. - Het betrekken van eindgebruikers bij het ontwikkelen en het implementeren van het algoritme. - Het betrekken van belanghebbenden bij het monitoren en evalueren van het algoritme. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-04-betrek-belanghebbenden/#bronnen","title":"Bronnen","text":"<ul> <li>Toetsingskader Algemene Rekenkamer 2.12</li> <li>Ethics Guidelines for Trustworthy AI</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.10 </li> <li>Framework for Meaningful Engagement</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-04-betrek-belanghebbenden/#risico","title":"Risico","text":"<p>Het niet betrekken van belanghebbenden bij de ontwikkeling en het gebruik van algoritmes, kan ertoe leiden dat belangrijke inzichten of perspectieven niet worden verwerkt en het algoritme onjuist gaat functioneren. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-04-betrek-belanghebbenden/#voorbeeld","title":"Voorbeeld","text":"<p>Er zijn veel verschillende methoden om belanghebbenden te betrekken. Zo kan je bijvoorbeeld werken met persona\u2019s of \u2018empathy maps\u2019 maken. Ook kan je focusgroepen houden. Denk dan bijvoorbeeld aan een burgerpanel.</p> <p>Andere methoden zijn: Methodologie van Waag, Civic AI lab, Stakeholder escalation ladder.</p> <p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-05-wettelijke-grondslag/","title":"Beschrijf de wettelijke grondslag voor de inzet van het algoritme","text":"<p>pba-05ProbleemanalyseJuristGovernanceTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-05-wettelijke-grondslag/#maatregel","title":"Maatregel","text":"<p>Beschrijf de wettelijke grondslag voor de inzet van het algoritme en de beoogde besluiten die genomen zullen worden op basis van het algoritme.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-05-wettelijke-grondslag/#toelichting","title":"Toelichting","text":"<ul> <li>Analyseer of er een concrete wettelijke grondslag is die de inzet van het algoritme mogelijk maakt en deze inzet voldoende voorzienbaar maakt. </li> <li>Als de verwachting is dat een algoritme tot gevolg heeft dat wordt ingegrepen in het leven of de vrijheid van mensen, en zeker als de verwachting is dat er grondrechten worden geraakt, moet er een wettelijke grondslag bestaan voor de inzet van het algoritme.</li> <li>Voor het verwerken van persoonsgegevens is een wettelijke grondslag noodzakelijk. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-05-wettelijke-grondslag/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Auditdienst Rijk, SV.7, PRI.6</li> <li>Impact Assessment Mensenrechten en Algoritmes, 1.4</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-05-wettelijke-grondslag/#risico","title":"Risico","text":"<p>Het algoritme en beoogde besluiten voldoen niet aan wet- en regelgeving en intern beleid en kaders.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-05-wettelijke-grondslag/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/","title":"Beschrijf de rollen en verantwoordelijkheden voor het ontwikkelen en gebruiken van algoritmes","text":"<p>owp-01OntwerpImplementatieMonitoring en beheerProjectleiderGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/#maatregel","title":"Maatregel","text":"<p>Beschrijf de rollen en verantwoordelijkheden voor het ontwikkelen en gebruiken van algoritmes. De rollen en verantwoordelijkheden worden vastgesteld door de verantwoordelijke(n).</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/#toelichting","title":"Toelichting","text":"<p>Een re\u00ebel risico is dat bepaalde groepen en belanghebbenden over het hoofd worden gezien tijdens het ontwikkelproces van een algoritme. Daarom is het noodzakelijk om al vroeg in kaart te brengen welke groepen allemaal een mening over het beoogde algoritme kunnen hebben.</p> <p>Duidelijkheid en borging van rollen en verantwoordelijkheden zorgen voor een effectief en verantwoord verloop van het proces rondom de ontwikkeling, inkoop en gebruik van een algoritme.  Zeker wanneer ongewenste effecten optreden en maatregelen nodig zijn, is duidelijkheid over rollen, verantwoordelijkheden en bijbehorende besluitvormingsstructuren van belang.</p> <p>Om deze reden kan het handig zijn om een matrix van belanghebbenden op te stellen. Deze matrix kan in verdere fases helpen wanneer belanghebbenden betrokken moeten worden. In deze matrix kunnen de volgende onderdelen staan: </p> <ul> <li>Per belanghebbende een beschrijving van wie deze groep is </li> <li>Mate van invloed van belanghebbende op het algoritme: wie, wanneer in de levenscyclus zorgt voor passende menselijke controle</li> <li>Impact van algoritme op de belanghebbende </li> <li>Risico\u2019s voor belanghebbende (wat zal de belanghebbende merken als het algoritme eventueel niet naar behoren functioneert).  </li> </ul> <p>Een RACI-matrix/VERI-matrix is een passend middel om de verantwoordelijkheden (Responsible/Verantwoordelijk, Accountable/Eindverantwoordelijk, Consulted/Geraadpleegd, Informed/Ge\u00efnfomeerd) te bepalen. Werk specifieke, gevoelige activiteiten nader uit te in concrete taken en verantwoordelijkheden, bijvoorbeeld welke stappen moeten worden gezet om data veilig te leveren ten behoeve van een onderzoek naar onbwuste vooringenomenheid.  </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/#vaststellen-van-rollen-en-verantwoordelijkheden","title":"Vaststellen van rollen en verantwoordelijkheden","text":"<ul> <li>Laat de rollen en verantwoordelijkheden vaststellen door de verantwoordelijke(n). Het doel van vaststelling is dat de verantwoordelijke(n) de verantwoordelijkheid neemt en actief een keuze maakt om het algoritme te (laten) ontwikkelen of gebruiken op de beoogde wijze en met de bijbehorende verantwoordelijkheden. Met het vaststellen worden afspraken geformaliseerd. </li> <li>Vaststelling van de verantwoordelijkheden kan plaatsvinden door beleidsdocumenten, werkinstructies, verwerkersovereenkomst of een PIA/DPIA, mits de verantwoordelijkheden voldoende duidelijk zijn beschreven.</li> <li>Gedurende de levenscyclus kan het voorkomen dat rollen en verantwoordelijkheden opnieuw moet worden beschreven en vastgesteld.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/#verwerking-van-persoonsgegevens","title":"Verwerking van persoonsgegevens","text":"<ul> <li>Bij het verwerken van persoonsgegevens moet worden vastgelegd wie de (gezamelijke) verwerkingsverantwoordelijken zijn en wie de verwerkers. Uit deze vaststelling van de rolverdeling volgen onder de AVG verschillende rechten en plichten.</li> <li>Bij de ontwikkeling en gebruiken van algoritmes is het denkbaar dat de noodzaak voor het verwerken van persoonsgegevens wijzigt en dat meer of andere verwerkingen moeten plaatsvinden. Het is van belang dat wederom wordt beoordeeld wat dit betekent voor de bijbehorende verantwoordelijkheden. Als er sprake is van een wezenlijke wijziging ten opzichte van de al vastgestelde situatie, bijvoorbeeld doordat er meer persoonsgegevens worden verwerkt door een andere partij, dan zal de verwerkingsverantwoordelijke opnieuw tot vaststelling moeten overgaan om de afspraken te formaliseren.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/#voorbeelden","title":"Voorbeelden","text":"<ul> <li>Rapport Kleur Bekennen, Algemene Rekenkamer, p. 114, figuur 5-4</li> <li>De proceseigenaar wordt vaak verantwoordelijk gehouden voor eventuele gevolgen van het gebruik van het algoritme. Deze maatregel zorgt ervoor dat de proceseigenaar niet alle verantwoordelijkheid draagt, omdat dit vaak niet realistisch is. Met deze maatregel kunnen er heldere afspraken over de verschillende verantwoordlijkheden worden gemaakt. Hierdoor wordt het draagvlak groter, zonder ten koste te gaan van de duidelijkheid over rollen en verantwoordelijkheden. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/#risico","title":"Risico","text":"<p>De sturing en verantwoording is ontoereikend of niet geborgd, waardoor er onvoldoende betrokkenheid of capaciteit is van verantwoordelijken. Ook kan er dan onvoldoende deskundigheid in de organisatie zijn, wat de kans vergroot op fouten en ongewenste effecten. Zonder het vaststellen van rollen en verantwoordelijkheden, kan er geen effectieve sturing plaatsvinden op partijen die betrokken zijn bij het ontwikkelen of gebruiken van algoritmes.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/#bronnen","title":"Bronnen","text":"<ul> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 1.06, 3.02</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.9, SV.19, PRI.1</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-02-data-beschikbaarheid/","title":"Voer voorafgaand aan een project een data beschikbaarheid, kwaliteit- en toegankelijkheidsanalayse uit.","text":"<p>owp-11OntwerpProjectleiderBeleid en adviesPublieke inkoopData</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-02-data-beschikbaarheid/#maatregel","title":"Maatregel","text":"<p>Voer voorafgaand aan een project een data beschikbaarheids- en datakwaliteitsanalayse uit.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-02-data-beschikbaarheid/#toelichting","title":"Toelichting","text":"<ul> <li>Het is van belang om voorafgaand aan een project vast te stellen of de data die noodzakelijk is om een algoritme te ontwikkelen of te kunnen gebruiken beschikbaar is, gaat worden en of de data van voldoende kwaliteit is.</li> <li>Er moet worden onderzocht of en hoe data vanuit de eigen organisatie, die van een eventuele externe aanbieder of elders beschikbaar kan worden gesteld, kan worden opgeslagen en of goedkeuring kan worden gegeven voor het verwerken van de data.</li> <li>De infrastructuur van de eigen organisatie en/of die van een eventuele externe aanbieder moet van voldoende niveau zijn om de beoogde verwerkingen uit te kunnen voeren.</li> <li>Een dergelijke analyse levert inzichten op welke problemen er eventueel op dit vlak kunnen ontstaan en geeft input voor de verdere ontwikkeling of (in geval van inkoop) de behoeftestelling.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-02-data-beschikbaarheid/#bronnen","title":"Bronnen","text":"<p>Towards a Systematic Understanding on the Challenges of Procuring Artificial Intelligence in the Public Sector</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-02-data-beschikbaarheid/#risico","title":"Risico","text":"<p>Het zou kunnen voorkomen dat de data niet beschikbaar is en ook niet gaat worden. Dit betekent dat een algoritme ook niet goed gemaakt of gebruikt kan worden. Ook is het belangrijk om te checken of de data beschikbaar blijft als dat nodig is voor het functioneren van het algoritme (bijv. voor het bijleren). Ook bestaat er een risico dat als de data van onvoldoende kwaliteit is, het algoritme niet goed gaat werken. Wanneer niet vooraf bepaald is of de data beschikbaar is en van voldoende kwaliteit kan het gebeuren dat er wel een algoritme gemaakt wordt door een derde partij, maar deze vervolgens niet gebruikt kan worden binnen de organisatie. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-03-doel-verwerken-persoonsgegevens/","title":"Beschrijf voor welk doel het algoritme persoonsgegevens gebruikt en waarom dit mag","text":"<p>owp-03OntwerpDataverkenning en datapreparatieOntwikkelenVerificatie en validatieImplementatieProjectleiderJuristPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-03-doel-verwerken-persoonsgegevens/#maatregel","title":"Maatregel","text":"<p>Het doel voor het verwerken van persoonsgegevens met een algoritme is welbepaald en omschreven.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-03-doel-verwerken-persoonsgegevens/#toelichting","title":"Toelichting","text":"<p>Persoonsgegevens mogen alleen worden verwerkt voor een \u2018welbepaald, uitdrukkelijk omschreven en gerechtvaardigd\u2019 doel. De wettelijke grondslag voor de verwerking van de persoonsgegevens moet zijn beschreven.</p> <p>De verwerking van persoonsgevens voor het ontwikkelen en gebruiken van een algoritme moet verenigbaar met het oorspronkelijke verwerkingsdoel (doelbinding). Eventuele verdere (subsidiaire) verwerkingen, zoals het verwerken van persoonsgegevens voor een onderzoek naar onbewuste vooringenomenheid, moeten uitdrukkelijk worden omschreven.</p> <p>Stel een overzicht op waarin is beschreven welke persoonsgegevens mogen worden verwerkt. Bij de persoonsgegevens is aangegeven om wat voor categorie persoonsgegevens het gaat. Per kenmerk is toegelicht waarom deze noodzakelijk is om te verwerken voor het ontwikkelen en gebruiken van het algoritme. Het principe van dataminimalisatie is toegepast, wat betekent dat een keuze is gemaakt of een persoonsgegevens al dan niet strikt noodzakelijk is om het doel te bereiken of dat verwerking ervan achterwege kan blijven.</p> <p>Voor het beschermen van deze persoonsgegevens wordt per kenmerk aangegeven op welke manier deze kan worden beschermd. Denk hierbij aan het anonimiseren, pseudonomiseren, aggregeren van de persoonsgegevens. </p> <p>Gebruik een DPIA om bovenstaande zaken te beschrijven.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-03-doel-verwerken-persoonsgegevens/#risico","title":"Risico","text":"<p>Als het doel voor het verwerken van persoonsgegevens onvoldoende is omschreven en onderbouwd, ontstaat het risico dat onrechtmatig persoonsgegevens worden verwerken en een inbreuk wordt gemaakt op privacyrechten van betrokkenen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-03-doel-verwerken-persoonsgegevens/#bronnen","title":"Bronnen","text":"<ul> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 3.01, 3.05</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, PRI.4 </li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, PRI.7 </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-03-doel-verwerken-persoonsgegevens/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-04-gebruikte-techniek/","title":"Beschrijf welke techniek gebruikt wordt voor de beoogde toepassing","text":"<p>owp-04OntwerpOntwikkelaarTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-04-gebruikte-techniek/#maatregel","title":"Maatregel","text":"<p>Beschrijf welke techniek gebruikt wordt voor de beoogde toepassing. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-04-gebruikte-techniek/#toelichting","title":"Toelichting","text":"<ul> <li>Beschrijf wat voor soort algoritme er gebruikt gaat worden voor de beoogde toepassing. </li> <li> <p>Bepaal of je gebruik wilt maken van een:</p> <ul> <li>zelflerend algoritme</li> <li>niet-zelflerend algoritme zoals een algoritme gebaseerd op rekenregels</li> </ul> </li> <li> <p>Beschrijf vervolgens ook:</p> <ul> <li>waarom er voor dit type algoritme wordt gekozen</li> <li>wat de alternatieven zijn en waarom die minder passend zijn?</li> <li>waarom dit algoritme het meest geschikt is om het beoogde doel van het algoritme te bereiken. </li> </ul> </li> <li> <p>De precieze details kunnen in dit stadium van de levenscyclus waarschijnlijk nog niet ingevuld worden. Maak een goede eerste inschatting van de gebruikte techniek. Eventueel kan je er ook voor kiezen om verschillende technieken verder te onderzoeken. Dat betekent dat er meerdere algoritmes ontwikkeld worden (op basis van verschillende technieken), en je later een definitieve keuze maakt. </p> </li> <li> <p>Het is belangrijk om uiteindelijk een passend uitlegbaar algoritme te selecteren voor de context waarin het wordt toegepast. Daarin moet de afweging gemaakt worden of de technische uitlegbaarheid voldoende is in de context die de inzet van het algoritme vereist. Hierbij kan ook de conclusie worden getrokken dat een simpeler, inzichtelijker algoritme de voorkeur krijgt. </p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-04-gebruikte-techniek/#voorbeeld","title":"Voorbeeld","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-04-gebruikte-techniek/#risico","title":"Risico","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-04-gebruikte-techniek/#bronnen","title":"Bronnen","text":"<p>Impact Assessment Mensenrechten en Algoritmes, 2A.1, 2B.1</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-05-soort-algoritme/","title":"Bepaal het soort algoritme en de risicogroep en vereisten die hierbij horen","text":"<p>owp-05OntwerpOntwikkelenProjectleiderBeleid en adviesPublieke inkoopGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-05-soort-algoritme/#maatregel","title":"Maatregel","text":"<p>Stel vast om wat voor type algoritme het gaat en wat de bijbehorende risicoclassificatie is om te bepalen welke vereisten hierop van toepassing zijn.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-05-soort-algoritme/#toelichting","title":"Toelichting","text":"<p>Het verschilt per type algoritme welke vereisten hierop van toepassing is en waar een aanbieder of gebruiksverantwoordelijke aan moet voldoen.  Dit is mede afhankelijk van de bijbehorende risicoclassificatie.  Hiervoor kan in de nabije toekomst de 'beslisboom' in het Algoritmekader voor worden gebruikt'.  Deze stap is van groot belang, omdat dit ook bepalend is welke contractuele verplichtingen moeten worden gecre\u00eberd tussen opdrachtgever en opdrachtnemer/aanbieder. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-05-soort-algoritme/#bronnen","title":"Bronnen","text":"<p>Algoritmekader</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-05-soort-algoritme/#voorbeeld","title":"Voorbeeld","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/","title":"Inventariseer welke grondrechten het algoritme kan schenden en maak een belangenafweging","text":"<p>owp-06ProbleemanalyseOntwerpVerificatie en validatieMonitoring en beheerProjectleiderBeleid en adviesFundamentele rechten</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/#maatregel","title":"Maatregel","text":"<p>Identificeer welke grondrechten geraakt worden door het in te zetten algoritme en maak een afweging of dit aanvaardbaar is</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/#toelichting","title":"Toelichting","text":"<p>Een algoritme kan invloed hebben op grondrechten. Op een aantal grondrechten kan een algoritme sneller invloed hebben, zoals recht op persoonsgegevensbescherming, recht op behoorlijk bestuur en recht op gelijke behandeling. Deze veelvoorkomende grondrechten krijgen op andere plekken in het Algoritmekader specifieke aandacht.  Er zijn echter ook grondrechten die bij minder algoritmen relevant zijn, maar desalniettemin in die gevallen zeer invloedrijk kunnen zijn.  Het is van belang uiteindelijk een totale afweging te maken van alle grondrechten die (mogelijk) geraakt worden ten opzichte van de voordelen van het in te zetten algoritme.  Een voorbeeld van een grondrecht dat minder snel geraakt wordt is bijvoorbeeld een algoritme om hate speech te kunnen detecteren. Zo'n algoritme zal van invloed kunnen zijn op de vrijheid van meningsuiting en het recht op informatie.</p> <p>Doorloop in lijn met Deel 4 van het Impact Assessment Mensenrechten en Algoritmes de volgende stappen:</p> <ol> <li>Breng in kaart welke grondrechten geraakt kunnen worden door de inzet van het algoritme. Hiervoor kan bijlage 1 uit het Impact Assessment Mensenrechten en Algoritmes gebruikt worden.</li> <li>Als dat het geval is, is het allereerst van belang om te controleren of hiervoor specifieke wetgeving is waar de inzet van het algoritme aan moet voldoen.</li> <li>Bepaal hoe zwaar de geindentificeerde grondrechten worden geraakt door het beoogde algoritme.</li> <li>Bepaal hoe doeltreffend/effectief het algoritme in de praktijk is.</li> <li>Bepaal of de inzet van het algoritme noodzakelijk is om het beoogde doel te bereiken. Zijn er alternatieven? Of zijn er mitigerende maatregelen die genomen kunnen worden waardoor grondrechten niet of minder worden geraakt en eventuele nadelige gevolgen verzacht kunnen worden?</li> <li>Gegeven alle voorgaande stappen, bepaal of de inzet van het algoritme en proportioneel is om het beoogde doel te bereiken. Wegen de voordelen op tegen de nadelen?</li> </ol> <p>Het is van belang voldoende belanghebbenden te betrekken bij het doorlopen van deze stappen om te zorgen dat alle eventueel nadelige aspecten van het in te zetten algoritme worden meegenomen.  Documenteer de doorlopen stappen en leg de keuzes en afwegingen goed vast. </p> <p>Opmerking</p> <p>Zoals vermeld in de vereiste voor beoordeling van gevolgen voor grondrechten uit de AI-verordening moeten sommige hoog-risico AI-systemen een beoordeling doen van de gevolgen voor grondrechten. Het is nog niet bekend welke vorm dit precies moet hebben.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/#bronnen","title":"Bronnen","text":"<ul> <li>Impact Assessment Mensenrechten en Algoritmes, deel 4</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.4</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/#risico","title":"Risico","text":"<p>Het risico is dat er grondrechten, anders dan die expliciet beschermd zijn in andere maatregelen en vereisten, aangetast worden.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/#voorbeeld","title":"Voorbeeld","text":"<p>Hoofdstuk 4 van het Impact Assesment Mensenrechten en Algoritmen (IAMA) richt zich specifiek op de grondrechten. In bijlage 1 is tevens een overzicht te vinden van mogelijk relevante grondrechten.</p> <p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-07-kwetsbare-groepen/","title":"Maak een lijst van de meest kwetsbare groepen en bescherm hen extra","text":"<p>owp-07OntwerpBeleid en adviesFundamentele rechten</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-07-kwetsbare-groepen/#maatregel","title":"Maatregel","text":"<p>Bepaal wat de impact van het in te zetten algoritme is voor betrokkenen (personen of groepen). Bepaal vervolgens of er groepen zijn waarbij de impact van het algoritme dermate groot kan zijn, dat het wenselijk is om deze groepen extra bescherming te bieden.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-07-kwetsbare-groepen/#toelichting","title":"Toelichting","text":"<ul> <li>Verschillende groepen kunnen op een andere manier geraakt worden door het inzetten van een algoritme. Dit is afhankelijk van de context waarin het algoritme wordt ingezet, en dient daardoor bij iedere toepassing opnieuw bekeken te worden. </li> <li>Bedenk wat er met de uitkomsten van het algoritme gedaan wordt, en wat de consequenties daarvan zijn voor burgers. Hierbij kan gedacht worden aan de volgende aspecten:<ul> <li>Worden bepaalde groepen sneller gemonitord?</li> <li>Wat als het model het fout heeft? </li> <li>Wordt het systeem gebruikt om informatie te verkrijgen, om besluiten voor te bereiden of om zelfstandige besluiten te nemen en welke gevolgen heeft dat voor de mate waarin het algoritme bepalend zal zijn in de praktijk? </li> <li>Worden de gegevens veilig en vertrouwelijk behandeld; welke gevolgen zou een datalek hebben voor groepen of categorie\u00ebn personen?</li> <li>Worden data gedeeld met andere partijen en wat is het gevaar dat die misbruik maken van de data met negatieve gevolgen voor groepen of categorie\u00ebn personen?</li> </ul> </li> <li>Houd hierbij ook rekening met de impact van het in te zetten algoritme op de samenleving (vanuit sociaal, democratisch en milieu/ecologisch perspectief).</li> <li>Om de impact op groepen te bepalen, kan het handig zijn een mensenrechtentoets zoals het Impact Assessment Mensenrechten en Algoritmes toe te passen. </li> <li>Bepaal of er maatregelen genomen kunnen worden om de ge\u00efdentificeerde groepen extra bescherming te bieden. Hierbij kan men denken aan de volgende aspecten: Kan de (extra) administratieve druk voor bepaalde groepen worden weggenomen? Worden resultaten van het algoritme naast de resultaten van een expert gelegd? Is het wenselijk om een proces in te richten waarbij zowel algoritme als een expert een uitkomst geven? Kunnen we de betreffende groep extra hulp aanbieden? Is het wenselijk bij negatieve uitkomsten een vier-ogen-principe toe te passen? </li> <li>De impact van het algoritme op de groepen die ge\u00efdentificeerd worden in deze stap, kunnen mogelijk onderzocht worden in een biasanalyse. Daarbij kan geidentificeerd worden of bepaalde groepen oververtegenwoordigd of ondervertegenwoordigd zijn in selecties, of dat het algoritme andere of meer fouten maakt voor bepaalde groepen. </li> <li>Merk op dat het onmogelijk is om de risico's voor alle specifieke groepen af te vangen. Hierbij kan het helpen om te focussen op de meest kwetsbare groepen. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-07-kwetsbare-groepen/#risico","title":"Risico","text":"<p>De impact van het algoritme op de besluitvorming en op personen, doelgroepen en/of de samenleving is niet inzichtelijk, waardoor onvoldoende maatregelen zijn getroffen om ongewenste effecten (zoals bias en discriminatie) te voorkomen. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-07-kwetsbare-groepen/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.4, DM.16</li> <li>Kamerstukken II 2023/24, 31066-1374</li> <li>Impact Assessment Mensenrechten en Algoritmes, 4.1</li> <li>Handreiking non-discriminatie by design, 1.7 en 1.8 en 1.15</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-07-kwetsbare-groepen/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-08-archiveren-documenten/","title":"Bepaal welke documenten voor hoe lang gearchiveerd moeten worden","text":"<p>owp-08OntwerpOntwikkelenOntwikkelaarProjectleiderJuristTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-08-archiveren-documenten/#maatregel","title":"Maatregel","text":"<p>Stel vast welke documenten, (samengesteld geheel van) data/informatie van/in het algoritme gelden als \"archiefbescheiden\" in de zin van artikel 1 c Archiefwet en documenteer daarvan een overzicht, bij voorkeur vastgesteld door een daartoe bevoegde. Bepaal de bijbehorende bewaartermijnen vast voor de archiefbescheiden.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-08-archiveren-documenten/#toelichting","title":"Toelichting","text":"<ul> <li>Bij archiefbescheiden kan worden gedacht aan de broncode, trainings- en testdata, (technische) documentatie en de output. </li> <li>Deze archiefbescheiden moeten voor een bepaalde tijd worden bewaard (de bewaartermijn).</li> <li>Overleg hierover met de verantwoordelijke binnen de organisatie voor het toepassen van de Archiefwet.</li> <li>Het is mogelijk dat de selectielijsten nog niet duiden welke informatie of data, specifiek bij de toepassing van algoritmen, moet worden toegepast en hier dus ook nog geen termijnen bij zijn gekoppeld. </li> <li>Stel vast of beperkingen aan openbaarheid van de archiefbescheiden moeten worden gesteld. Er zijn gevallen waarbij het openbaren van archiefbescheiden is uitgesloten. Stem in het begin van het proces (pro-actief) met de opdrachtgever af wat de wenselijkheid is t.a.v. transparantie/openheid (uitgangspunt zou 'open, tenzij' moeten zijn).</li> <li>Stel vast hoe de archiefbescheiden op een duurzame wijze toegankelijk kunnen worden gemaakt. Het moet mogelijk zijn dat de archiefbescheiden daadwerkelijk overhandigd kunnen worden aan betrokken partijen. Denk hierbij aan burgers, onderneming, toezichthouder of rechters. Duurzaam betekent hier met behoud van functie en kwaliteit voor langere tijd. Onderzoek welke voorziening hiervoor beschikbaar is binnen de organisatie.</li> </ul> <p>Tip</p> <p>Formeer hierbij een multi-discipinaire groep (bestaande uit bijvoorbeeld een inkoper, ontwikkelaar, data scientist, proceseigenaar en archiefdeskundige) om deze maatregel toe te passen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-08-archiveren-documenten/#bronnen","title":"Bronnen","text":"<ul> <li>Rekenen en rekenschap. Essay over Algoritmes en de Archiefwet</li> <li>Toetsingskader Algemene Rekenkamer 4.06 </li> <li>Onderzoekskader Auditdienst Rijk, DM.13 </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-08-archiveren-documenten/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-model-verwerkersovereenkomst-onderdeel-aanbesteding/","title":"Een model-verwerkersovereenkomst is onderdeel van de aanbesteding als persoonsgegevens worden verwerkt","text":"<p>owp-09OntwerpMonitoring en beheerProjectleiderBeleid en adviesPublieke inkoopPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-model-verwerkersovereenkomst-onderdeel-aanbesteding/#maatregel","title":"Maatregel","text":"<p>Inventariseer of er mogelijk sprake is van een algoritme dat een hoog risico kan inhouden voor de rechten en vrijheden van natuurlijke personen of impactvol kan zijn voor hen en maak in voorkomend geval in de model-verwerkersovereenkomst een uitdrukkelijke verwijzing naar een concreet DPIA-document (met datum/kenmerk) of (indien op dat moment nog in bezit of bekend bij de steller) een expliciet invulveld voor het duiden van de betreffende DPIA, zodat die wordt genoemd ter completeren van de verwerkersovereenkomst vooraf het overeenkomen/ondertekenen van die verwerkersovereenkomst.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-model-verwerkersovereenkomst-onderdeel-aanbesteding/#toelichting","title":"Toelichting","text":"<p>Een model-verwerkersoverenkomst is veelal een verplicht onderdeel bij het publiek inkopen van software waarbij persoonsgegevens worden verwerkt en bij de totstandkoming van de overeenkomst.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-model-verwerkersovereenkomst-onderdeel-aanbesteding/#bronnen","title":"Bronnen","text":"<p>Algoritmekader</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-model-verwerkersovereenkomst-onderdeel-aanbesteding/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-multidisciplinair-inkoopteam/","title":"Stel een multidisciplinair team samen bij het ontwikkelen of inkopen van algoritmes.","text":"<p>owp-09OntwerpProjectleiderBeleid en adviesPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-multidisciplinair-inkoopteam/#maatregel","title":"Maatregel","text":"<p>Stel een multidisciplinair team samen bij het ontwikkelen of inkopen van algoritmes.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-multidisciplinair-inkoopteam/#toelichting","title":"Toelichting","text":"<ul> <li>Bij een project gericht op het ontwikkelen of inkopen van algoritmes is het belangrijk dat betrokkenen al in een vroeg stadium samenwerken. Dit betekent dat zowel een interne opdrachtgever als het ontwikkelingsteam of de afdeling inkoop tijdig worden aangehaakt om te zorgen voor een goed afgestemd proces.</li> <li>Wanneer het gaat om het ontwikkelen of inkopen van algoritmes, is een multidisciplinair team wenselijk. Zo'n team brengt relevante kennis en ervaring samen om de behoeften en specificaties helder te krijgen. Afhankelijk van de aard en complexiteit van het algoritme kunnen de rollen binnen dit team vari\u00ebren.</li> <li>Naast een interne opdrachtgever, materiedeskundige en gebruiker kun je voor het ontwikkelen van algoritmes denken aan een data-engineer, data scientist, IT-architect, ethicus, data- en privacy-officer. Bij een overheidsopdracht gericht op de inkoop van een algiritme, horen daar nog een (aanbestedings)jurist en inkoper bij. Afhankelijk van de complexiteit van de oplossing zijn meer of minder disciplines en dus te beleggen verantwoordelijkheden binnen het team wenselijk.</li> <li>Een multidisciplinair team kan ondersteunen bij het formuleren van de probleemstelling of formuleren van de doelstellingen van een project, verkennen van de mogelijke oplossingsrichtingen en het vertalen van de gewenste oplossingsrichting naar de concrete behoefte.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-multidisciplinair-inkoopteam/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-multidisciplinair-inkoopteam/#risico","title":"Risico","text":"<p>Zonder een multidisciplinair team is het waarschijnlijk dat belangrijke aspecten voor een verantwoorde inzet van algoritmes niet worden geadresseerd en ongewenste algoritmes worden ontwikkeld of ingekocht.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-multidisciplinair-inkoopteam/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/","title":"Maak een Project Startarchitectuur (PSA) voor de ontwikkeling of inkoop van algoritmes","text":"<p>owp-10OntwerpOntwikkelenVerificatie en validatieImplementatieProjectleiderBeleid en adviesTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/#maatregel","title":"Maatregel","text":"<p>Voer een Project Startarchitectuur (PSA) uit als algoritmes worden ontwikkeld of ingekocht.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/#toelichting","title":"Toelichting","text":"<ul> <li>Een Project Startarchitectuur (PSA) is een hulpmiddel dat bij een project wordt ingezet om veranderingen van A naar Beter te faciliteren.</li> <li>De PSA richt zich daarbij op de kaders die op een project van toepassing zijn en wat de oplossing bijdraagt aan het realiseren van de gewenste, toekomstige architectuur, wat de implicaties zullen zijn voor bestaande voorzieningen en waar het project zal afwijken van bestaande beelden.</li> <li>Met de PSA wordt een concreet en doelgericht ICT-architectuurkader opgesteld, waarbinnen het project moet worden uitgevoerd. </li> <li>De PSA maakt concreet wat architectuur voor een project betekent.</li> <li>Door een PSA uit te voeren ontstaan inzichten hoe het betreffende algoritme zo optimaal mogelijk onderdeel kan worden gemaakt van het bestaande applicatielandschap, waarmee bijvoorbeeld kan worden voorkomen dat het algoritme of AI-systeem na verloop van tijd geen input meer kan ontvangen door onverwachte wijzigingen in systemen.</li> <li>Onderwerpen als privacy, informatiebeheer en beheer worden hierin ook globaal meegenomen. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/#risico","title":"Risico","text":"<p>Het algoritme kan niet of na verloop van tijd niet meer functioneren, doordat onverwachte of ongewenst wijzigingen in het applicatielandschap plaatsvinden. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/#bronnen","title":"Bronnen","text":"<ul> <li>Project Startarchitectuur,NORA</li> <li>PSA Format</li> <li>PSA Handleiding</li> <li>Algoritmekader</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/#voorbeeld","title":"Voorbeeld","text":"<ul> <li>Gemeente Amsterdam - Onderzoekswaardigheid Algoritme \u2018Slimme check\u2019 (Een tool die de medewerkers helpt om te bepalen of een aanvraag levensonderhoud onderzoekswaardig is, niet meer in gebruik!): Start Architectuurnotitie van dit project</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/","title":"Koop duurzaam algoritmes in","text":"<p>owp-11OntwerpProjectleiderBeleid en adviesPublieke inkoopDuurzaamheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/#maatregel","title":"Maatregel","text":"<p>Kies softwareoplossingen van aanbieders die duurzaamheid bevorderen, en stel heldere eisen aan energieverbruik, hernieuwbare energiebronnen en transparantie over de milieuprestaties van software.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/#toelichting","title":"Toelichting","text":"<p>Door software duurzaam in te kopen, kun je als organisatie al vroeg in het ontwikkelproces bijdragen aan de verduurzaming van je algoritmes. Kies daarom softwareoplossingen van aanbieders die maatschappelijk verantwoord ondernemen (MVI) en energie-effici\u00ebntie vooropstellen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/#duurzaamheidscriteria-en-selectie-van-aanbieders","title":"Duurzaamheidscriteria en selectie van aanbieders","text":"<p>Om software duurzaam in te kopen, kun je aanbieders beoordelen op specifieke duurzaamheidscriteria. Enkele belangrijke criteria zijn:</p> <ul> <li>het energieverbruik van de software</li> <li>het gebruik van hernieuwbare energiebronnen in de benodigde datacenters</li> <li>het beperken van CO\u2082-uitstoot tijdens de levenscyclus van de software</li> </ul> <p>Vraag om inzicht in milieuprestaties en certificeringen, zoals ISO-14001, om de toewijding van aanbieders aan duurzaamheid te toetsen. De ISO-14001 is een internationaal geaccepteerde standaard met eisen voor een milieumanagementsysteem.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/#inkoopvoorwaarden-en-contractuele-eisen","title":"Inkoopvoorwaarden en contractuele eisen","text":"<p>Stel bij het inkopen duidelijke eisen aan duurzaamheidscriteria, zoals het gebruik van \"groene technologie\u00ebn\", het aanbieden van Software-as-a-Service (SaaS) en open standaarden. Zo maak je duurzame keuzes die bijdragen aan een langere levensduur en energie-effici\u00ebntie van je algoritmes. Door KPI\u2019s op te nemen voor energie-effici\u00ebntie en CO\u2082-reductiedoelen kun je de voortgang van deze doelen concreet monitoren. Je kunt deze voorwaarden opnemen als standaard inkoopvoorwaarden.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/#bonus-malusregeling-en-monitoring","title":"Bonus-malusregeling en monitoring","text":"<p>Om naleving van duurzame doelstellingen te stimuleren, kun je een bonus-malusregeling inzetten. Aanbieders ontvangen een bonus wanneer zij duurzame doelstellingen halen, en kunnen worden aangesproken als beloofde duurzaamheidsnormen niet worden behaald. Monitoring via jaarlijkse rapportages helpt om de voortgang van de duurzaamheidsdoelen te evalueren en, indien nodig, bij te sturen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/#extra-overwegingen","title":"Extra overwegingen","text":"<p>Extra overwegingen die je kunt maken bij het aankopen van algoritmes, zoals genoemd in de handreiking 'Hoe maak ik mijn inkoop van software duurzamer?' van PIANOo:</p> <ul> <li>Ga na of je de software wel echt moet inkopen.</li> <li>Probeer zoveel mogelijk uit te vragen in een SaaS-oplossing.</li> <li>Vraag een oplossing in een Cloud-omgeving.</li> <li>Ga na of \u2018serverless\u2019 ook een oplossing is.</li> <li>Vraag om de broncode van de software.</li> <li>Denk goed na over de technische levensduur van verschillende componenten.</li> <li>Open standaarden zijn een vorm van duurzaamheid.</li> <li>Pas containerisatie en virtualisatie toe.</li> <li>Neem eisen op over opschalingsmogelijkheden.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/#risico","title":"Risico","text":"<p>Zonder duurzaamheidscriteria bij het inkopen van software loop je het risico op hogere energie- en kostenlasten, en beperk je de mogelijkheden om duurzaamheidsdoelstellingen te halen bij je algoritmes.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/#bronnen","title":"Bronnen","text":"<ul> <li>Handreiking: Hoe maak ik mijn inkoop van software duurzamer? (PIANOo)</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/#voorbeeld","title":"Voorbeeld","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-gebruikte-data/","title":"Beschrijf welke data gebruikt wordt voor de beoogde toepassing","text":"<p>owp-02OntwerpDataverkenning en datapreparatieOntwikkelaarBeleid en adviesData</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-gebruikte-data/#maatregel","title":"Maatregel","text":"<p>Beschrijf welke data gebruikt wordt voor de beoogde toepassing. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-gebruikte-data/#toelichting","title":"Toelichting","text":"<ul> <li>Maak in een vroege fase van de ontwikkeling een inschatting van welke data er gebruikt gaat worden voor het algoritme.</li> <li>Leg na het uitvoeren van een beschikbaarheids-, kwaliteit en toegankelijkheidsanalyse vast, welke data wordt verwerkt voor het ontwikkelen en gebruiken van het algoritme</li> <li>Beschrijf daarbij om wat voor gegevens het gaat en uit welke bron deze komen.</li> <li>Bepaal of het is toegestaan om deze data te verwerken.</li> <li>Het is denkbaar dat het onderzoek van de kwaliteit van de data in een latere fase in de levenscyclus pas grondig kan worden uitgevoerd. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-gebruikte-data/#voorbeeld","title":"Voorbeeld","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-gebruikte-data/#risico","title":"Risico","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-gebruikte-data/#bronnen","title":"Bronnen","text":"<ul> <li>Impact Assessment Mensenrechten en Algoritmes, 2A.2.1</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/","title":"Bespreek de vereisten die gelden voor een verantwoorde inzet van algoritmes met aanbieders.","text":"<p>owp-12OntwerpOntwikkelenProjectleiderPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/#maatregel","title":"Maatregel","text":"<p>Bespreek de vereiste die gelden voor een verantwoorde inzet van algoritmes met een aanbieder.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/#toelichting","title":"Toelichting","text":"<p>Ga met een aanbieder in gesprek over in hoeverre zij invulling kunnen geven aan de vereisten die gelden voor een verantwoorde inzet van algoritmes. Dit kan worden gedaan bijvoorbeeld bij een informatiesessie met aanbieders voorafgaand aan een aanbesteding. </p> <p>Op basis van nieuwe of gewijzigde wet- en regelgeving of de totstandkoming van nieuwe standaard, is het denkbaar dat aanbieders van algoritmes nog niet of niet meer voldoet aan deze vereisten. Het is van belang om deze inzichten bijvoorbeeld tijdens een aanbesteding worden verkregen. Indien van toepassing, laat de aanbieder inzichtelijk maken welke stappen deze gaat zetten om hieraan te gaan voldoen. Dit is ook relevant bij reeds afgesloten contracten.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/#risico","title":"Risico","text":"<p>Door de vereisten voor een verantwoorde inzet van algoritmes niet te bespreken met aanbieders, is het voor hen (deels) onduidelijk aan welke vereisten diens algoritmes moet voldoen om te kunnen contractueren met overheidsorganisaties.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/","title":"Ontwerp algoritmes zo eenvoudig mogelijk","text":"<p>owp-12OntwerpOntwikkelenOntwikkelaarDuurzaamheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/#maatregel","title":"Maatregel","text":"<p>Ontwerp algoritmes gericht op eenvoud en effici\u00ebntie, zodat het energieverbruik en de benodigde rekenkracht tijdens gebruik minimaal blijven.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/#toelichting","title":"Toelichting","text":"<p>Complexe algoritmes vereisen vaak aanzienlijke rekenkracht, wat energie-intensief kan zijn. Door algoritmes minder complex en rekenintensief te ontwerpen, verlaag je de benodigde middelen en energie bij het trainen en uiteindelijk toepassen van deze algoritmes. Een effici\u00ebnter ontwerp maakt de algoritmes energiezuiniger in de trainings- en gebruiksfase en draagt zo bij aan duurzaamheid in de gehele levenscyclus.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/#modellen-vereenvoudigen-en-focussen-op-kernfunctionaliteit","title":"Modellen vereenvoudigen en focussen op kernfunctionaliteit","text":"<p>Wanneer je een nieuw algoritme ontwikkelt, kun je de omvang en rekenbelasting beperken door alleen noodzakelijke functionaliteit op te nemen. Focus op de kernfunctionaliteit, zodat je gebruik maakt van een kleiner model dat beter te begrijpen en gemakkelijker te beheren is. Het vermijden van overbodige functionaliteiten maakt het algoritme minder zwaar en verlaagt de milieu-impact aanzienlijk.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/#minder-complexiteit-door-divide-and-conquer-en-dynamisch-programmeren","title":"Minder complexiteit door divide-and-conquer en dynamisch programmeren","text":"<p>Een populaire methode om complexiteit te verlagen is het divide-and-conquer principe, waarbij je een grote algoritmische berekening opsplitst in kleinere, overzichtelijke deelberekeningen en deze vervolgens oplost (je splitst hierbij het technische probleem in meerdere kleinere problemen). Dit vermindert de rekenlast aanzienlijk en verhoogt de effici\u00ebntie. Ook kun je met dynamisch programmeren optimalisaties toevoegen door eerder berekende resultaten op te slaan en te hergebruiken, wat herhaling van berekeningen voorkomt en de rekenkracht vermindert.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/#minder-complexiteit-door-modeloptimalisatie","title":"Minder complexiteit door modeloptimalisatie","text":"<ul> <li>Door gebruik te maken van pruning kunnen minder relevante verbindingen en nodes in een neuraal netwerk worden verwijderd, waardoor de rekenbelasting vermindert.</li> <li>Quantization verlaagt de precisie van numerieke waarden in een model, wat opslag en rekenkracht verlaagt zonder de prestaties significant te be\u00efnvloeden.</li> <li>Knowledge distillation kan verder helpen door de kennis van een groot model over te dragen naar een kleiner, minder complex model, dat vervolgens effici\u00ebnter werkt.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/#risico","title":"Risico","text":"<p>Ontwerpen zonder oog voor effici\u00ebntie kan leiden tot energie-intensieve algoritmes die hoge kosten en milieubelasting met zich meebrengen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/#-what-is-knowledge-distillation-ibm","title":"- What is knowledge distillation? (IBM)","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/#voorbeeld","title":"Voorbeeld","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/","title":"Maak vereisten voor algoritmes onderdeel van algemene inkoopvoorwaarden en de contractovereenkomst.","text":"<p>owp-13OntwerpProjectleiderBeleid en adviesPublieke inkoopTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/#maatregel","title":"Maatregel","text":"<p>Maak vereisten voor algoritmes onderdeel van contractvoorwaarden en de contractovereeenkomst.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/#toelichting","title":"Toelichting","text":"<ul> <li>Door vereisten die gelden voor algoritmes onderdeel te maken van contractvoorwaarden, is voor een aanbieder vooraf duidelijk aan welke voorwaarden zij moeten voldoen als zijn algoritmes willen aanbieden aan overheidsorganisaties.</li> <li>Het is van belang om een afweging te maken welke vereisten voor algoritmes als 'algemene contractvoorwaarden' kunnen gelden en welke aanvullend in een contractovereenkomst moeten worden opgenomen.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.11</li> <li>Specificeren algemene inkoopvoorwaarden</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/#risico","title":"Risico","text":"<p>Door de vereisten voor een verantwoorde inzet van algoritmes niet te communiceren met aanbieders, is het voor hen (deels) onduidelijk aan welke vereisten diens algoritmes moet voldoen om te kunnen contractueren met overheidsorganisaties.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/#voorbeeld","title":"Voorbeeld","text":"<ul> <li>Contractvoorwaarden gemeente Amsterdam</li> <li>Europese Inkoopvoorwaarden Hoog Risico </li> <li>Europese Inkoopvoorwaarden Laag Risico</li> </ul> <p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-14-verwerkersovereenkomst-onderdeel-aanbesteding/","title":"Maak het opstellen van een verwerkersovereenkomst onderdeel van de aanbesteding als persoonsgegevens worden verwerkt.","text":"<p>owp-14OntwerpMonitoring en beheerProjectleiderBeleid en adviesPublieke inkoopPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-14-verwerkersovereenkomst-onderdeel-aanbesteding/#maatregel","title":"Maatregel","text":"<p>Het opstellen van een verwerkersovereenkomst met aanbieder is onderdeel van de aanbesteding als persoonsgegevens worden verwerkt of noodzakelijk zijn voor het trainen of genereren van output door algoritmes van aanbieder.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-14-verwerkersovereenkomst-onderdeel-aanbesteding/#toelichting","title":"Toelichting","text":"<p>Een verwerkersovereenkomst moet worden opgesteld als persoonsgegevens worden verwerkt voor het trainen of het genereren van output door algoritmes van aanbieder. Met een verwerkersovereenkomst worden een aantal afspraken schriftelijk vastgelegd het bij de verwerking van persoonsgegevens. Het gaat om de volgende zaken:</p> <ul> <li> <p>Algemene beschrijving. Een omschrijving van het onderwerp, de duur, de aard en het doel van de verwerking, het soort persoonsgegevens, de categorie\u00ebn van betrokkenen en uw rechten en verplichtingen als verwerkingsverantwoordelijke.</p> </li> <li> <p>Instructies voor de verwerking. De verwerking vindt in principe uitsluitend plaats op basis van uw schriftelijke instructies. De verwerker mag de persoonsgegevens niet voor eigen doeleinden gebruiken. Geheimhoudingsplicht. Personen in dienst van of werkzaam voor de verwerker hebben een geheimhoudingsplicht. Beveiliging. De verwerker treft passende technische en organisatorische maatregelen om de verwerking te beveiligen. Bijvoorbeeld pseudonimisering en versleuteling van persoonsgegevens, permanente informatiebeveiliging, herstel van beschikbaarheid en toegang tot gegevens bij incidenten, regelmatige beveiligingstesten.</p> </li> <li> <p>Subverwerkers. De verwerker schakelt geen subverwerker(s) in zonder uw voorafgaande schriftelijke toestemming. De verwerker legt aan een subverwerker in een subverwerkersovereenkomst dezelfde verplichtingen op als de verwerker richting u heeft. In de overeenkomst kunt u ook direct afspreken dat de verwerker subverwerkers mag inschakelen en onder welke voorwaarden. Komt de subverwerker de verplichtingen niet na? Dan blijft de verwerker volledig aansprakelijk richting u voor het nakomen van de verplichtingen van de subverwerker (artikel 28, vierde lid, van de AVG).</p> </li> <li> <p>Privacyrechten. De verwerker helpt u om te voldoen aan uw plichten als betrokkenen hun privacyrechten uitoefenen (zoals het recht op inzage, correctie, verwijdering en dataportabiliteit).</p> </li> <li> <p>Andere verplichtingen. De verwerker helpt u ook om andere verplichtingen na te komen. Zoals bij het melden van datalekken, het uitvoeren van een data protection impact assessment (DPIA) en bij een voorafgaande raadpleging.</p> </li> <li> <p>Gegevens verwijderen. Na afloop van de verwerkingsdiensten verwijdert de verwerker de gegevens. Of bezorgt de verwerker de gegevens aan u terug, als u dat wilt. Ook verwijdert de verwerker kopie\u00ebn. Tenzij de verwerker wettelijk verplicht is de gegevens te bewaren.</p> </li> <li> <p>Audits. De verwerker werkt mee aan uw audits of die van een derde partij. En stelt alle relevante informatie beschikbaar om te kunnen controleren of de verwerker zich houdt aan de hierboven genoemde verplichtingen (artikel 28 AVG).</p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-14-verwerkersovereenkomst-onderdeel-aanbesteding/#bronnen","title":"Bronnen","text":"<p>Verwerkersovereenkomst</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-14-verwerkersovereenkomst-onderdeel-aanbesteding/#risico","title":"Risico","text":"<p>Er is sprake van een onrechtmatige verwerking van persoonsgegevens als geen verwerkersovereenkomst is opgesteld tussen de verwerker en de verwerkingsverantwoordelijke. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-14-verwerkersovereenkomst-onderdeel-aanbesteding/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-15-leveren-bewijs_voldoen-aan-vereisten-algoritme-aanbieder/","title":"Maak het leveren van bewijs voor het voldoen aan de vereisten voor algoritmes onderdeel van de beoordeling van een inschrijving.","text":"<p>owp-15OntwerpProjectleiderBeleid en adviesPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-15-leveren-bewijs_voldoen-aan-vereisten-algoritme-aanbieder/#maatregel","title":"Maatregel","text":"<p>Maak het leveren van bewijs voor het voldoen aan de vereiste onderdeel van de beoordeling van een inschrijving</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-15-leveren-bewijs_voldoen-aan-vereisten-algoritme-aanbieder/#toelichting","title":"Toelichting","text":"<p>Het leveren van bewijs door aanbieder dat de ontwikkelde algoritmes voldoen aan de vereisten, draagt bij aan het kunnen beoordelen of een aanbieder geschikt is om mee te contracteren. Bij het leveren van bewijs kan worden gedacht aan het overhandigen van bijvoorbeeld een certificaat of een EU-conformiteitsverklaring voor hoog risico AI-systemen. </p> <p>Daarbij is het relevant om te beoordelen in hoeverre er is voldaan aan geharmoniseerde standaarden. Deze standaarden zijn momenteel in ontwikkeling. In de (nabije) toekomst zal dit naar verwachting op een vergelijkbare manier kunnen worden benaderd als bij het moeten leveren van een NEN-ISO 27001 certificaat (voldoen aan informatiebeveiligingsvereisten) door een leverancier. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-15-leveren-bewijs_voldoen-aan-vereisten-algoritme-aanbieder/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-15-leveren-bewijs_voldoen-aan-vereisten-algoritme-aanbieder/#risico","title":"Risico","text":"<p>Er wordt gecontracteerd met een aanbieder die niet voldoet aan de vereisten voor een verantwoorde inzet van algoritmes. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-15-leveren-bewijs_voldoen-aan-vereisten-algoritme-aanbieder/#voorbeeld","title":"Voorbeeld","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/","title":"Laat aanbieder(s) bewijs leveren dat de door hen ontwikkelde algoritmes geen inbreuk maken op de auteursrechten van derden met de trainingsdata en de output.","text":"<p>owp-16Dataverkenning en datapreparatieVerificatie en validatieProjectleiderBeleid en adviesPublieke inkoopData</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/#maatregel","title":"Maatregel","text":"<p>Maak het al dan niet kunnen leveren van bewijs door een aanbieder dat auteursrechten niet worden geschonden met de trainingsdata en output van diens algoritme van bijvoorbeeld een aanbesteding.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/#toelichting","title":"Toelichting","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/#trainingsdata","title":"Trainingsdata","text":"<ul> <li> <p>Algoritmes worden veelal getraind aan de hand van een omvangrijke hoeveelheid data. Wanneer grote hoeveelheden data, bijvoorbeeld door deze te scrapen van internet, worden gebruikt is het zeer aannemelijk (of: nagenoeg zeker) dat zich onder de gescrapete inhoud (ook) veel auteursrechtelijk beschermde werken bevinden, zoals bijvoorbeeld e-books en afbeeldingen. De gebruikte auteursrechtelijke werken kunnen soms bijvoorbeeld uit illegale bron verkregen zijn, en ook los daarvan zijn rechthebbenden veelal niet op de hoogte van het feit dat hun auteursrechtelijke werken voor de ontwikkeling van een algoritme of AI gebruikt worden.</p> </li> <li> <p>Onder auteursrechtjuristen wordt aangenomen dat het gebruik van auteursrechtelijk beschermde werken ter training van algoritmes (waarschijnlijk) als kopi\u00ebren geldt: een handeling die de rechthebbende kan verbieden. Dat betekent dat aanbieders van algoritmes het gebruik van auteursrechtelijk beschermd materiaal in de inputfase steeds moeten kunnen legitimeren op grond van (a) toestemming van de rechthebbende(n) of (b) een in de wet neergelegde exceptie op het auteursrechtelijke verveelvoudigingsrecht.</p> </li> <li> <p>Laat de aanbieder(s) uitleggen en (aantoonbaar) onderbouwen op welke manier de trainingsdata is verkregen en of dit rechtmatig was. Laat de aanbieders(s) ook aantonen welke maatregelen er zijn getroffen om dit te voorkomen en ga hier eventueel over in gesprek. Maak een jurist onderdeel van de beoordeling hiervan. Overweeg om een bronvermelding te laten opnemen.</p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/#output","title":"Output","text":"<p>Laat de aanbieder(s) uitleggen en (aantoonbaar) onderbouwen op welke manier de trainingsdata is verkregen en of dit rechtmatig was. Laat de aanbieders(s) ook aantonen welke maatregelen er zijn getroffen om dit te voorkomen. Maak een jurist onderdeel van de beoordeling hiervan. Overweeg om een bronvermelding te laten opnemen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/#risicomanagement","title":"Risicomanagement","text":"<p>Het is van belang dat de (rest)risico's inzichtelijk zijn gemaakt als er sprake is van een (potenti\u00eble) schending van auteursrechten. Laat een aanbieder deze risico's inzichtelijk maken, zodat aanbieder en gebruiksverantwoordelijke maatregelen kunnen treffen en handelen als dit nodig is. Beoordeel of deze rest(risico's) acceptabel zijn. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/#contractovereenkomst","title":"Contractovereenkomst","text":"<p>Neem in de conceptovereenkomst op dat de aanbieder garandeert dat auteursrechten niet worden geschonden met de trainingsdata of output van het algoritme en dat aanbieder dit gedurende de ontwikkeling en levensduur actief bewaakt.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/#bronnen","title":"Bronnen","text":"<ul> <li>Advies Landsadvocaat Pels Rijcken over het gebruik van generatieve AI-tools door medewerkers van de Staat</li> <li>ARVODI (24.7) en ARBIT (art 8.5 &amp; 8.6)</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/#risico","title":"Risico","text":"<p>Dat wordt gecontracteerd met een aanbieder waarbij niet kan worden uitgesloten dat auteursrechten worden geschonden. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-17-beoordeel-aansprakelijkheidsvoorwaarden-van-aanbieder/","title":"Aansprakelijkheidsvoorwaarden van een aanbieder worden beoordeeld in de aanbesteding","text":"<p>owp-17OntwerpImplementatieJuristBeleid en adviesPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-17-beoordeel-aansprakelijkheidsvoorwaarden-van-aanbieder/#maatregel","title":"Maatregel","text":"<p>Maak de aansprakelijkheidsvoorwaarden die een aanbieder stelt ten aanzien van auteursrechten een vast onderdeel om te beoordelen in de aanbesteding.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-17-beoordeel-aansprakelijkheidsvoorwaarden-van-aanbieder/#toelichting","title":"Toelichting","text":"<ul> <li> <p>Eindgebruikers van algoritmes kunnen er niet altijd op vertrouwen, of (eenvoudig) nagaan, of datgene wat zij door middel van een algoritme laten genereren, inbreuk maakt op rechten van anderen. Het is onwenselijk dat een eindgebruiker aansprakelijk wordt gesteld voor het maken van een inbreuk op rechten van derden, als deze gebruik maakt van algoritmes die worden aangeboden door aanbieders. Organisatie moeten daarom afspraken hierover maken met aanbieders.</p> </li> <li> <p>Hoe groot de kans is dat eindgebruikers vanwege het gebruik van algoritmes aansprakelijk worden gesteld, is nog onduidelijk. Er zijn wel voorbeelden waarbij eindgebruikers voor een eventuele inbreuk aansprakelijk kunnen worden gesteld.</p> </li> <li> <p>Op dit moment zijn (nog) geen gevallen of rechtszaken bekend waarin eindgebruikers (of hun werkgevers) aansprakelijk zijn gesteld voor een inbreuk op het intellectuele-eigendomsrecht vanwege het gebruik van op basis van algoritme. Feit is echter wel dat een dergelijke aansprakelijkstelling in voorkomende gevallen dus mogelijk zullen zijn, te meer nu de aanbieders van algoritmes in hun algemene voorwaarden het risico voor aansprakelijkheid volledig of grotendeels uitsluiten, of zelfs verlangen dat gebruikers hen vrijwaren voor de gevolgen van eventuele aansprakelijkstellingen.</p> </li> <li> <p>Het is daarom van belang om een beoordeling te maken in hoeverre de aansprakelijkheidsvoorwaarden van de aanbieder passend zijn. Maak een jurist onderdeel van de beoordeling.</p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-17-beoordeel-aansprakelijkheidsvoorwaarden-van-aanbieder/#bronnen","title":"Bronnen","text":"<p>Advies Landsadvocaat Pels Rijcken over het gebruik van generatieve AI-tools door medewerkers van de Staat</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-17-beoordeel-aansprakelijkheidsvoorwaarden-van-aanbieder/#risico","title":"Risico","text":"<p>Er wordt gecontracteerd met een aanbieder die ongewenste aansprakelijkheidsvoorwaarden hanteert. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-17-beoordeel-aansprakelijkheidsvoorwaarden-van-aanbieder/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-18-maak-vereisten-onderdeel-van-subgunningscriteria/","title":"Maak vereisten onderdeel van (sub)gunningscriteria bij een aanbesteding.","text":"<p>owp-18OntwerpOntwikkelaarPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-18-maak-vereisten-onderdeel-van-subgunningscriteria/#maatregel","title":"Maatregel","text":"<p>Maak vereisten onderdeel van (sub)gunningscriteria bij een aanbesteding.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-18-maak-vereisten-onderdeel-van-subgunningscriteria/#toelichting","title":"Toelichting","text":"<ul> <li>Door een vereiste onderdeel te maken van een (sub)gunningscriteria, ontstaat een mogelijkheid voor aanbieders om zich te onderscheiden van andere aanbieders.</li> <li>Dit kan zorgen voor een extra stimulatie op kwaliteitsaspecten van algoritmes</li> <li>In de context van algoritmes is dit in het bijzonder relevant, bijvoorbeeld in relatie tot vereisten als non-discriminatie, eerbiedigen fundamentele rechten of het verbod op schenden auteursrechten. </li> <li>Door vereisten te vertalen naar een (sub)gunningscriteria, kan een inhoudelijke beoordeling worden gemaakt in hoeverre een aanbieder voldoet aan deze vereisten.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-18-maak-vereisten-onderdeel-van-subgunningscriteria/#bronnen","title":"Bronnen","text":"<ul> <li>Keuze gunningscriterium en opstellen (sub)gunningscriteria</li> <li>Handreiking Beste prijs-kwaliteitsverhouding:de basis</li> <li>Beste prijs-kwaliteitsverhouding</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-18-maak-vereisten-onderdeel-van-subgunningscriteria/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/","title":"Cre\u00eber ruimte om met een aanbieder samen te gaan werken om specifieke vereisten te realiseren","text":"<p>owp-19OntwerpOntwikkelenProjectleiderPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/#maatregel","title":"Maatregel","text":"<p>Cre\u00eber ruimte om met een aanbieder samen te gaan werken om specifieke vereisten te gaan realiseren.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/#toelichting","title":"Toelichting","text":"<ul> <li> <p>Om op een betekenisvolle manier invulling te geven aan bepaalde vereisten, kan het noodzakelijk zijn dat opdrachtgever en aanbieder (innovatief) moeten gaan samenwerken. Op basis van nieuwe wet- en regelgeving (bv. AI-Verordening) of geharmoniseerde standaarden kunnen aanbieders mogelijk nog niet voldoen aan nieuwe vereisten. Het kan ook onduidelijk zijn hoe moet worden voldaan aan vereisten nu de technologie zich snel ontwikkelt of dat de specifieke omstandigheden van het beoogde gebruik vragen om een samenspel tussen opdrachtgever en aanbieder.</p> </li> <li> <p>Bij een verantwoorde inzet van algoritmes kan het bij vereisten zoals non-discriminatie, transparantie, menselijke controle en grondrechten van belang zijn om samen te onderzoeken hoe hier invulling aan moet worden gegeven. Het is belangrijk om bij de behoeftestelling al te verkennen om welke onderwerpen dit mogelijk van toepassing is. Bij een marktverkenning of informatiesessie kan worden verkend hoe aanbieders ervoor staan. Op basis hiervan kan worden beoordeeld in hoeverre bijvoorbeeld in een aanbesteding contractuele ruimte moet worden gecre\u00eberd voor opdrachtgever en aanbieder om hieraan te werken. </p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/#bronnen","title":"Bronnen","text":"<ul> <li>Ruimte voor Innovatie in het contract</li> <li>Aanbesteding Ethische Beeldinwinning en Objectherkenning Openbare Ruimte</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/#risico","title":"Risico","text":"<p>Door niet te kunnen samenwerken aan vereisten, kan de situatie ontstaan dat uiteindelijk niet op een betekenisvolle manier wordt voldaan aan deze vereisten voor een verantwoorde inzet van algoritmes. Gebrek aan samenwerking kan leiden tot onvermogen om de benodigde vereisten voldoende in de praktijk te garanderen. Ook is het belangrijk dat de verantwoordelijke goed genoeg begrijpt hoe het algoritme werkt en welke keuzes er gemaakt zijn tijdens het ontwerp, omdat alleen dan goed beoordeeld kan worden welke vereisten zijn voldaan en welke risico\u2019s nog niet of minder goed zijn afgedekt. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-20-vaststellen-aanleveren-informatie-technische-documentatie/","title":"Vul technische documentatie van aanbieder aan met relevante informatie vanuit de gebruiksverantwoordelijke.","text":"<p>owp-20OntwerpProjectleiderBeleid en adviesOntwikkelaarPublieke inkoopTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-20-vaststellen-aanleveren-informatie-technische-documentatie/#maatregel","title":"Maatregel","text":"<p>Vul technische documentatie van aanbieder aan met relevante informatie vanuit de gebruiksverantwoordelijke, zodat het alle relevante onderdelen van het algoritme zijn beschreven.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-20-vaststellen-aanleveren-informatie-technische-documentatie/#toelichting","title":"Toelichting","text":"<ul> <li> <p>Het is van belang dat duidelijke afspraken worden gemaakt over het opstellen, aanvullen en actueel houden van technische documentatie van algorites. Bij het inkopen van algoritmes moet hier rekening mee worden gehouden. De aanbieder zal een belangrijk deel van de technische documentatie moeten aanleveren, maar bij gebruik door de gebruiksverantwoordelijken zal deze informatie moeten worden aangevuld. </p> </li> <li> <p>Bespreek met het projectteam welke onderdelen van de technische documentatie, als genoemd in de Bijlage 4 AI-verordening, van het AI-systeem door welke partij (aanbieder of gebruiksverantwoordelijke) moeten worden ingevuld of aangevuld. </p> </li> <li> <p>Hierbij is het van belang dat de documentatie aansluit bij de verschillende gebruikers van het systeem, waarbij rekening wordt gehouden met verschillende toepassingen of versies. Bespreek met het projectteam welke onderdelen van de technische documentatie voor AI-systemen, als genoemd in de Bijlage 4 AI-verordening, door welke partij (aanbieder of gebruiksverantwoordelijke) moeten worden ingevuld of aangevuld. </p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-20-vaststellen-aanleveren-informatie-technische-documentatie/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-20-vaststellen-aanleveren-informatie-technische-documentatie/#risico","title":"Risico","text":"<p>Door de technische documentatie niet volledig op te stellen, is niet geheel transparant hoe het algoritme functioneert en kan daar geen verantwoording voor worden afgelegd.    </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-20-vaststellen-aanleveren-informatie-technische-documentatie/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/","title":"Neem het kunnen uitvoeren van een audit over de vereiste op in contractvoorwaarden en de contractovereenkomst","text":"<p>owp-21OntwerpProjectleiderBeleid en adviesPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/#maatregel","title":"Maatregel","text":"<p>Neem het kunnen uitvoeren van een audit over de vereiste op in contractvoorwaarden en de contractovereenkomst </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/#toelichting","title":"Toelichting","text":"<p>Het is van belang dat opdrachtgever mogelijkheden heeft om te controleren in hoeverre door aanbieder/opdrachtnemer wordt voldaan aan naleving van de contractvoorwaarden</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/#bronnen","title":"Bronnen","text":"<ul> <li>Contractvoorwaarden gemeente Amsterdam</li> <li>Europese Inkoopvoorwaarden Hoog Risico</li> <li>Europese Inkoopvoorwaarden Laag Risico</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/#risico","title":"Risico","text":"<p>Er kunnen geen controles of inspecties worden uitgevoerd om te beoordelen of de algoritmes van aanbieder nog voldoen aan de vereisten voor een verantwoorde inzet van algoritmes. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-22-invloed-besluitvorming-algoritmes-aanbieders/","title":"Bepaal in een aanbesteding of algoritmes van een aanbieder bepalende invloed hebben in een besluit richting personen","text":"<p>owp-22OntwerpProjectleiderBeleid en adviesOntwikkelaarPublieke inkoopTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-22-invloed-besluitvorming-algoritmes-aanbieders/#maatregel","title":"Maatregel","text":"<p>Ga na of algoritmes van een aanbieder een bepalende invloed hebben in een besluit richting personen en laat de aanbieder onderbouwen in hoeverre dit wel of niet het geval is.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-22-invloed-besluitvorming-algoritmes-aanbieders/#toelichting","title":"Toelichting","text":"<ul> <li> <p>Als overheidsorganisaties algoritmes willen gebruiken van aanbieders, dan zal bijvoorbeeld tijdens een aanbestedingsproces moeten worden beoordeeld in hoeverre deze algoritmes invloed hebben op besluitvormingprocessen van deze organisaties. Algoritmes kunnen namelijk gebruikers ondersteunen bij de totstandkoming van besluiten, maar ook de besluitvorming van gebruikers overnemen. De mate van menselijke tussenkomst speelt daarbij een belangrijk rol. </p> </li> <li> <p>Een opdrachtgever moet zelf bepalen welke algoritmes, gezien de specifieke context, wenselijk en toegestaan zijn. Vervolgens moet worden beoordeeld of de algoritmes die worden aangeboden door aanbieder daarbij aansluiten.</p> </li> <li> <p>Tijdens het aanbestedingsproces moeten daarom inzichten worden verkregen hoe de algoritmes van aanbieders functioneren om tot een beoordeling te kunnen komen. Laat de aanbieder dit toelichten. </p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-22-invloed-besluitvorming-algoritmes-aanbieders/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-22-invloed-besluitvorming-algoritmes-aanbieders/#risico","title":"Risico","text":"<p>Algoritmes van aanbieders nemen besluitvormende taken over, zonder dat daar zicht op is of dat dit is beoordeeld.  </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-22-invloed-besluitvorming-algoritmes-aanbieders/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/","title":"Laat de aanbieder aangeven welke mate van opleiding en ondersteuning bij de implementatie nodig is om de beoogde algoritmes verantwoord te gebruiken.","text":"<p>owp-23OntwerpProjectleiderBeleid en adviesOntwikkelaarPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/#maatregel","title":"Maatregel","text":"<p>Laat de aanbieder aangeven welke mate van kennisoverdracht (opleiding en training) en ondersteuning bij de organisatorische implementatie nodig is om de beoogde algoritmes verantwoord te kunnen gebruiken. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/#toelichting","title":"Toelichting","text":"<p>Beoordeel of de kennisoverdracht en ondersteuning van aanbieder voldoende is om voor een langere periode zelfstandig op een verantwoorde wijze gebruikt te kunnen maken van de algoritmes.</p> <p>Laat de aanbieder aangeven op welk niveau de noodzakelijkerwijs te leveren trainingen passend is voor het beoogde gebruik, waarbij de opdrachtgever vooraf inzicht geeft in het bestaande niveau, zodat een aanbieder concreet kan zijn over eventuele verschillen tussen beiden.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/#risico","title":"Risico","text":"<p>Zonder kennisoverdracht aan de organisaties en gebruikers, ontstaat het risico's dat algoritmes onjuist worden toegepast of dat de output onjuist wordt ge\u00efnterpreteerd en zo fouten ontstaan bij het uitvoeren van overheidstaken. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-24-risico-analyse-informatiebeveiliging-leverancier/","title":"Voer een risico-analyse met de aanbieder uit op het gebied van informatiebeveiliging bij een uitbestedingstraject","text":"<p>owp-24OntwerpProjectleiderBeleid en adviesTechnische robuustheid en veiligheidPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-24-risico-analyse-informatiebeveiliging-leverancier/#maatregel","title":"Maatregel","text":"<p>Voer een risico-analyse met de aanbieder uit op het gebied van informatiebeveiliging bij een uitbestedingstraject</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-24-risico-analyse-informatiebeveiliging-leverancier/#toelichting","title":"Toelichting","text":"<ul> <li>Stel vast of een aanbieder voldoet aan de Baseline Informatiebeveiliging Overheid.</li> <li>Bespreek de informatiebeveiligingseisen met aanbieder die verband houden met de beschikbaarheid, integriteit en vertrouwelijkheid van de informatie en de informatiesystemen.</li> <li>Bepaal of er, gezien de restrisico's, aanvullende beveiligingsmaatregelen (door de aanbieder of opdrachtgever) moeten worden getroffen om deze te beschermen.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-24-risico-analyse-informatiebeveiliging-leverancier/#bronnen","title":"Bronnen","text":"<ul> <li>Baseline Informatiebeveiliging Overheid, BIO 15.1.1.1</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, IB.29</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-24-risico-analyse-informatiebeveiliging-leverancier/#risico","title":"Risico","text":"<p>Er is onvoldoende zicht op risico's op het gebied van informatiebeveiliging als gebruikt wordt gemaakt van algoritmes van aanbieders. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-24-risico-analyse-informatiebeveiliging-leverancier/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/","title":"Maak vereisten onderdeel van het programma van eisen bij een aanbesteding","text":"<p>owp-25OntwerpProjectleiderBeleid en adviesOntwikkelaarPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/#maatregel","title":"Maatregel","text":"<p>Maak vereisten onderdeel van het programma van eisen bij een aanbesteding</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/#toelichting","title":"Toelichting","text":"<ul> <li>Door vereisten onderdeel te maken van het programma van eisen bij een aanbesteding, is het voor aanbieders duidelijk aan welke specifieke eisen een oplossing moet voldoen.</li> <li>Op basis hiervan kan een aanbieder een zo goed mogelijke aanbieding doen.</li> <li>Afhankelijk van de behoeftestelling kan het relevant zijn om bepaalde vereisten te verfijnen in het Programma van Eisen en aan te geven wanneer hieraan voldaan is, bijvoorbeeld met betrekking tot het transparantievereiste. Bepaal met het inkoopteam bij welke vereisten dit noodzakelijk is. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/#risico","title":"Risico","text":"<p>Er is niet gespecificeerd en daarmee achteraf niet afdwingbaar dat algoritmes aan bepaalde vereisten moeten voldoen die van de belangen voor de betreffende overheidsorganisatie. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/#bronnen","title":"Bronnen","text":"<p>Hoe specificeer ik mijn vraag?</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/#voorbeeld","title":"Voorbeeld","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/","title":"Maak vereisten voor algoritmes onderdeel van de Service Level Agreement","text":"<p>owp-26OntwerpProjectleiderBeleid en adviesOntwikkelaarPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/#maatregel","title":"Maatregel","text":"<p>Maak de vereiste onderdeel van Service Level Agreement</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/#toelichting","title":"Toelichting","text":"<ul> <li>Onderzoek met het inkoopteam het relevant is om vereiste voor een verantwoorde inzet van algoritmes onderdeel te maken van de Service Level Agreement. </li> <li>Met een SLA kunnen specifieke afspraken worden gemaakt over de kwaliteit van de dienstverlening van aanbieder.</li> <li>Hierbij kan worden gedacht aan onderwerpen als incidentmanagement, servicemanagement, verantwoordelijkheden matrix, hersteltijd, prestatiecriteria, reproduceerbaarheid, versiebeheer van de gebruikte algoritmes en informatiebeveiliging. </li> <li>Laat de aanbieder aangeven welke vormen van onderhoud aan de betreffende algoritmes nodig zijn en de snelheid waarmee signalen vanuit gebruik, ongeacht de bron, kunnen worden verwerkt in het systeem en welke expertise hiervoor beschikbaar is. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/#risico","title":"Risico","text":"<p>Zonder concrete afspraken te maken in de SLA, ontstaat het risico dat aloritmes (tijdelijk) of te langdurig niet kunnen worden gebruikt, onjuist fuctioneren of dat er geen verantwoording over de output kan worden afgelegd.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.11 </li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 1.05 </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-27-contractuele-afspraken-data-en-artefacten/","title":"Maak (contractuele) afspraken over data en artefacten met een aanbieder","text":"<p>owp-27OntwerpImplementatieJuristPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-27-contractuele-afspraken-data-en-artefacten/#maatregel","title":"Maatregel","text":"<p>Maak (contractuele) afspraken met de aanbieder wie eigenaar is van de data en artefacten die ontstaan bij het gebruik van algoritmes.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-27-contractuele-afspraken-data-en-artefacten/#toelichting","title":"Toelichting","text":"<p>Hier kan worden gedacht aan (initi\u00eble) trainingsdatasets, outputdata (richting gebruikers) en nieuwe trainingsdata (vanuit gebruikers). </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-27-contractuele-afspraken-data-en-artefacten/#bronnen","title":"Bronnen","text":"Bron Algoritmekader"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-27-contractuele-afspraken-data-en-artefacten/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-28-pas-vastgestelde-beleidskaders-zijn-nageleefd/","title":"Pas vastgestelde interne beleidskaders toe en maak aantoonbaar dat deze zijn nageleefd bij het ontwikkelen, inkopen en gebruiken van algoritmes.","text":"<p>owp-28OrganisatieverantwoordelijkhedenProjectleiderBeleid en adviesGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-28-pas-vastgestelde-beleidskaders-zijn-nageleefd/#maatregel","title":"Maatregel","text":"<p>Pas vastgestelde interne beleidskaders toe en maak aantoonbaar dat deze zijn nageleefd bij het ontwikkelen, inkopen en gebruiken van algoritmes.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-28-pas-vastgestelde-beleidskaders-zijn-nageleefd/#toelichting","title":"Toelichting","text":"<ul> <li>Interne vastgestelde beleidskaders moeten worden toegepast bij het ontwikkelen, inkopen of gebruiken van algoritmes.</li> <li>Het is van belang dat tijdig, bijvoorbeeld in de probleemanalyse fase, inzichtelijk wordt gemaakt welke interne beleidskaders moeten worden toegepast.</li> <li>Hierbij kan worden gedacht aan definities die moeten worden gehanteerd, het naleven van inkoopbeleid, strategisch beleid volgen met betrekking tot het mogen inzetten van algoritmes binnen de organisaties of het doorlopen van processen en protocollen die moeten worden toegepast.</li> <li>Vraag de betrokken experts welke beleidskaders van toepassing zijn vanuit diens specifieke expertise. </li> <li>Ten behoeve van controles en audits is het van belang dat aantoonbaar wordt gemaakt dat de vastgestelde beleidskaders zijn nageleefd. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-28-pas-vastgestelde-beleidskaders-zijn-nageleefd/#risico","title":"Risico","text":"<p>De in te zetten algoritmes voldoen niet aan vastgestelde beleidskaders. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-28-pas-vastgestelde-beleidskaders-zijn-nageleefd/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.8</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-28-pas-vastgestelde-beleidskaders-zijn-nageleefd/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-29-informeer_betrokkenen/","title":"Stel vast welke betrokkenen ge\u00efnformeerd moeten worden en welke informatie zij nodig hebben.","text":"<p>pba-04OntwerpOntwikkelenProjectleiderBeleid en adviesTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-29-informeer_betrokkenen/#maatregel","title":"Maatregel","text":"<p>Stel vast welke betrokkenen ge\u00efnformeerd moeten worden over de ontwikkeling en het gebruik van algoritmes en welke informatie zij hierover nodig hebben.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-29-informeer_betrokkenen/#toelichting","title":"Toelichting","text":"<p>Welke informatie over algoritmes relevant is, verschilt per partij. Het is van belang om deze partijen in beeld te brengen en vast te stellen welke informatie voor hen relevant is. Raadpleeg hierbij vastgestelde beleidskaders, waarin is beschreven welke informatie in welke gevallen moet worden gecommuniceerd.</p> <p>Stel bijvoorbeeld de volgende vragen:</p> Vragen Acties die je kan ondernemen Wie heeft informatie nodig over het ontwikkelen en gebruiken van algoritmes? Stel vast welke betrokken(en) binnen of buiten de organisatie iets over het algoritme wil of zou moeten weten. Wat voor informatie voor algoritmes heeft deze betrokken partij nodig? Toets dit ook bij vastgesteld beleid.    Ga na wat de doelgroep moet weten over de werking of inzet van het algoritme. Bepaal om welk technisch niveau dit gaat. Op wat voor manier informeer je de betrokken partij? Pas de juiste methodes toe om de doelgroep te informeren. Wanneer wordt deze informatie gebruikt? Ga na in welke fase van de levenscyclus de gewenste informatie over de werking of inzet van het algoritme wordt gebruikt. Hoe verschilt de informatiebehoefte in elke fase van de levenscyclus? Wie is er verantwoordelijk voor de informatieverstrekking? Bepaal wie er informatie over het algoritme moet ophalen, en wie er voor die informatie kan zorgen. <p>Maak bij het vaststellen van de informatiebehoefte onderscheid tussen transparantie, uitlegbaarheid en interpreteerbaarheid. Houd daarbij ook rekening met zaken die moeten worden gecommuniceerd. Denk hierbij aan het kunnen uitleggen hoe een automatisch genomen besluit tot stand is gekomen. </p> <p>Stel een communicatieplan op over de ontwikkeling en gebruik van het algoritme. Bepaal vervolgens aan de hand van de levenscyclus wanneer, welke informatie wanneer beschikbaar moet worden gesteld. Stel vast wie verantwoordelijk is voor het opstellen of het leveren van een bijdrage aan deze informatie. In het communicatieplan kunnen verder zaken worden opgenomen als:</p> <ul> <li>Het doel van het algoritme.</li> <li>Mogelijkheden van het algoritme.</li> <li>Beperkingen van het algoritme.</li> <li>Context waarin het algoritme wordt toegepast.</li> <li>Wie heeft informatie nodig?</li> <li>Wat voor informatie heeft deze betrokken partij nodig?</li> <li>Op wat voor manier informeer je de betrokken partij?</li> <li>Wanneer wordt deze informatie gebruikt?</li> <li>Wie is er verantwoordelijk voor de informatieverstrekking?</li> <li>Hoe en naar wie communiceer je in het geval van een incident?</li> <li>Wat is de planning voor de communicatieactiviteiten?</li> </ul> <p>Overleg regelmatig met betrokkenen en belanghebbenden in hoeverre de informatieverstrekking aansluit bij de (nieuwe) behoeften.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-29-informeer_betrokkenen/#bronnen","title":"Bronnen","text":"<p>Algoritmekader</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-29-informeer_betrokkenen/#risico","title":"Risico","text":"<p>Het risico is dat partijen niet of onvolledig worden ge\u00efnformeerd over de ontwikkeling en gebruik van algoritmes, en hierdoor hun rechten niet kunnen effectueren of belangen kenbaar kunnen maken.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-29-informeer_betrokkenen/#voorbeeld","title":"Voorbeeld","text":"<ul> <li>Bouwstenen van een communicatieplan</li> <li>WMO voorspelmodel</li> <li>Handreiking WMO voorspelmodel</li> <li>Maatwerkscan UWV</li> <li>Slimme keuzehulp aangifte internetoplichting: Ik heb iets gekocht, maar niets ontvangen</li> <li>Chatbot gemeente Hillegom</li> </ul> <p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/","title":"Pas uitlegbaarheidstechnieken toe en evalueer en valideer deze.","text":"<p>owp-07OntwerpProjectleiderBeleid en adviesOntwikkelaarTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/#maatregel","title":"Maatregel","text":"<p>Pas uitlegbaarheidstechnieken toe en evalueer en valideer deze.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/#toelichting","title":"Toelichting","text":"<p>Uitlegbaarheidstechnieken helpen om de werking van een algoritme transparant te maken. De keuze voor het type algoritme bepaalt hoe transparant je kunt zijn. Van rekenregels kun je namelijk precies uitleggen hoe deze tot een beslissing komen. Maar complexe AI-systemen kunnen een black box zijn. Het is dan onduidelijk hoe deze systemen beslissingen maken. </p> <p>Afhankelijk van het type algoritme zijn er uitlegbaarheidstechnieken beschikbaar om de werking en keuzes van een algoritme bloot te leggen. Er moet eerst een keuze worden gemaakt welk type algoritme geschikt is gezien de informatiebehoefte. Het is belangrijk om samen met de betrokken partijen vast te leggen welke uitlegbaarheidstechnieken moeten worden toegepast. Bij bronnen kan informatie worden geraadpleegd die helpen bij het vinden van de juiste methodiek.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/#gebruik-uitlegbaarheid-bij-besluiten","title":"Gebruik uitlegbaarheid bij besluiten","text":"<p>Onderzoek hoe uitlegbaarheidstechnieken kunnen bijdragen aan het motiveren van besluiten. Dit kan bijvoorbeeld door:</p> <pre><code>- De output van het algoritme te koppelen aan het zaakdossier, met een toelichting op de interpretatie van die output.\n- De output of een samenvatting hiervan op te nemen in de beschikking.\n</code></pre>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/#beperkingen-en-veiligheid","title":"Beperkingen en veiligheid","text":"<p>Vanuit veiligheidsoverwegingen kan bij specifieke algoritmes besloten worden om bepaalde informatie over de werking van een algoritme niet aan iedereen vrij te geven. Denk hierbij aan de beperkingen die de Wet Open Overheid oplegt. Houd ook rekening met mogelijke risico\u2019s op aanvallen die kunnen ontstaan door het gebruik van uitlegbaarheidstechnieken, zoals omschreven in: A Survey of Privacy-Preserving Model Explanations: Privacy Risks, Attacks, and Countermeasures. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/#evaluatie-en-validatie","title":"Evaluatie en validatie","text":"<p>Evalueer de uitlegbaarheid van het systeem op functionele, operationele, bruikbaarheids- en veiligheidsvereisten in samenwerking met betrokkenen zoals gebruikers. Valideer of de uitkomst van het algoritme begrijpelijk genoeg is voor gebruiker om hier op een verantwoorde wijze mee te werken.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/#risico","title":"Risico","text":"<p>Als er geen rekening wordt gehouden met de uitlegbaarheid van een algoritme binnen een bepaalde context, ontstaat het risico dat de output van het algoritme niet wordt begrepen of verkeerd wordt ge\u00efnterpreteerd, wat kan leiden tot onjuist gebruik.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/#bronnen","title":"Bronnen","text":"<ul> <li>Toolkit voor implementatie</li> <li>An introduction to explainable AI with Shapley values</li> <li>Paper over (de evaluatie van) toolkits</li> <li>UXAI: Design Strategy</li> <li>Overzicht (evaluatie van) metrieken XAI</li> <li>Part 2: Explaining AI in practice | ICO</li> <li>A Survey of Privacy-Preserving Model Explanations: Privacy Risks, Attacks, and Countermeasures</li> <li>Towards Transparency by Design for Artificial Intelligence | Science and Engineering Ethics.</li> <li>From Anecdotal Evidence to Quantitative Evaluation Methods: A Systematic Review on Evaluating Explainable AI</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/#voorbeeld","title":"Voorbeeld","text":"<ul> <li>Gemeente Amsterdam - Onderzoekswaardigheid Algoritme \u2018Slimme check\u2019. Een tool die de medewerkers helpt om te bepalen of een aanvraag levensonderhoud onderzoekswaardig is. (niet meer in gebruik!): Overzicht Verwerkte Data en Features</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-genereren-bronvermelding/","title":"Maak gebruik van een algoritme dat bronvermelding kan genereren bij de output.","text":"<p>imp-10OntwerpValidatie en verificatieProjectleiderBeleid en adviesTransparantiePublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-genereren-bronvermelding/#maatregel","title":"Maatregel","text":"<p>Maak gebruik van een algoritme dat bronvermelding kan genereren bij de output.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-genereren-bronvermelding/#toelichting","title":"Toelichting","text":"<p>Bij het gebruik van generatieve AI/LLM\u2019s is bronvermelding van belang. Hiermee kan tot op zekere hoogte een beoordeling worden gegeven in hoeverre bij het trainen van het AI-model rechtmatig gebruik is gemaakt van bronnen. Bronvermelding is daarnaast essentieel om de output van het AI-model inhoudelijk te kunnen controleren, wat ook informatie geeft in hoeverre het AI-model bijvoorbeeld al dan niet hallucineert of manipuleert. </p> <p>Voor het ontwikkelen van een AI-model is bronvermelding noodzakelijk, omdat het voor ontwikkelaars de enige manier is om te kunnen controleren of het model goed werkt. Dit geldt ook voor ontwikkelaars die pre-trained modellen gebruiken. </p> <p>Neem het kunnen generenen van een bronvermelding mee als een 'requirement' voor het te ontwikkelen AI-model in de ontwerpfase of maakt het onderdeel van de behoeftestelling en specificeer deze behoefte in het inkoopproces.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-genereren-bronvermelding/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-genereren-bronvermelding/#voorbeeld","title":"Voorbeeld","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-toepassen_vastgestelde-beleidskaders/","title":"Pas vastgestelde beleidskaders toe","text":"<p>org-02OrganisatieverantwoordelijkhedenProjectleiderBeleid en adviesGovernanceTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-toepassen_vastgestelde-beleidskaders/#maatregel","title":"Maatregel","text":"<p>Pas vastgestelde beleidskaders toe.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-toepassen_vastgestelde-beleidskaders/#toelichting","title":"Toelichting","text":"<ul> <li>Vastgestelde (interne) beleidskaders moeten worden toegepast bij het ontwikkelen, inkopen of gebruiken van algoritmes. Denk aan specifiek beleid voor de inzet van algoritmes.</li> <li>Het is van belang dat tijdig, bijvoorbeeld in de probleemanalyse fase, inzichtelijk wordt gemaakt welke interne beleidskaders moeten worden toegepast.</li> <li>Hierbij kan worden gedacht aan definities die moet worden gehanteerd, het naleven van inkoopbeleid, strategisch beleid volgen met betrekking tot het mogen inzetten van algoritmes binnen de organisaties of het doorlopen van processen en protocollen die moeten worden toegepast.</li> <li>Vraag de betrokken experts welke beleidskaders van toepassing zijn vanuit diens expertise. </li> <li>Ten behoeve van controles en audits is het van belang dat aantoonbaar wordt gemaakt dat de vastgestelde beleidskaders zijn nageleefd. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-toepassen_vastgestelde-beleidskaders/#risico","title":"Risico","text":"<p>De in te zetten algoritmes voldoen niet aan vastgestelde beleidskaders. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-toepassen_vastgestelde-beleidskaders/#bronnen","title":"Bronnen","text":"<p>Onderzoekskader Algoritmes Auditdienst Rijk, SV.8</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-toepassen_vastgestelde-beleidskaders/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-01-datakwaliteit/","title":"Controleer de datakwaliteit","text":"<p>dat-01Dataverkenning en datapreparatieOntwikkelaarData</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-01-datakwaliteit/#maatregel","title":"Maatregel","text":"<p>Stel vast of de gebruikte data van voldoende kwaliteit is voor de beoogde toepassing.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-01-datakwaliteit/#toelichting","title":"Toelichting","text":"<ul> <li> <p>Stel functionele eisen voor de datakwaliteit vast en analyseer structureel of er aan deze eisen wordt voldaan. </p> </li> <li> <p>De kwaliteit van de data die als input voor het algoritme wordt gebruikt is bepalend voor de uitkomsten van het algoritme. Hier wordt soms ook naar gerefereerd als garbage in = garbage out. </p> </li> <li>Een vraag die gesteld dient te worden: beschrijft de data het fenomeen dat onderzocht dient te worden? </li> <li> <p>Het Raamwerk gegevenskwaliteit bevat een breed toepasbare set van kwaliteitsdimensies:</p> <ul> <li>juistheid</li> <li>compleetheid</li> <li>validiteit</li> <li>consistentie</li> <li>actualiteit</li> <li>precisie</li> <li>plausibiliteit</li> <li>traceerbaarheid</li> <li>begrijpelijkheid</li> </ul> <p>Deze dimensies zijn aangevuld met kwaliteitsattributen welke gebruikt kunnen worden om de verschillende dimensies meetbaar te maken. </p> </li> <li> <p>De vraag of de data kwaliteit voldoende is, hangt sterk samen met de vraag of er bias in de onderliggende data zit. Analyseer daarom ook welke bias en aannames er besloten zijn in de onderliggende data. Denk hierbij onder andere aan de volgende vormen van bias:</p> <ul> <li>historische bias</li> <li>meetbias</li> <li>representatie bias</li> </ul> </li> <li> <p>Zorg dat je data vindbaar, toegankelijk, interoperabel en herbruikbaar (FAIR) is.</p> </li> </ul> <p>Let op!</p> <p>Wanneer je een algoritme inkoopt en de ontwikkeling van het algoritme uitbesteedt aan een derde partij, houdt er dan dan rekening mee dat data traceerbaar en reproduceerbaar moet zijn. Maak hier heldere afspraken over met de aanbieder. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-01-datakwaliteit/#risico","title":"Risico","text":"<ul> <li>Door onjuiste beslissingen van gegevens kunnen verkeerde beslissingen genomen worden. </li> <li>Het model cre\u00ebert onwenselijke systematische afwijking voor specifieke personen, groepen of andere eenheden. Dit kan leiden tot ongelijke behandeling en discriminerende effecten met eventuele schade voor betrokkenen. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-01-datakwaliteit/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, DM.9, DM.19</li> <li>Toetsingskader Algoritmes, Algemene Rekenkamder, 2.18</li> <li>NORA, Raamwerk gegevenskwaliteit</li> <li>Impact Assessment Mensenrechten en Algoritmes, 2A.2.2</li> <li>Handreiking non-discriminatie by design</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-01-datakwaliteit/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-02-fair-data/","title":"Maak waardevolle data vindbaar, toegankelijk, interoperabel en herbruikbaar (FAIR) binnen en buiten de eigen organisatie.","text":"<p>dat-02Dataverkenning en datapreparatieOntwikkelaarData</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-02-fair-data/#maatregel","title":"Maatregel","text":"<p>Maak waardevolle data vindbaar, toegankelijk, interoperabel en herbruikbaar (FAIR) binnen en buiten de eigen organisatie.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-02-fair-data/#toelichting","title":"Toelichting","text":"<p>De internationale FAIR-principes zijn richtlijnen voor de manier van beschrijven, opslag en publicatie van data. </p> <ul> <li>Findable (vindbaar): Metadata moet gemakkelijk te vinden zijn voor zowel mensen als computers.</li> <li>Accessible (toegankelijk): Gebruikers moeten weten hoe toegang tot de data verkregen kan worden (autorisatie en authenticatie)</li> <li>Interoperable (uitwisselbaar): Data moet meestal ge\u00efntegreerd worden met andere data en bijbehorden applicaties, opslag en processen.</li> <li>Reusable (herbruikbaar): Het uiteindelijke doel van FAIR is om hergebruik van data te optimaliseren.</li> </ul> <p>Wanneer je voldoet aan de 15 principes is je data 'machine actionable'. Dit maakt het mogelijk dat de data effectief gebruikt kan worden voor verschillende algoritmes.</p> <p>FAIR data betekent niet per definitie dat data open data is. Juist ook voor (privacy) gevoelige data (gesloten data) kan het heel zinvol zijn om te voldoen aan de principes voor FAIR data, om juist daarmee specifieke geautoriseerde toegang tot gevoelige data mogelijk te kunnen maken.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-02-fair-data/#15-principes-voor-fair-data","title":"15 principes voor FAIR data","text":"<p>Er zijn 15 principes voor FAIR data geformuleerd:</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-02-fair-data/#findable-vindbaar","title":"Findable (vindbaar)","text":"<ul> <li> <p>F1: Aan (meta)data wordt een wereldwijd unieke en permanente identifier toegevoegd</p> <p>Voorbeeld</p> <p>Met behulp van Persistent Identifiers (PID) zorg je ervoor dat jouw data (bijvoorbeeld onderzoeksdata) altijd vindbaar blijft.  PID's kun je vergelijken met het ISBN-nummer bij boeken. Het idee is dat ook als de locatie of de onderliggende infrastructuur verandert, de verwijzing intact blijft. </p> </li> <li> <p>F2: Data wordt beschreven met rijke metadata</p> <p>Voorbeeld</p> <p>Het team van data.overheid.nl heeft de metadata standaard DCAT-AP-DONL ontwikkeld die speciaal voor de uitwisseling van dataset informatie voor de Nederlandse situatie is ingericht. Dit is gebaseerd op de Data Catalog Vocabulary (DCAT) versie die de Europese Unie heeft opgesteld. Je kan hierover meer lezen op de site van data.overheid.nl.</p> </li> <li> <p>F3: Metadata bevat duidelijk en expliciet de identificatie van de data die ze beschrijven</p> </li> <li>F4: (Meta)data worden geregistreerd of ge\u00efndexeerd in een doorzoekbare bron </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-02-fair-data/#accessible-toegankelijk","title":"Accessible (toegankelijk)","text":"<ul> <li>A1: (Meta)data zijn opvraagbaar op basis van hun identificatiecode met behulp van een gestandaardiseerd communicatieprotocol </li> <li>A1.1: Het protocol is open, vrij en universeel implementeerbaar </li> <li>A1.2: Het protocol maakt waar nodig een authenticatie- en autorisatieprocedure mogelijk </li> <li>A2: Metadata zijn toegankelijk, ook als de data niet meer beschikbaar zijn </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-02-fair-data/#interoperable-uitwisselbaar","title":"Interoperable (uitwisselbaar)","text":"<ul> <li>I1: (Meta)data gebruikt een formele, toegankelijke, gedeelde en breed toepasbare taal voor kennisrepresentatie </li> <li> <p>I2: (Meta)data gebruikt gegevenswoordenboeken of vocabulaires die FAIR-principes volgen </p> <p>Voorbeeld woordenboek</p> <p>In het woordenboek Hitte staan ongeveer 230 definities van termen rond het thema hitte die gebruikt worden in het klimaatadaptatieveld. Dit woordenboek is ontwikkeld in opdracht van het ministerie van Infrastructuur en Waterstaat door overheidsstichting Geonovum.</p> </li> <li> <p>I3: (Meta)data bevat gekwalificeerde verwijzingen naar andere (meta)data </p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-02-fair-data/#reusable-herbruikbaar","title":"Reusable (herbruikbaar)","text":"<ul> <li>R1: (Meta)data wordt rijkelijk beschreven met een veelheid aan nauwkeurige en relevante attributen </li> <li>R1.1: (Meta)data wordt vrijgegeven met een duidelijke en toegankelijke licentie voor datagebruik </li> <li> <p>R1.2: (Meta)data wordt geassocieerd met gedetailleerde herkomst </p> <p>Voorbeeld</p> <p>PROV-DM is een conceptueel datamodel dat gebruikt kan worden voor de herkomstinformatie (provenance) van data. </p> </li> <li> <p>R1.3: (Meta)data voldoet aan domein-relevante normen </p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-02-fair-data/#bronnen","title":"Bronnen","text":"<ul> <li>GO FAIR Foundation</li> <li>3-point FAIRification framework 3PFF</li> <li>Toolbox verantwoord datagebruik, 2b</li> <li>NORA online</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-04-bewaartermijnen-persoonsgegevens/","title":"Geef data zoals persoonsgegevens een bewaartermijn met een vernietigingsprocedure","text":"<p>dat-04OntwikkelenMonitoring en beheerJuristProjectleiderTechnische robuustheid en veiligheidPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-04-bewaartermijnen-persoonsgegevens/#maatregel","title":"Maatregel","text":"<p>Bepaal de bewaartermijnen en richt een vernietigingsprocesdure in voor de verwerkte (persoons)gegevens.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-04-bewaartermijnen-persoonsgegevens/#toelichting","title":"Toelichting","text":"<ul> <li>(Persoons)gegevens die het algoritme verwerkt worden niet langer bewaard dan voor de verwezenlijking van de  verwerkingsdoeleinden noodzakelijk is.</li> <li>Beschrijf de bewaartermijnen voor de gegevens, bijvoorbeeld in een DPIA.</li> <li>Beschrijf hoe de (persoons)gegeven moeten worden vernietigd.</li> <li>Zorg ervoor dat de vereisten met betrekking tot bewaartermijnen correct zijn of worden vertaald naar het algoritme en de onderliggende (zaak)systemen.</li> <li>Controleer of deze maatregelen voor de bewaartermijnen en vernietiging van de (persoons)gegevens (in de onderliggende systemen) zijn getroffen en zorg dat dit aantoonbaar is, bijvoorbeeld met logbestanden.</li> <li>Maak aantoonbaar dat persoonsgegevens zijn vernietigd, bijvoorbeeld met logbestanden.  </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-04-bewaartermijnen-persoonsgegevens/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, PRI.11</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 3.17</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-04-bewaartermijnen-persoonsgegevens/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-05-pseudonimiseren-anonimiseren/","title":"Bescherm persoonsgegevens door data te anonimiseren, pseudonimiseren of te aggregeren","text":"<p>dat-05Dataverkenning en datapreparatieOntwikkelenOntwikkelaarJuristPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-05-pseudonimiseren-anonimiseren/#maatregel","title":"Maatregel","text":"<p>Pas maatregelen toe als pseudonimiseren, anonimisering of aggregeren van persoonsgegevens toe bij het verwerken van de data. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-05-pseudonimiseren-anonimiseren/#toelichting","title":"Toelichting","text":"<ul> <li>Als is vastgesteld welke persoonsgegevens mogen worden verwerkt voor het ontwikkelen en gebruiken van algoritmes, moet worden nagegaan of er maatregelen kunnen worden getroffen om deze te beschermen.</li> <li>Het algoritme verwerkt niet meer persoonsgegevens dan noodzakelijk; de verwerkte gegevens zijn proportioneel en substantieel.</li> <li>Hierbij kan worden gedacht aan het pseudonomiseren, anonimiseren of aggregeren van persoonsgegevens.</li> <li>Het bepalen of persoonsgegevens mogen worden verwerkt voor algoritmes moet worden bekeken in samenhang met maatregelen die kunnen worden getroffen om deze gegevens te beschermen. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-05-pseudonimiseren-anonimiseren/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Auditdienst Rijk, PRI.5</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 2.20</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-05-pseudonimiseren-anonimiseren/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-06-schending-auteursrechten/","title":"Controleer de auteursrechten van eigen data","text":"<p>dat-06OntwerpDataverkenning en datapreparatieJuristData</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-06-schending-auteursrechten/#maatregel","title":"Maatregel","text":"<p>Controleer of eventueel door de eigen organisatie verstrekte data binnen of buiten auteursrechten vallen. Bij voorkeur blijven de data eigendom van de (verstrekkende) overheidsorganisatie.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-06-schending-auteursrechten/#toelichting","title":"Toelichting","text":"<p>Het is van belang om te controleren of de te verwerken data waar overheidsorganisaties zelf over beschikken rechtmatig zijn verkregen en geen inbreuken maken op auteursrechten. Hier kan worden gedacht aan data die is gescraped van het internet en zou kunnen worden gebruikt voor de ontwikkeling van een algoritme.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-06-schending-auteursrechten/#bronnen","title":"Bronnen","text":"<p>Algoritmekader</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-06-schending-auteursrechten/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/","title":"Gebruik duurzame datacenters","text":"<p>dat-07OntwerpDataverkenning en datapreparatieOntwikkelenImplementatieMonitoring en beheerOntwikkelaarProjectleiderBeleid en adviesDuurzaamheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/#maatregel","title":"Maatregel","text":"<p>Maak gebruik van datacenters die gebruikmaken van duurzame energiebronnen en energie-effici\u00ebnte technologie\u00ebn voor de opslag en verwerking van data.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/#toelichting","title":"Toelichting","text":"<p>Door data op te slaan en algoritmes te laten draaien in datacenters die hernieuwbare energiebronnen inzetten en bijvoorbeeld de ontstane restwarmte recyclen, kun je de ecologische voetafdruk van de algoritmes aanzienlijk verkleinen. Datacenters die zich op duurzaamheid richten, verlagen de CO\u2082-uitstoot van hun infrastructuur en bieden mogelijk duurzaamheidsrapportages. Let bij het kiezen van een aanbieder op mogelijke greenwashing; dit gebeurt wanneer bedrijven beweren groen te zijn zonder dit met concrete maatregelen te onderbouwen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/#technologieen-voor-energie-efficiente-datacenters","title":"Technologie\u00ebn voor energie-effici\u00ebnte datacenters","text":"<p>Om datacenters energie-effici\u00ebnt te maken, zijn er verschillende benaderingen:</p> <ul> <li>Gebruik van groene energiebronnen: Kies voor datacenters/aanbieders die hernieuwbare energie gebruiken. Maak bijvoorbeeld afspraken over een doel, zoals een DCie-score van minimaal 50%, gewogen over een heel jaar. De DCie score van elk Overheids Datacenter (ODC) kun je hier bekijken. Je kunt ook kijken of naast duurzame stroom ook restwarmte van servers wordt benut om bijvoorbeeld nabijgelegen gebouwen te verwarmen.</li> <li>Koeling en energiebeheer optimaliseren: Adiabatische koeling, waarbij water en lucht worden gebruikt in plaats van elektriciteit, verlaagt het energieverbruik. Effici\u00ebnte stroomverdeling en warmteterugwinning dragen verder bij aan een lagere ecologische voetafdruk.</li> <li>Monitoren: Blijf controleren op duurzame prestaties door te letten op certificeringen, zoals ISO 14001, ISO 50001 en BREEAM, en vraag naar energierapportages en details over het energieverbruik en de herkomst van stroom. Dit helpt om claims van duurzaamheid te toetsen en te voorkomen dat je in greenwashing trapt.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/#risico","title":"Risico","text":"<p>Door geen gebruik te maken van duurzame datacenters, loop je het risico op een hogere CO\u2082-uitstoot, en wordt daardoor niet aangesloten bij Rijksbreed beleid. Ook loop je risico op hogere energiekosten.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/#bronnen","title":"Bronnen","text":"<ul> <li>Rijks ICT Dashboard - Duurzaamheid</li> <li>Denk Doe Duurzaam - Doelen voor ICT</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/","title":"Gebruik bij machine learning technieken gescheiden train-, test- en validatiedata en houdt rekening met underfitting en overfitting.","text":"<p>dat-07Dataverkenning en datapreparatieOntwikkelenOntwikkelaarDataTechnische robuustheid en veiligheidBias en non discriminatie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/#maatregel","title":"Maatregel","text":"<p>Indien je gebruik maakt van machine learning technieken, maak een passende keuze voor gescheiden train-, test- en validatiedata en houd hierbij rekening met underfitting en overfitting. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/#toelichting","title":"Toelichting","text":"<p>Verdeel je dataset in drie delen:</p> <ol> <li> <p>de trainingsset</p> <p>Deze dataset wordt gebruikt om het model te trainen. Uit deze dataset worden de onderliggende patronen of relaties geleerd die later gebruikt kunnen worden om voorspellingen mee te doen.</p> <p>De kwaliteit van deze dataset moet goed zijn en zo representatief mogelijk voor de doelpopulatie. Eventuele bias of vooroordelen in deze dataset kan door het trainen in het model sluipen.</p> </li> </ol> <p>Let bij het samenstellen van de traningsset op dat de data waarop het model gebaseerd is, niet beschikbaar zijn voordat de uitkomsten zijn geobserveerd. Met andere woorden, zorg ervoor de de voorspellingen geen onderdeel kunnen zijn van de inputvariabelen. </p> <ol> <li> <p>de validatieset</p> <p>De validatieset fungeert als een onafhankelijke, onbevooroordeelde dataset voor het vergelijken van de prestaties van verschillende algoritmes die zijn getraind op onze trainingsset.</p> <p>Verschillende modellen kunnen getraind worden op de trainingsdataset. Zo kan je bijvoorbeeld vari\u00ebren in de (hyper)parameters of de inputvariabelen. Dit leidt tot verschillende varianten van het model. Om de prestaties van de verschillende modellen te vergelijken, moeten we een nieuwe dataset gebruiken: de validatieset. Zou je hiervoor de trainingsdataset gebruiken, kan dat leiden tot overfitting, wanneer het model dan te specifiek afgestemd is op 1 dataset. Het model kan dan niet voldoende generaliseren voor nieuwe situaties.</p> </li> <li> <p>de testset</p> <p>Nadat er met behulp van de validatieset een keuze is gemaakt voor een passend model en bijbehorende (hyper)parameters, moet je het model nog testen op nieuwe data. Dit geeft een beeld van de werkelijke prestaties van het model in nieuwe omstandigheden. </p> <p>Let op dat je pas naar deze resultaten kijkt als laatste stap. Inzichten uit deze testdataset mogen niet worden meegenomen in de ontwikkeling, omdat dit kan leiden tot overfitting. Het model zal dan in productie mogelijk minder goed presteren. </p> </li> </ol>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/#grootte-van-de-drie-datasets","title":"Grootte van de drie datasets","text":"<p>Er is geen optimale verdeling van de drie datsets. Veelvoorkomende verhoudingen om je data in te splitten zijn:</p> <ul> <li>80% trainingsset, 10% validatieset, 10% testset</li> <li>70% trainingsset, 15% validatieset, 15% testset</li> <li>60% trainingsset, 20% validatieset, 20% testset</li> </ul> <p>Afhankelijk van de hoeveelheid beschikbare data en de context maak je hierin een keuze. Houdt hierbij rekening met:</p> <ul> <li>Hoe minder trainingdata, hoe groter de variantie van het model tijdens het trainen. De patronen en relaties die ontdekt zijn, bevatten dan een grotere onzekerheid. </li> <li>Hoe minder validatie- en testdata je gebruikt, hoe grote de variantie en de onzekerheid in de verwachte prestaties van het algoritme. </li> <li>Hoe complexer het model, en hoe meer (hyper)parameters er zijn om te optimaliserne, hoe groter de validatieset moet zijn om het model met optimale presetaties te vinden. Wanneer er weinig hyperparameters zijn, is een relatief kleine validatieset vaak voldoende.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/#k-fold-cross-validation","title":"k-fold cross validation","text":"<p>Naast dat je de datasets willekeurig kan verdelen in drie delen (aselect), kan je ook meer geavanceerde technieken gebruiken. Een robuuste en veelgebruikte techniek is k-fold cross validation, waarbij het model k keer wordt getraind op verschillende delen van de data. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/#risico","title":"Risico","text":"<p>Door onjuiste training van het model presteert het model in de praktijk minder goed dan bij de tests. Als trainings-, validatie- en testdata door elkaar lopen (\"data leakage\"), kan dit leiden tot overfitting, waardoor het model beter lijkt te presteren dan in werkelijkheid het geval is.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Auditdienst Rijk, DM.5, DM.6</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 2.15, 2.21 </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-08-eigenaarschap-data/","title":"Zorg dat je controle of eigenaarschap hebt over de data","text":"<p>dat-08Dataverkenning en datapreparatieProjectleiderDataPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-08-eigenaarschap-data/#maatregel","title":"Maatregel","text":"<p>De organisatie heeft volledige controle of eigenaarschap over de data. Wanneer dit niet mogelijk is, zijn afspraken gemaakt om de functionele eisen te waarborgen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-08-eigenaarschap-data/#toelichting","title":"Toelichting","text":"<p>Wanneer een algoritme ontwikkeld of ingekocht wordt, is het belangrijk om toegang tot de gebruikte data goed te regelen. Maak bijvoorbeeld afspraken over wie ervoor zorgt dat de data:</p> <ul> <li>op een centrale plek beschikbaar wordt gesteld</li> <li>van voldoende kwaliteit is</li> <li>goed beveiligd is</li> </ul> <p>Wanneer een algoritme wordt ontwikkeld door een derde partij en dus niet wordt beheerd door de eigen organisatie, maak je duidelijke afspraken over eigenaarschap van de data. Dat geldt zowel voor de inputdata als de outputdata.  Zorg dat de inputdata tot je beschikking blijft, zodat resultaten altijd reproduceerbaar zijn. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-08-eigenaarschap-data/#risico","title":"Risico","text":"<p>De organisatie is afhankelijk voor de data of het model afhankelijk van derden en kan daardoor reproduceerbaarheid en prestatie niet garanderen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-08-eigenaarschap-data/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Auditdienst Rijk, DM.23</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-08-eigenaarschap-data/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-09-dataminimalisatie/","title":"Beperk de omvang van datasets voor energie-effici\u00ebntie","text":"<p>dat-09Dataverkenning en datapreparatieOntwikkelenOntwikkelaarProjectleiderDataDuurzaamheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-09-dataminimalisatie/#maatregel","title":"Maatregel","text":"<p>Houd datasets beperkt tot het noodzakelijke en voldoende specifiek om onnodige energieconsumptie te voorkomen tijdens de verwerking en opslag van data voor algoritmes. We noemen dit ook wel dataminimalisatie.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-09-dataminimalisatie/#toelichting","title":"Toelichting","text":"<p>Hoe meer je bewaart, hoe meer ruimte dat kost om op te slaan. Bovendien verbruikt elk apparaat dat nodig is om data op te slaan stroom. Dat heeft grote invloed op de CO\u2082-uitstoot van een datacentrum. Grote datasets brengen daarom hoge energie- en opslagkosten met zich mee. Door de dataset bewust te beperken tot relevante gegevens, kun je ook de energie-effici\u00ebntie van algoritmes aanzienlijk verbeteren. Vooral bij de ontwikkeling van AI-systemen kan het verminderen van data bijdragen aan lagere energiebehoeften en CO\u2082-uitstoot.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-09-dataminimalisatie/#technieken-voor-dataminimalisatie","title":"Technieken voor dataminimalisatie","text":"<ul> <li>Slimme selectie van trainingsdata: Gebruik methoden die irrelevante data uit de dataset filteren, zoals dataselectie-algoritmes en sampling-technieken. Door te focussen op relevante data, beperk je de omvang zonder de prestaties van het model te be\u00efnvloeden.</li> <li>Verwijderen van redundante en dubbele data: Deduplicatie van data minimaliseert onnodige verwerkingskracht. Door alleen unieke en relevante gegevens op te slaan, wordt de opslagbehoefte verder beperkt.</li> <li>Opschonen en archiveren van verouderde data: Regelmatige archivering of verwijdering van verouderde data in je dataset zorgt voor een verminderde voetafdruk en verhoogt ook de effici\u00ebntie.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-09-dataminimalisatie/#risico","title":"Risico","text":"<p>Zonder dataminimalisatie loopt je organisatie het risico op onnodig hoge energie- en opslagkosten, en een grotere ecologische impact.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-09-dataminimalisatie/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Auditdienst Rijk, PRI.5</li> <li>Rijks ICT-dashboard</li> <li>Sustainable artificial intelligence \u2013 TU Delft</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-01-security-by-design/","title":"Ontwerp en ontwikkel het algoritme volgens de principes van \u2018security by design\u2019","text":"<p>owk-01OntwikkelenProjectleiderOntwikkelaarTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-01-security-by-design/#maatregel","title":"Maatregel","text":"<p>Hanteer principes van \u2018security by design\u2019 (informatiebeveiligingsmaatregelen) als uitgangspunten bij de ontwikkeling van het algoritme. Stel vast welke principes horen bij security by design en welke relevant zijn voor het ontwerp of de ontwikkeling van het algoritme. Mogelijke documenten waarin deze principes kunnen worden opgenomen, zijn het security beleid, of ontwikkelbeleid. Bij het bepalen en vaststellen van de juiste principes kunnen interviews met de ontwikkelaar en software-architecten helpen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-01-security-by-design/#toelichting","title":"Toelichting","text":"<p>Security by design is gehanteerd en terug te zien als uitgangspunt. (BIO 14.2.1.1) </p> <p>Security by design benadrukt het belang van het in een vroeg stadium integreren van securitymaatregelen. Op die manier kan worden voldaan aan regelgeving, maar wordt de weerbaarheid tegen bijvoorbeeld cyberaanvallen verhoogd. In een vroeg stadium nadenken over security betekent dat vroeg al de benodigde expertise wordt betrokken, zoals een security-officer.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-01-security-by-design/#risico","title":"Risico","text":"<p>Wanneer tijdens het ontwerp en de inrichting van het algoritmisch systeem niet voldoende rekening wordt gehouden met vastgestelde security-by-design principes kan dit leiden tot een onvoldoende veilige (software-)omgeving. Dit kan tot gevolg hebben: oneigenlijke toegang, wijzigingen of vernietigingen van het algoritme, de data of uitkomsten van het algoritme.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-01-security-by-design/#bronnen","title":"Bronnen","text":"<ul> <li>Baseline Informatiebeveiliging Overheid, (BIO 14.2.1.1)</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, IB.28</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 4.09</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-01-security-by-design/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-02-stopzetten-gebruik/","title":"Maak een noodplan voor het stoppen van het algoritme","text":"<p>owk-02OntwikkelenImplementatieProjectleiderOntwikkelaarGovernanceMenselijke controle</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-02-stopzetten-gebruik/#maatregel","title":"Maatregel","text":"<p>Tref (technische) maatregelen waarmee het gebruik van het algoritme kan worden stopgezet.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-02-stopzetten-gebruik/#toelichting","title":"Toelichting","text":"<ul> <li>Er moet in een proces zijn beschreven wanneer en hoe het gebruik van algoritmes moet worden stopgezet.</li> <li>Het is van belang dat bij het ontwerp van algoritmes er rekening wordt gehouden met dat het werkproces ook zonder het algoritme kan worden uitgevoerd.</li> <li>In het geval van risicoselectie kan er bijvoorbeeld worden teruggevallen op het enkel uitvoeren van een aselecte steekproef als selectieinstrument. </li> <li>Als blijkt dat het algoritme ongewenst functioneert, dan moeten (technische) maatregelen zijn getroffen waarmee het gebruik daadwerkelijk kan worden stopgezet. Denk hierbij aan een stopknop en werkinstructies hoe het gebruik kan worden be\u00ebindigd.</li> <li>Maak aantoonbaar dat deze maatregelen zijn getroffen.</li> <li>De proceseigenaar of een menselijk toezichthouder moet in staat zijn om het algoritme op elk moment te kunnen be\u00ebindigen.</li> <li>Het stopzetten van het gebruik van een algoritme mag niet tot gevolg hebben dat betrokkenen niet meer kunnen achterhalen hoe besluiten tot stand zijn gekomen of dat gevolgen niet meer kunnen worden gecorrigeerd als dat noodzakelijk is. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-02-stopzetten-gebruik/#risico","title":"Risico","text":"<p>Betrokkenen of belanghebbenden kunnen nadelige gevolgen ondervinden van een algoritme dat onjuist functioneert en niet tijdig kan worden stopgezet.  </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-02-stopzetten-gebruik/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.18, SV.17 </li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 1.03</li> <li>Impact Assessment Mensenrechten en Algoritmes, 1.5</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-02-stopzetten-gebruik/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-03-privacyrisico/","title":"Analyseer de privacy-risico\u2019s en neem maatregelen om deze risico\u2019s laag te houden","text":"<p>owk-03OntwerpOntwikkelenMonitoring en beheerProjectleiderJuristPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-03-privacyrisico/#maatregel","title":"Maatregel","text":"<p>Uitvoeren risicoanalyse en formuleren mitigerende maatregelen voor privacyrisico.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-03-privacyrisico/#toelichting","title":"Toelichting","text":"<ul> <li>Verifieer of een DPIA is uitgevoerd over het werkproces dat wordt of zal worden ondersteund met een algoritme. Zo nee, voer een risico analyse (DPIA) uit om de risico's voor de rechten en vrijheden van betrokkenen met de inzet van algoritmes in beeld te brengen.</li> <li>Organisatorische en technische maatregelen moeten worden getroffen om persoonsgegevens bij de ontwikkeling en het gebruik van het algoritme te beschermen.</li> <li>Beleg de mitigerende maatregelen bij betrokken actoren. Denk bijvoorbeeld aan het toekennen van de maatregelen als anonimiseren en pseudonimiseren van persoonsgegevens aan een data engineer, voordat deze kunnen worden gebruikt ten behoeve van het ontwikkelen of controleren van het algoritme.</li> <li>Bepaal welke maatregelen moeten zijn gerealiseerd voordat mag worden gestart met de verwerking van de persoonsgegevens en welke moeten worden gemonitord.  </li> <li>Monitor de voortgang op het realiseren van de maatregelen en zorg voor bewijsstuken als deze zijn gerealiseerd. Deze bewijsstukken kunnen onderdeel worden van een audit.</li> <li>Als er een noodzaak is om na verloop van tijd meer persoonsgegevens te verwerken of om andere verwerkingen uit te voeren, zal opnieuw een beoordeling moeten plaatsvinden of er privacyrisico's ontstaan en hoe deze kunnen worden gemitigeerd. Gedurende de levenscyclus van het algoritme moet aandacht blijven voor het uitvoeren van de risicoanalyse voor privacyrisico's.</li> <li>Bij hoge risico's voor het verwerken van persoonsgegevens is een voorafgaande raadpleging bij de Autoriteit Persoonsgegevens onder artikel 36 AVG verplicht. Bepaal of raadpleging noodzakelijk is. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-03-privacyrisico/#risico","title":"Risico","text":"<p>Privacyrisico's met de inzet van algoritmes worden niet gemitigeerd, waardoor privacyrechten van betrokkenen worden geschonden. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-03-privacyrisico/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, PRI.2, PRI.3</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 3.03</li> <li>Besluit inzake lijst van verwerkingen van persoonsgegevens waarvoor een gegevensbeschermingseffectbeoordeling (DPIA) verplicht is, Autoriteit Persoonsgegevens</li> <li>Model DPIA Rijksdienst</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-03-privacyrisico/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-04-logging/","title":"Maak logbestanden waarin staat wie wanneer toegang had tot de data en de code","text":"<p>owk-04OntwikkelenMonitoring en beheerOntwikkelaarTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-04-logging/#maatregel","title":"Maatregel","text":"<p>Zorg ervoor dat logbestanden worden gecre\u00eberd waarin informatie wordt geregistreerd over gebruikersactiviteiten, uitzonderingen en informatiebeveiligingsgebeurtenissen. Door goede logging is te achterhalen wanneer en door wie er toegang is geweest tot code en data (audit trail). Er kan loginformatie gegenereerd, bewaard, toegankelijk gemaakt en gemonitord worden. Logbestanden bevatten vaak gebeurtenissen die gebruikersactiviteiten, uitzonderingen en informatiebeveiligingsgebeurtenissen registreren. Bedenk wat deze informatie betekent in de context van de werking van het algoritme.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-04-logging/#toelichting","title":"Toelichting","text":"<ul> <li>Met logbestanden is te achterhalen wanneer en door wie er (ongewenste) aanpassingen zijn gedaan (audit trail).</li> <li>Loginformatie moet worden gegenereerd, bewaard, gemonitord en toegankelijk worden gemaakt.</li> <li>Logbestanden bevatten vaak gebeurtenissen die gebruikersactiviteiten, uitzonderingen en informatiebeveiligingsgebeurtenissen registreren.</li> <li>Bedenk wat deze informatie betekent in de context van de werking van het algoritme. loginformatie gegenereerd, bewaard, toegankelijk gemaakt en gemonitord worden. Logbestanden bevatten vaak gebeurtenissen die gebruikersactiviteiten, uitzonderingen en informatiebeveiligingsgebeurtenissen registreren.</li> <li>Stel vast welke informatie bij het ontwikkelen en gebruiken van algoritmes relevant is om te loggen. </li> <li>Log behalve het aanpassen van gegevens ook het uitlezen van gegevens waar dat relevant is. Bijvoorbeeld als persoonsgegevens worden opgevraagd.</li> <li>Logs dienen periodiek (of doorlopend) gecontroleerd to worden op relevante incidenten. Dat betekent dat wat er gelogd wordt geschikt moet zijn om relevante beveiligingsincidenten op te merken. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-04-logging/#risico","title":"Risico","text":"<p>Wanneer loginformatie ontbreekt, is niet te achterhalen wanneer er (eventueel ongewenste) aanpassingen zijn gedaan (audit trail) op (de code van) het algoritme, of door wie.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-04-logging/#bronnen","title":"Bronnen","text":"<ul> <li>Baseline Informatiebeveiliging Overheid, BIO 12.3.1.1, 12.3.1.4, 12.3.1.5, 12.4.1.1, 12.4.2.2</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, IB.27</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 4.06</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-04-logging/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-05-energiezuinige-programmeermethoden/","title":"Kies energiezuinige programmeermethoden","text":"<p>owk-05OntwikkelenOntwikkelaarDuurzaamheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-05-energiezuinige-programmeermethoden/#maatregel","title":"Maatregel","text":"<p>Gebruik energie-effici\u00ebnte programmeertechnieken en methoden die de benodigde rekenkracht minimaliseren.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-05-energiezuinige-programmeermethoden/#toelichting","title":"Toelichting","text":"<p>Energiezuinig programmeren maakt het mogelijk om de voetafdruk van algoritmes te verkleinen door minder energie en middelen te verbruiken. Door specifieke technieken toe te passen, zoals optimalisatie van processen en effici\u00ebnte geheugenbeheerstrategie\u00ebn, kun je als ontwikkelaar bijdragen aan het verduurzamen van algoritmes.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-05-energiezuinige-programmeermethoden/#technieken-voor-energiezuinige-softwareontwikkeling","title":"Technieken voor energiezuinige softwareontwikkeling","text":"<ol> <li> <p>Lean coding en minimalisatie van code bloat    Lean coding richt zich op het gebruik van alleen de benodigde code zonder overbodige complexiteit of libraries, wat resulteert in lagere energieconsumptie. Door \u201ccode bloat\u201d te vermijden, zorg je ervoor dat het algoritme minder verwerkingskracht en geheugen verbruikt.</p> </li> <li> <p>Gebruik van energiezuinige programmeertalen en frameworks    Programmeren in talen zoals Rust, Go en Elixir draagt bij aan energie-effici\u00ebntie doordat deze ontworpen zijn voor lage resource-omvang en hoge effici\u00ebntie. Ook frameworks die lichtgewicht en modulair zijn, ondersteunen energiezuinige processen.</p> </li> <li> <p>Parallel processing en multi-core optimalisaties    Door parallelle verwerking en multi-core optimalisaties toe te passen, wordt rekenwerk verdeeld over meerdere cores. Dit reduceert de totale verwerkingstijd, bespaart energie en verhoogt de prestaties van je code op het vlak van duurzaamheid.</p> </li> <li> <p>Microservices en modulaire architecturen    Een modulaire architectuur, zoals microservices, zorgt ervoor dat je onderdelen van de applicatie alleen activeert wanneer dat nodig is. Dit voorkomt onnodige belasting en beperkt energieverbruik behoorlijk.</p> </li> <li> <p>Geoptimaliseerd geheugenbeheer    Door effici\u00ebnt geheugenbeheer, zoals caching en lazy loading, voorkom je onnodige data-opslag en bewerkingen. Dit verlaagt de energievraag en verbetert de snelheid van het algoritme aanzienlijk.</p> </li> </ol>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-05-energiezuinige-programmeermethoden/#risico","title":"Risico","text":"<p>Zonder energie-effici\u00ebnte methoden kan het algoritme onnodig veel energie verbruiken, wat leidt tot hogere operationele kosten en een grotere milieu-impact.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-05-energiezuinige-programmeermethoden/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-05-energiezuinige-programmeermethoden/#voorbeeld","title":"Voorbeeld","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-06-optimaliseer-AI-training/","title":"Optimaliseer AI-trainingsprocessen voor energie-effici\u00ebntie","text":"<p>owk-06OntwikkelenOntwikkelaarDuurzaamheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-06-optimaliseer-AI-training/#maatregel","title":"Maatregel","text":"<p>Streef naar energiezuinige methoden voor AI-training, zoals het beperken van trainingscycli en het gebruik van energie-effici\u00ebnte hardware.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-06-optimaliseer-AI-training/#toelichting","title":"Toelichting","text":"<p>Het trainen van AI, vooral generatieve AI-modellen, vergt aanzienlijke energie en heeft daardoor een grote ecologische voetafdruk. Een enkele trainingsronde kan al een enorme hoeveelheid CO\u2082 uitstoten. Door enkele concrete methoden toe te passen, kun je deze impact beperken.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-06-optimaliseer-AI-training/#energie-optimalisatie-door-hardwarekeuze-en-serverbeheer","title":"Energie-optimalisatie door hardwarekeuze en serverbeheer","text":"<ul> <li>Gebruik energie-effici\u00ebnte hardware zoals specifiek afgestemde GPU's, die geschikt zijn voor de trainingsbehoeften van het model. Door bijvoorbeeld te kiezen voor GPU\u2019s die optimaal bij je model passen in plaats van de krachtigste beschikbare hardware, kan het energieverbruik drastisch worden verminderd. Houd hiermee rekening in je keuze voor een trainingsomgeving.</li> <li>Verder kan servergebruik geoptimaliseerd worden door onnodige trainingsomgevingen tijdig te stoppen of voor andere trainingsomgevingen of testomgevingen te kiezen. Ook kun je servers dynamisch schalen met tools zoals Kubernetes of autoscaling technologie.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-06-optimaliseer-AI-training/#slimme-data-en-trainingsoptimalisatie","title":"Slimme data- en trainingsoptimalisatie","text":"<p>Niet alle beschikbare data dragen bij aan de modelprestaties. Door een dataselectiestrategie toe te passen, gebruik je enkel relevante datasets (dataminimalisatie), wat zorgt voor minder intensieve rekenbelasting tijdens het trainingsproces. Daarnaast kan slimme caching helpen om repetitieve data-opvragingen te beperken, wat bijdraagt aan een lagere energievraag. Bovendien kun je hertrainingscycli van AI beperken door enkel updates te doen wanneer nieuwe data dit echt vereist. Dit voorkomt overbodige trainingscycli en bespaart energie.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-06-optimaliseer-AI-training/#risico","title":"Risico","text":"<p>Zonder energie-effici\u00ebnte methoden kan AI-training leiden tot hoge operationele kosten en een aanzienlijke ecologische impact, met name door overmatig gebruik van rekenkracht en energie-intensieve hardware.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-06-optimaliseer-AI-training/#bronnen","title":"Bronnen","text":"<ul> <li>How to Make Generative AI Greener - Harvard Business Review</li> <li>GreenOps: 4 Tips om AI-training duurzamer te maken - AG Connect</li> <li>Duurzame kunstmatige intelligentie - TU Delft</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-06-optimaliseer-AI-training/#voorbeeld","title":"Voorbeeld","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/","title":"Controleer regelmatig of het algoritme werkt zoals het bedoeld is","text":"<p>ver-01OntwikkelenVerificatie en validatieMonitoring en beheerProjectleiderOntwikkelaarTechnische robuustheid en veiligheidBias en non discriminatie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/#maatregel","title":"Maatregel","text":"<p>Stel vast dat het algoritme voortdurend functioneert in lijn met de vastgestelde doelstelling. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/#toelichting","title":"Toelichting","text":"<ul> <li>Vertaal de vastgestelde doelstelling naar functionele eisen voor het algoritme. Werk het vastgestelde doel uit in een beschrijving in logische taal/pseudo code of documentatie die handvatten biedt aan de ontwikkelaar. </li> <li>Monitor de mate waarin aan deze eisen wordt voldaan door het algoritme. </li> <li>Bepaal en leg vast hoe eventuele parameters, business rules en indicatoren bepaald worden. Zorg dat dit breed wordt afgestemd in de organisatie (ontwikkelteam, opdrachtgevers en beheer).</li> <li>Houd hier rekening met eventuele (statistische) bias: meten we daadwerkelijk wat we denken te meten? </li> <li>Wanneer het algoritme meerdere doelen dient, is het belangrijk ook te evalueren op meerdere functionele eisen. </li> <li>Wanneer er sprake is van een (handmatige) behandeling, bepaal dan wanneer deze behandeling als 'succesvol' gezien kan worden. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/#risico","title":"Risico","text":"<p>Het algoritme functioneert niet in lijn met geformuleerde doelstellingen. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/#bronnen","title":"Bronnen","text":"<ul> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 2.01, 2.07 </li> <li>Impact Assessment Mensenrechten en Algoritmes, 1 </li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, DM.1, DM.4 </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/","title":"Toets het algoritme op bias","text":"<p>ver-01OntwerpVerificatie en validatieMonitoring en beheerProjectleiderBeleid en adviesOntwikkelaarJuristBias en non discriminatie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/#maatregel","title":"Maatregel","text":"<p>Analyseer of het gebruik van het algoritme of het proces daaromheen leidt tot onwenselijke of onrechtmatige verschillen in de behandeling van individuen en/of groepen.  </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/#toelichting","title":"Toelichting","text":"<p>Het uitvoeren van een analyse over onwenselijke of onrechtmatige verschillen bestaat grofweg uit 3 stappen:</p> <ul> <li>Stap 1: Analyseer of er sprake is van bias: systematisch verschil in behandeling van bepaalde objecten, mensen of groepen in vergelijking met anderen.</li> <li>Stap 2: Voer een rechtvaardigingstoets uit om te bepalen of het geconstateerde verschil uit stap 1 te rechtvaardigen is. </li> <li>Stap 3: Voer een ethische wenselijkheidstoets uit om te bepalen of het geconstateerde verschil uit stap 1 ethisch wenselijk is. </li> </ul> <p>Voor alle stappen geldt dat het belangrijk is om de gemaakte keuzes en afwegingen zorgvuldig te onderbouwen en te documenteren. De 3 stappen worden hieronder verder toegelicht. </p> <p>Opmerking</p> <p>Deze maatregel is in ieder geval van toepassing op natuurlijke personen. Voor andere rechtspersonen zoals bedrijven kan dit ook van toepassing zijn. Denk bijvoorbeeld aan een gelijke behandeling tussen eenmanszaken en grotere bedrijven. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/#stap-1-analyseer-of-er-sprake-is-van-bias","title":"Stap 1: Analyseer of er sprake is van bias","text":"<p>In deze stap is het doel om te bepalen in welke mate er sprake is van een systematisch verschil in behandeling van bepaalde objecten, mensen of groepen in vergelijking met anderen.  Dit verschil kan zowel op een directe als een indirecte manier ontstaan. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/#toetsen-op-direct-onderscheid","title":"Toetsen op direct onderscheid","text":"<p>Toetsen op direct onderscheid is in vergelijking tot toetsen op indirect onderscheid relatief eenvoudig. </p> <p> Bepaal of de inputvariabelen die gebruikt worden leiden tot een direct onderscheid op basis van godsdienst, levensovertuiging, politieke gezindheid, ras, geslacht, nationaliteit, hetero- of homoseksuele gerichtheid<sup>1</sup> of burgelijke staat. </p> <p>Het is niet mogelijk om een uitputtend overzicht te geven van alle selectiecriteria die mogelijk tot direct onderscheid op grond van ras of nationaliteit kunnen leiden.  Wel zijn in de jurisprudentie verschillende voorbeelden en aanknopingspunten te vinden.  Zo staat vast dat selectie op basis van fysieke etnische kenmerken, zoals huidskleur, direct onderscheid op grond van ras oplevert<sup>2</sup>. Een ander voorbeeld is dat onderscheid op grond van een niet-westers klinkende naam direct onderscheid op grond van afkomst (en dus ras) oplevert<sup>3</sup>.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/#toetsen-op-indirect-onderscheid","title":"Toetsen op indirect onderscheid","text":"<p>Ook selectiecriteria die op het eerste gezicht geen enkele link lijken te hebben met een discriminatiegrond kunnen leiden tot indirect onderscheid op grond van een discriminatiegrond.  Enkele voorbeelden van zulke 'ogenschijnlijk neutrale' selectiecriteria die verband hebben met ras of nationaliteit zijn: postcode, hoogte van het inkomen, kenteken, familielid in het buitenland, laaggeletterdheid.  Indirect onderscheid is in vergelijking met direct onderscheid lastiger op te signaleren en te voorkomen.  Daarom is het belangrijk jouw algoritmische toepassing regelmatig te analyseren op eventueel indirect onderscheid.  Het toetsen op indirect onderscheid bestaat uit 5 stappen:</p> <ol> <li> <p>Bepaal wat de kwetsbare groepen zijn. Eventueel kan dit aangevuld worden op basis van de discriminatiegronden uit non-discriminatie wetgeving. Of andere groepen waarvoor verschillen in behandeling ethisch onwenselijk zijn.</p> </li> <li> <p>Bepaal wat \"verschillen in behandeling\" betekent in de context van het algoritme. In deze stap is het belangrijk om voorafgaand aan de daadwerkelijke analyse met een brede groep stakeholders te bepalen wat 'eerlijk' en 'rechtvaardig' wordt bevonden in de context van het betreffende algoritme.  Er zijn veel verschillende manieren waarop je kan kijken naar onderscheid bij het gebruik van algoritmes. Voorbeelden van manieren waarop je naar onderscheid kan kijken zijn:</p> <ul> <li>Onderscheid op basis van gelijke uitkomsten (representatie).  De belangrijkste vraag die hier mee beantwoord wordt is: hebben personen uit verschillende groepen gelijke kans om geselecteerd te worden door het algoritme? Of is er sprake van een over- of ondervertegenwoording van bepaalde groepen in de selectie ten opzichte van de betreffende populatie?</li> <li>Onderscheid op basis van gelijke prestaties (fouten).  De belangrijkste vraag die hier mee beantwoord wordt is: presteert het algoritme gelijk voor personen uit verschillende groepen? Met andere woorden: maakt het algoritme vaker fouten bij bepaalde groepen? Dat kan er eventueel toe leiden dat bepaalde groepen vaker onterecht wel of niet geselecteerd worden door het algoritme. </li> </ul> <p>Om te toetsen of er sprake is van onderscheid op basis van gelijke prestaties, is het noodzakelijk om de prestaties van het algoritme goed te analyseren.  In het geval van classificatie is het daarvoor nodig om een zogeheten confusion matrix op te stellen.  Een confusion matrix is een tabel waarin de voorspellingen van het algoritme worden vergeleken met de werkelijke waarden (de ground truth). </p> <p>De verschillende maten/metrieken waarop gekeken kan worden naar onderscheid, worden in de (wetenschappelijke) literatuur ook wel fairness metrieken genoemd.  Veel van deze metrieken kunnen op basis van de confusion matrix berekend worden.  Een hulpmiddel om de meest passende metrieken te kiezen in jouw situatie is de Fairness tree. </p> <p>Door te denken vanuit verschillende perspectieven, zullen er in de praktijk meerdere metrieken van belang zijn.  Het kan echter voorkomen dat deze metrieken elkaar tegenspreken.  Maak een duidelijke prioritering van de verschillende metrieken om afwegingen te maken tussen de verschillende opvattingen van eerlijkheid. </p> </li> <li> <p>Verzamel de benodigde data die nodig is om bovenstaande groepen te bepalen. Bepaal welke data benodigd is om te analyseren of er verschillen zijn tussen bepaalde groepen.  In veel gevallen zal data benodigd zijn die demografische en beschermde kenmerken van groepen omschrijft.  Het verzamelen en verwerken van deze data kan in strijd zijn met privacy vereisten uit bijvoorbeeld de Algemene Verordening Gegevensbescherming. Het is daarom van belang om duidelijk afwegingen te maken tussen privacy en het analyseren van bias die rekening houdt met de juridische en ethische vereisten.</p> <p>Uitzondering voor hoog risico AI-systemen</p> <p>De AI-verordening biedt een uitzondering voor het verwerken van bijzondere categorie\u00ebn persoonsgegevens voor het monitoren, opsporen en corrigeren van bias bij AI-systemen met een hoog risico. Zie artikel 10.5, AI-verordening. </p> <p>Om de data op een veilige en rechtmatige manier te gebruiken voor een biasanalyse dient de data van voldoende kwaliteit te zijn.  Denk hier goed na of de data eventuele bias bevat die kan duiden op een bepaalde vooringenomenheid in de biasanalyse zelf (historische bias of representatie bias).  De data dient bijvoorbeeld voldoende actueel en volledig te zijn.</p> <p>Voor sommige groepen zal het onmogelijk zijn om te beschikken over data van voldoende kwaliteit om zorgvuldig te toetsen op bias.  De laaggeletterdheid van burgers of personen is bijvoorbeeld lastig meetbaar en in veel gevallen niet beschikbaar.  Bepaal in zo'n situatie of er andere mogelijkheden zijn deze groepen te helpen, of dat er andere mogelijkheden zijn om eventuele ongelijke behandeling bij deze groepen te constateren.  Bijvoorbeeld door hierop te monitoren in de klacht- en bezwarenprocedure. </p> </li> <li> <p>Bereken de verschillen in behandeling en/of uitkomsten van het algoritme. Er zijn verschillende open source softwarepakketten die je hierbij kunnen ondersteunen, zoals fairlearn, Aequitas, fairml, fairness of AI Fairness 360.</p> </li> <li> <p>Probeer te verklaren hoe het geconstateerde onderscheid is ontstaan. Als er in de vorige stap een significant onderscheid is geconstateerd, is het belangrijk om na te gaan hoe dit onderscheid is ontstaan.  Dit kan bijvoorbeeld ontstaan door:</p> <ul> <li>een vorm van bias in de onderliggende inputdata. Je kan hierbij denken aan: <ul> <li>historische bias: in hoeverre beschrijft de data de huidige situatie?</li> <li>representatie bias: is de data waarop getraind wordt representatief voor de bijbehorende populatie? Zijn trends uit de gebruikte data generaliseerbaar naar de totale populatie?</li> <li>meetbias: beschrijven de inputvariabelen wel wat ze moeten beschrijven? In hoeverre zijn dit benaderingen waarbij eventuele factoren worden weggelaten?</li> </ul> </li> <li>een vorm van bias in het proces na afloop van het algoritme<ul> <li>is er sprake van automatiseringsbias of bevestigingsbias in de (handmatige) beoordeling?</li> </ul> </li> </ul> </li> </ol> <p> Wanneer duidelijker is hoe de geconstateerde bias is ontstaan, is het goed om te verkennen of er mogelijkheden zijn om dit (in de toekomst) te voorkomen. </p> <p>Het is belangrijk hier een brede groep aan belanghebbenden bij te betrekken.  De oorzaken van bias komen uit de 'echte wereld', waarbij patronen in datasets historische, demografische en sociale verschillen weerspiegielen.  Het verklaren en voorkomen van bias vraagt daarmee niet alleen om technische oplossingen, maar het is belangrijk de hele socio-technische omgeving waarin het algoritme wordt ingezet mee te nemen. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/#stap-2-voer-een-rechtvaardigingstoets-uit","title":"Stap 2: Voer een rechtvaardigingstoets uit","text":"<p>Wanneer er in Stap 1 is geconstateerd dat er sprake is van een onderscheid, dient de volgende vraag beantwoord te worden:</p> <p>Valt dit onderscheid te rechtvaardigen?</p> <p>Een geconstateerd systematisch onderscheid is niet altijd fout en is niet altijd verboden, maar het vraagt wel altijd om aandacht en zorgvuldigheid.  Het geconstateerde onderscheid kan in bepaalde situaties en onder bepaalde strikte voorwaarden gerechtvaardigd zijn:</p> <ul> <li>Voor direct onderscheid kan er bijvoorbeeld sprake zijn van een wettelijke uitzondering die het gemaakte onderscheid toelaat. </li> <li>Voor indirect onderscheid geldt dat behalve een wettelijke uitzondering er ook een objectieve rechtvaardiging kan bestaan, waarmee het geconstateerde onderscheid in bepaalde gevallen toelaatbaar kan zijn. </li> </ul> <p>Twee subvragen die hierbij beantwoord moeten worden zijn:</p> <ul> <li>streeft het in te zetten algoritme een legitiem doel na?</li> <li>bestaat er een redelijke relatie van evenredigheid tussen het gebruikte algoritme en de nagestreefde doelstelling?</li> </ul> <p>Wanneer er geen rechtvaardiging is voor het gemaakte onderscheid, spreken we van een verboden direct of indirect onderscheid, ofwel discriminatie.  Het algoritme mag in dat geval niet gebruikt worden.</p> <p>Voor meer toelichting over het uitvoeren van een rechtvaardigingstoets, verwijzen we naar het rapport Discriminatie door risicoprofielen - Een mensenrechtelijk toetsingskader van het College voor de Rechten van de Mens. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/#stap-3-voer-een-ethische-wenselijkheidstoets-uit","title":"Stap 3: Voer een ethische wenselijkheidstoets uit","text":"<p>Bepaal of het geconstateerde onderscheid uit Stap 1 ethisch wenselijk is. Dit hangt samen met de algemene wenselijkheid van de inzet van het algoritme.  </p> <p>In sommige gevallen kan het zo zijn dat ondanks dat er een objectieve rechtvaardiging bestaat voor het gemaakte onderscheid, dit vanuit ethisch perspectief toch onwenselijk is.  Bepaal met een grote groep belanghebbenden wat eventuele (nadelige) effecten van het gemaakte onderscheid kunnen zijn, of jullie dit eerlijk vinden en of er eventuele alternatieven zijn. </p> <p>Opmerking</p> <p>De bepaling over wat eerlijk is en wat ethisch wenselijk is kan in sommige gevallen ook politiek bevonden worden. Houd hier rekening met de politiek-bestuurlijke verantwoordelijkheden en zorg indien nodig dat de politiek-bestuurlijke verantwoordelijkhden duidelijk zijn. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/#risico","title":"Risico","text":"<p>Wanneer er geen zorgvuldige analyse naar (onwenselijke) bias is uitgevoerd, bestaat het risico dat het gebruik van het algoritme discriminerende effecten met zich meebrengt.  Dit kan leiden tot een ongelijke behandeling van burgers met eventuele schade voor betrokkenen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/#bronnen","title":"Bronnen","text":"<ul> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 2.19, 3.08</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, DM.16, DM.17, DM.18, DM.20, DM.21, DM.22 </li> <li>Discriminatie door risicoprofielen - Een mensenrechtelijk toetsingskader, College voor de Rechten van de Mens</li> <li>Handreiking non-discriminatie by design</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/#voorbeelden","title":"Voorbeelden","text":"<ul> <li>Addendum Vooringenomenheid voorkomen, Algorithm Audit met bijbehorende data en broncode op Github</li> <li>Onderzoek misbruik uitwonendenbeurs, PricewaterhouseCoopers</li> <li>Pilot Slimme Check, Gemeente Amsterdam</li> <li>Bias toetsing 'Kort Verblijf Visa' aanvragen, Rijks ICT Gilde</li> <li>Report on Algorithmic bias assesment, SigmaRed</li> </ul> <ol> <li> <p>Er is een wetsvoorstel om de term 'hetero- of homoseksuele gerichtheid' in de Algmemene wet gelijke behandeling (Awgb) te wijzigingen in 'seksuele gerichtheid'. Met deze wijziging sluit de Awgb aan bij een eerdere wijziging van artikel 1 van de Grondwet.\u00a0\u21a9</p> </li> <li> <p>Zie Discriminatie door risicoprofielen, een mensenrechtelijk toetsingskader, College voor de Rechten van de Mens \u21a9</p> </li> <li> <p>Zie Discriminatie door risicoprofielen, een mensenrechtelijk toetsingskader, College voor de Rechten van de Mens, College voor de Rechten van de Mens 7 juni 2021, oordeel 2021-70; College voor de Rechten van de Mens 23 april 2015, oordeel 2015-44; College voor de Rechten van de Mens 23 april 2015, oordeel 2014-0426.\u00a0\u21a9</p> </li> </ol>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-03-vertaling-wetgeving-naar-systeem/","title":"Controleer regelmatig of het algoritme voldoet aan alle wetten en regels en het eigen beleid","text":"<p>ver-03Verificatie en validatieJuristGovernanceTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-03-vertaling-wetgeving-naar-systeem/#maatregel","title":"Maatregel","text":"<p>Stel regelmatig vast dat wetgeving en (lokaal) beleid correct is vertaald naar de uitvoering van het te ondersteunen werkproces en de onderliggende systemen. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-03-vertaling-wetgeving-naar-systeem/#toelichting","title":"Toelichting","text":"<ul> <li>Systemen die overheidsorganisaties inzetten voor bijvoorbeeld het verlenen van subsidies, vergunningen of bijstandsuitkeringen moeten de regels en processtappen volgen die in wetgeving zijn voorgeschreven.</li> <li>Er is een vertaling nodig van deze regels en processtappen naar de uitvoering van het werkproces, het datagebruik en onderliggende systemen.</li> <li>Algoritmes moeten ook voldoen aan deze regels en processtappen.</li> <li>Als algoritmes worden ontwikkeld, moet worden onderzocht wat deze regels zijn en hoe deze moeten worden toegepast bij het ontwikkelen van algoritmes.</li> <li>Het moeten voldoen aan wetgeving en beleid kan dus in zekere zin 'begrenzend' werken op wat mag worden gedaan met algoritmes. Dit is mede afhankelijk van de risico classificatie van de specifieke toepassing. </li> <li>Voor algoritmes, bijvoorbeeld regelgebaseerde rekenregels, moet bijvoorbeeld nauwkeurig worden geprogrammeerd in welke gevallen welke bedragen moeten worden uitgekeerd voor een bijstandsuitkering.</li> <li> <p>Voor machine learning algoritmes moet bijvoorbeeld worden vastgesteld of de trainingsdata wel tot stand is gekomen in lijn met wetgeving en vastgesteld beleid (datakwaliteit) en welke verbanden en patronen (inputvariabelen) al dan niet passend zijn bij het ondersteunen van wettelijke taken.</p> </li> <li> <p>Er is een multidisciplinaire samenwerking nodig tussen de proceseigenaar, gebruikers, juristen, informatieanalisten en ontwikkelaar om deze vertaling zorgvuldig en doorlopend te maken.</p> </li> <li>Voorafgaand aan het (laten) ontwikkelen van een algoritme moet dit zijn uitgevoerd.</li> <li>De toegepaste 'business rules' en de verwerkte data voor de uitvoering van het te ondersteunen werkproces met algoritmes moeten worden onderzocht en beoordeeld.</li> <li>Diepgaande procesanalyses (Bv. BPMN niveau Analytisch) en procesbeschrijvingen kunnen hierbij ondersteunen. </li> <li>Als blijkt dat een werkproces niet (meer) conform (gewijzigde) wetgeving of beleid wordt uitgevoerd, dan moet worden beoordeeld of de verworven data of welke deel van de data geschikt is voor het ontwikkelen een algoritme.</li> <li>Het is dan raadzaam om de uitvoering van het betreffende werkproces en de werking van onderliggende systemen eerst te 'herstellen' en om hiermee een nieuw datafundament te cre\u00eberen (eerst een groot aantal zaken behandelen) die later als trainingsdata kan worden gebruikt. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-03-vertaling-wetgeving-naar-systeem/#risico","title":"Risico","text":"<p>Een beslissing of besluit wordt niet conform wetgeving genomen en is daarmee onrechtmatig, als geen goede vertaling wordt gemaakt van wetgeving naar het algoritme. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-03-vertaling-wetgeving-naar-systeem/#bron","title":"Bron","text":"<ul> <li>Wetsanalyse</li> <li>Onderzoekskader Auditdienst Rijk, DM.15</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 2.05</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-03-vertaling-wetgeving-naar-systeem/#voorbeeld","title":"Voorbeeld","text":"<p>Handleiding Wetanalyse </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/","title":"Stel een werkinstructie op voor gebruikers.","text":"<p>imp-01ImplementatieProjectleiderOntwikkelaarMenselijke controleTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/#maatregel","title":"Maatregel","text":"<p>Stel een werkinstructie op voor gebruikers. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/#toelichting","title":"Toelichting","text":"<p>Het is belangrijk dat gebruikers een werkinstructie ontvangen met informatie over hoe zij met het algoritme kunnen en moeten werken. Hierin worden zaken beschreven als:</p> <ul> <li>Op wat voor manier het algoritme ondersteunt bij het uitvoeren van (wettelijke) taken.</li> <li>Wat de mogelijkheden en beperkingen zijn bij het gebruik van het algoritme.</li> <li>Wat de impact is van het gebruik van het algoritme op de samenleving en individuen (denk aan energieverbruik of dat een besluit met rechtsgevolgen wordt genomen).</li> <li>Wat de risico's zijn die aan het gebruik verbonden zijn (bijv. (automation) bias, false positives/negatives).</li> <li>Welke maatregelen zijn getroffen om deze risico's te beperken (bijv. bias analyse, 'stopknop' ingebouwd, transparantie over de output).</li> <li>Hoe de output van het algoritme moet worden ge\u00efnterpreteerd.</li> <li>Hoe het werkproces kan worden uitgevoerd, zonder ondersteuning van het algoritme.</li> <li>Welke protocollen er zijn als incidenten zich voordoen.</li> </ul> <p>Denk hierbij na over het eventueel bijscholen van medewerkers als het kennisniveau nog onvoldoende is om de werkinstructies goed te begrijpen. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/#bronnen","title":"Bronnen","text":"<ul> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 3.07</li> <li>Ethics Guidelines of Trustworthy AI</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/#risico","title":"Risico","text":"<p>Het algoritme wordt onjuist gebruikt of verkeerd ge\u00efnterpreteerd door gebruikers, waardoor onjuiste belissingen of besluiten worden genomen. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-02-aselecte-steekproeven/","title":"Doe aselecte steekproeven om algoritmes met 'risicogestuurde selectie\u2019 te controleren","text":"<p>imp-02Dataverkenning en datapreparatieImplementatieMonitoring en beheerOntwikkelaarBias en non discriminatieTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-02-aselecte-steekproeven/#maatregel","title":"Maatregel","text":"<p>Uitvoeren van aselecte steekproeven als aanvulling wanneer gebruik gemaakt wordt van risicogestuurde selectie.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-02-aselecte-steekproeven/#toelichting","title":"Toelichting","text":"<p>Aselecte steekproeven kunnen een waardevolle toevoeging zijn bij risicogestuurde selectie.</p> <p>Het toevoegen van aselecte steekproeven maakt het mogelijk om over tijd te beoordelen of het algoritme nog voldoende effectief is. Populaties veranderen immers over tijd. Een selectie die het meest effectief was bij ingebruikname, kan over tijd dat niet meer zijn. Door alleen risicogestuurd te selecteren, wordt dit niet inzichtelijk, omdat bepaalde groepen zelden tot nooit gecontroleerd worden. Door de aanvullende mogelijkheid van monitoring, kan over tijd beoordeeld worden of er nog steeds sprake is van de meest proportionele vorm. Als dat niet zo is, kan bijvoorbeeld gekozen worden voor aanpassing van de risicogestuurde selectie of overgaan op volledig aselect.</p> <p>De maatregel gaat daarmee niet direct discriminatie tegen, omdat er sprake kan zijn van discriminatie ongeacht de effectiviteit van de risicogestuurde selectie. Een lagere effectiviteit maakt het echter lastiger het gemaakte onderscheid te rechtvaardigen.</p> <p>Het gebruik van een aselecte steekproef is in veel gevallen essentieel om het systeem te kunnen toetsen op vooringenomenheid.  Een aselecte steekproef geeft ook inzicht in heel deel van de populatie dat doorgaans niet geselecteerd en behandeld wordt door het betreffende risicogestuurde algoritme.  Dit maakt het mogelijk om te toetsen of er sprake is van een over- of ondervertegenwoordiging van bepaalde groepen, of om te bepalen of bepaalde typen fouten vaker gemaakt worden in bepaalde groepen.</p> <p>Bij AI-systemen die verder leren op basis van verkregen data kan daarnaast sprake zijn van een reinforcing feedbackloop, omdat zij geen representatieve data krijgen. Het toevoegen van aselecte steekproeven kan deze feedbackloop doorbreken.</p> <p>Het is aan te bevelen om, waar mogelijk, behandelaars niet in te lichten of een casus toegewezen is op basis van een risicogestuurd of aselecte selectie. Daardoor wordt beperkt dat een behandelaar met tunnelvisie een zaak bekijkt. De behandelaar weet immers dat er tussen de selecties zaken zitten waar niet sprake is van verhoogd risico. Op die manier kan automation bias beperkt te worden. Niet in alle gevallen zal dit mogelijk zijn, omdat de behandelaar ook uit andere aangeleverde gegevens kan halen op basis waarvan een casus geselecteerd is. Het is dan belang om op andere wijze de tunnelvisie tegen te gaan.</p> <p>De precieze inzet van aselecte steekproeven zal afhangen van de context. Zo verschilt het per context hoeveel zaken aselect geselecteerd moeten worden. Bepaal welke groepen er precies vergeleken dienen te worden en bepaal aan de hand daarvan een passende steekproefgrootte zodanig dat er gesproken kan worden over statistische significantie. </p> <p>In sommige gevallen zal de impact van een selectie ook dusdanig zijn, dat het zich niet leent voor aselecte steekproef. Zo kan een aselecte steekproef wel de basis zijn voor bureauonderzoek, maar mogelijk niet als enige basis voor een huisbezoek. Deze belangenenafweging moet per context gemaakt worden.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-02-aselecte-steekproeven/#bronnen","title":"Bronnen","text":"<p>Rapportage Algoritmerisico's Nederland voorjaar 2024 (pp. 36-41)</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-02-aselecte-steekproeven/#risico","title":"Risico","text":"<ul> <li>Historical bias</li> <li>Representation bias</li> <li>Automation bias en Reinforcing Feedback Loop</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-02-aselecte-steekproeven/#voorbeeld","title":"Voorbeeld","text":"<p>In het onderzoek van zowel Algorithm Audit als PricewaterhouseCoopers naar de Controle Uitwonendenbeurs is het belang van de aselecte steekproef duidelijk geworden. </p> <p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/","title":"Richt de juiste menselijke controle in van het algoritme","text":"<p>imp-03OntwerpImplementatieMonitoring en beheerProjectleiderBeleid en adviesMenselijke controleGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/#maatregel","title":"Maatregel","text":"<p>Richt (technische) controlemechanismen in voor menselijke tussenkomst (of: menselijke controle) waarmee de output van een algoritme kan worden gecontroleerd.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/#toelichting","title":"Toelichting","text":"<p>Algoritmes ondersteunen vaak beslissingen en besluitvorming van overheidsorganisaties. Deze beslissingen of besluiten kunnen betrokkenen in aanmerkelijke mate raken of zelfs rechtsgevolgen hebben. Omdat algoritmes niet foutloos zijn, is het belangrijk dat een mens controleert wat een algoritme doet en, waar nodig, corrigeert. Dit proces heet 'menselijke tussenkomst' en moet betekenisvol zijn, niet slechts symbolisch.</p> <p>Het inrichten, monitoren en evalueren van menselijke controle is cruciaal om te voorkomen dat algoritmes negatieve effecten veroorzaken of de menselijke autonomie ondermijnen.</p> <p>Betekenisvolle menselijke controle houdt in dat:</p> <ul> <li>Het toezicht wordt uitgevoerd door iemand die bevoegd en bekwaam is om een beslissing of besluit te wijzigen.</li> <li>Automatische aanbevelingen niet klakkeloos worden overgenomen. Bijvoorbeeld: een systeem dat standaard een suggestie accepteert door een enkele klik voldoet hier niet aan.</li> <li>De vormen van menselijke tussenkomst al in een vroeg stadium, bijvoorbeeld in de ontwerpfase, worden vastgesteld op basis van risicoanalyses.</li> <li>Gebruikers voldoende kennis, tijd en verantwoordelijkheid hebben om weloverwogen beslissingen te nemen over het functioneren van algoritmes. Dit betekent ook dat externe factoren, zoals tijdsdruk of onvoldoende informatie, de beoordeling van de output niet mogen be\u00efnvloeden. (zie ook het onderzoekskader van de ADR, SV.6)</li> </ul> <p>Soms is menselijke tussenkomst minder relevant, zoals bij \u2018gebonden bevoegdheden\u2019. Hierbij is weinig tot geen ruimte om een beslissing of besluit aan te passen. Voorbeelden zijn:</p> <ul> <li>Het opleggen van verkeersboetes onder de Wet administratiefrechtelijke handhaving verkeersvoorschriften (Wahv).</li> <li>Het automatisch aanpassen van studiefinanciering op basis van inkomenswijzigingen.</li> </ul> <p>Om menselijke tussenkomst goed te organiseren, zijn technische en organisatorische maatregelen nodig. Dit geldt ook wanneer een externe aanbieder de algoritmes levert. In dat geval moet de verantwoordelijke organisatie (gebruiksverantwoordelijke) samen met de aanbieder bepalen hoe menselijke tussenkomst zinvol kan worden ingericht.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/#inrichten-van-menselijke-controle","title":"Inrichten van menselijke controle","text":"<p>Er zijn verschillende manieren om menselijke tussenkomst in te richten, afhankelijk van de specifieke toepassing van een algoritme. Hieronder worden vier mogelijkheden beschreven die kunnen worden ingezet, los of in combinatie:</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/#1-human-in-the-loop","title":"1. Human in the loop","text":"<p>Bij dit model speelt de mens een actieve rol in elke fase van het algoritme. Deze variant geeft de meeste controle en invloed, maar kan leiden tot vertraagde of minder effici\u00ebnte besluitvorming, vooral bij real-time of zeer complexe taken waarbij snelheid cruciaal is. Een voorbeeld van toepassen van Human-in-the-loop is het nakijken en beoordelen van de output van een algoritme door een mens, telkens voordat een beslissing wordt genomen. Het verwerken van data gebeurt alleen in opdracht van de mens en verder neemt het algoritme of AI model geen autonome beslissingen. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/#2-human-on-the-loop","title":"2. Human on the loop","text":"<p>Hier behoudt de mens toezicht en kan ingrijpen wanneer dat nodig is, om te garanderen dat een model veilig en ethisch opereert. Dit model biedt daardoor een balans tussen autonome besluitvorming en menselijke controle. Het is vooral nuttig in situaties waarin afwijkende keuzes of acties van het algoritme grote gevolgen kunnen hebben. De menselijke operator houdt de werking van het algoritme in de gaten en staat klaar om in te grijpen of beslissingen terug te draaien wanneer nodig.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/#3-human-above-the-loop","title":"3. Human above the loop","text":"<p>In dit model houdt de mens toezicht op een hoger niveau, met een focus op strategische en ethische keuzes, in plaats van dat de menselijke operator zich bezighoudt met directe operationele beslissingen. Dit stelt de mens in staat in te grijpen wanneer kritieke morele, juridische of sociale zorgen ontstaan om het model op de langere termijn bij te sturen.  De menselijke tussenkomst is gericht op het bepalen van beleid en de richtlijnen voor algoritmes. Het gaat daarbij niet alleen over het defini\u00ebren van operationele procedures maar ook het maken van bepaalde ethische overwegingen, het zorgen voor naleving van regelgeving en het overwegen van de implicaties van de inzet van algoritmes op de lange termijn. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/#4-human-before-the-loop","title":"4. Human before the loop","text":"<p>Hier maakt de mens vooraf ethische en morele afwegingen die in het algoritme zelf worden ingebouwd. Hoewel het model in productie autonoom opereert, zal de menselijke input gedurende de ontwikkeling ervoor zorgen dat het model ook in complexe situaties volgens de juiste (ethische) afwegingen keuzes en acties onderneemt.</p> <p>Dit model is essentieel in situaties waar menselijk ingrijpen tijdens de uitvoering niet mogelijk is (wanneer er bijvoorbeeld weinig of helemaal geen tijd is om als mens te interveni\u00ebren), maar waar ethische keuzes cruciaal blijven. Denk aan bestrijding van zeemijnen of situaties met zelfrijdende auto\u2019s in onvoorspelbare verkeerssituaties (bron: TNO visiestuk 2022). Deze variant kan ook worden ingezet voor situaties waarin wel nog menselijk ingrijpen mogelijk is. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/#risico","title":"Risico","text":"<p>Het niet inrichten van passende menselijke controle leidt tot onverantwoorde inzet van algoritmen en het niet voldoen aan wettelijke vereisten. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/#bronnen","title":"Bronnen","text":"<ul> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 2.01<ul> <li>Menselijke tussenkomst | Algoritmes | Algemene Rekenkamer</li> </ul> </li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.5, SV.6 </li> <li>Advies over geautomatiseerde selectietechniek Pels Rijcken, p.9</li> <li>Recht op een menselijke blik bij besluiten | Autoriteit Persoonsgegevens</li> <li>Kamerstukken IT 2017-2018, 34 851, nr. (MvT UAVG), p. 120-121</li> <li>Ethics guidelines for trustworthy AI | Shaping Europe\u2019s digital future, deel (64)</li> <li>\"Towards Digital Life: Een toekomstvisie op AI anno 2032\" - TNO, 2022</li> <li>Algoritmes afwegen | Rathenau Instituut</li> <li>Managing supplier delivery reliability risk under limited information: Foundations for a human-in-the-loop DSS - ScienceDirect</li> <li>Human control of AI systems: from supervision to teaming | AI and Ethics (springer.com)</li> <li>Zijn er beperkingen op het gebruik van geautomatiseerde besluitvorming? - Europese Commissie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/#voorbeeld","title":"Voorbeeld","text":"<p>HvJEU december 2023, ECLI:EU:C:2023:957 (SCHUFA Scoring)</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-04-publiceren-algoritmeregister/","title":"Publiceer impactvolle algoritmes en hoog-risico-AI-systemen in het Algoritmeregister","text":"<p>imp-04ImplementatieMonitoring en beheerProjectleiderBeleid en adviesTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-04-publiceren-algoritmeregister/#maatregel","title":"Maatregel","text":"<p>Publiceer het algoritme  in het Nederlandse Algoritmeregister.  </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-04-publiceren-algoritmeregister/#toelichting","title":"Toelichting","text":"<ul> <li>De regering wil dat de overheid algoritmes verantwoord gebruikt. Mensen moeten erop kunnen vertrouwen dat algoritmes voldoen aan de waarden en normen van de samenleving.</li> <li>Wanneer de overheid open is over algoritmes en hun toepassing, kunnen burgers, organisaties en media haar kritisch volgen.</li> <li>Impactvolle algoritmes en hoog risico AI-systemen moeten daarom worden gepubliceerd in het Algoritmeregister.</li> <li>In het Algoritmeregister moet uitleg zijn over hoe algoritmes, of het proces wat hiermee wordt ondersteund werkt.</li> <li>Er is een Handreiking Algoritmeregister opgesteld met informatie over het publiceren van algoritmes in het Algoritmeregister.</li> <li>De Algoritmeregister Publicatiestandaard kan overheidsorganisaties ondersteunen bij het helpen invullen van het Algoritmeregister.</li> <li>Sommige overheidsorganisaties publiceren hun algoritmes ook in een eigen Algoritmeregister, zodat burgers dit makkelijker kunnen vinden. Bijvoorbeeld het Algoritmeregister van de Gemeente Rotterdam, het Algoritmeregister van de Gemeente Amsterdam of het Algoritmeregister van het UWV. </li> <li>Zorg na publicatie dat de informatie in het Algoritmeregister up-to-date blijft en indien nodig regelmatig wordt aangepast. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-04-publiceren-algoritmeregister/#risico","title":"Risico","text":"<p>Betrokkenen zijn niet op de hoogte dat hun persoonsgegevens worden verwerkt met een algoritme, waardoor zij hier geen controle over hebben. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-04-publiceren-algoritmeregister/#bronnen","title":"Bronnen","text":"<ul> <li>Handreiking Algoritmeregister</li> <li>Algoritmeregister Publicatiestandaard</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 3.12, 3.14, 3.16 </li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.14, PRI.8 </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-04-publiceren-algoritmeregister/#voorbeeld","title":"Voorbeeld","text":"<ul> <li>Gemeente Groningen, Algoritmeregister: Eerste Hulp bij Geldzaken</li> <li>Gemeente Amsterdam, Algoritemregister: Blurring as a Service</li> <li>Juryrapport Best Beschreven Algoritme</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-proces-privacyrechten/","title":"Spreek af hoe de organisatie omgaat met privacy-verzoeken","text":"<p>imp-06OrganisatieverantwoordelijkhedenOntwikkelenProjectleiderBeleid en adviesJuristPrivacy en gegevensbeschermingGovernanceData</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-proces-privacyrechten/#maatregel","title":"Maatregel","text":"<p>Richt een proces in waarmee betrokkenen hun privacyrechten kunnen inroepen als algoritmes worden ontwikkeld of gebruikt.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-proces-privacyrechten/#toelichting","title":"Toelichting","text":"<ul> <li>Betrokkenen moeten hun persoonsgegevens kunnen inzien, rectificeren, laten verwijderen of het gebruik ervan beperken bij het toepassen van algorimtes.</li> <li>Betrokkenen moeten hun verzoek kunnen indienen bij de betreffende organisatie. Denk hierbij aan het inrichten van een privacyloket.</li> <li>Er zullen  afspraken moeten worden gemaakt door servicemanagement in te richten hoe deze verzoeken effectief kunnen worden behandeld door bijvoorbeeld door het ontwikkel- of beheerteam (aanbieder).</li> <li>Bij het inrichten van  servicemanagement moet zijn nagedacht over hoe een verzoek tot het inzien, rectificeren, verwijderen of beperken van de verwerking van persoonsgegevens op een betekenisvolle manier kan of moet worden behandeld.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-proces-privacyrechten/#risico","title":"Risico","text":"<p>Betrokkenen hebben geen controle over hun persoonsgegevens doordat ze geen beroep kunnen doen op hun privacyrechten. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-proces-privacyrechten/#bronnen","title":"Bronnen","text":"<p>Onderzoekskader Algoritmes Auditdienst Rijk, PRI.9 </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-proces-privacyrechten/#voorbeeld","title":"Voorbeeld","text":"<p>Privacyverzoek Gemeente Amsterdam</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-werkinstructies-medewerkers/","title":"Spreek af hoe medewerkers omgaan met het algoritme.","text":"<p>imp-05ImplementatieProjectleiderBeleid en adviesGovernanceMenselijke controle</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-werkinstructies-medewerkers/#maatregel","title":"Maatregel","text":"<p>Stel duidelijke werkinstructies op voor de medewerkers die het algoritme gaan gebruiken. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-werkinstructies-medewerkers/#toelichting","title":"Toelichting","text":"<ul> <li>Maak keuzes rondom de rol van het systeem in de werkwijze van medewerkers.</li> <li>Gebruik duidelijke werkinstructies en protocollen om te voorkomen dat beslissingen, gebaseerd op de output van het systeem, door (automation) bias worden be\u00efnvloed.</li> <li>Stel een structuur op voor het melden van mogelijke problemen die medewerkers ervaren met het systeem.</li> <li> <p>Opleiding van medewerkers over:</p> <ul> <li>Algoritmes, waaronder AI;</li> <li>het systeem waarmee ze gaan werken;</li> <li>de rol van het systeem in hun werkwijze;</li> <li>de risico's die aan het gebruik van een systeem verbonden zijn (bijv. (automation) bias, false positives/negatives);</li> <li>de maatregelen die genomen zijn om deze risico\u2019s te beperken (bijv. willekeurige of fictieve casussen, transparantie over de output).</li> </ul> </li> <li> <p>Bespreek regelmatig de uitdagingen die medewerkers ondervinden bij het werken met het systeem (bijv. tijdsdruk).</p> </li> <li> <p>Documenteer alle keuzes en de onderliggende redenen/afwegingen rondom menselijke tussenkomst en overzicht. Evalueer en pas gemaakte keuzes waar nodig aan.</p> </li> <li> <p>Goede samenwerking tussen medewerkers en systemen helpt bij het voorkomen van (automation) bias en discriminatie, het signaleren van algoritmische problemen, en het vermijden van de facto automatische besluitvorming.</p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-werkinstructies-medewerkers/#bronnen","title":"Bronnen","text":"<ul> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 3.07</li> <li>Handreiking non-discriminatie by design </li> <li>Impact Assessment Mensenrechten en Algoritmes </li> <li>Ethics Guidelines of Trustworthy AI</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-werkinstructies-medewerkers/#risico","title":"Risico","text":"<p>Bias, discriminatie, de facto automatische besluitvorming.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-werkinstructies-medewerkers/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-06-vermelding-in-privacyverklaring/","title":"Vermeld het gebruik van persoonsgegevens in een privacyverklaring","text":"<p>imp-07ImplementatieProjectleiderJuristPrivacy en gegevensbeschermingTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-06-vermelding-in-privacyverklaring/#maatregel","title":"Maatregel","text":"<p>Neem het gebruik van een algoritme op in de privacyverklaring als hierbij persoonsgegevens worden verwerkt.  </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-06-vermelding-in-privacyverklaring/#toelichting","title":"Toelichting","text":"<ul> <li>Door in een privacyverklaring te vermelden welke persoonsgegevens worden verwerkt voor het gebruik van een algoritme, wordt een betrokkene ge\u00efnformeerd over de verwerking van diens persoonsgegevens.</li> <li>Een privacyverklaring kan op organistieniveau worden opgesteld en ook voor specifieke verwerkingen.</li> <li> <p>In een privacyverklaring wordt in ieder geval het volgende opgenomen:</p> </li> <li> <p>de identiteit en contactgegevens van uw organisatie. En ook die van vertegenwoordiger in de Europese Unie (EU), als deze er zijn.</p> </li> <li>de contactgegevens van de functionaris gegevensbescherming (FG), als een organistie deze heeft.</li> <li>de doeleinden van de verwerking en de AVG-grondslag. </li> <li>de (categorie\u00ebn van) ontvangers van de persoonsgegevens.</li> <li>of de persoonsgegevens door worden geven buiten de EER of aan een internationale organisatie. En zo ja, op welke juridische grond.</li> <li>de bewaartermijn van de gegevens.</li> <li>de privacyrechten van de betrokkenen, zoals het recht op inzage, rectificatie en gegevens verwijderen.</li> <li>het recht van de betrokkenen om de toestemming die zij voor een bepaalde verwerking hebben gegeven, altijd weer te mogen intrekken.</li> <li>dat de betrokkenen een klacht kunnen indienen bij de privacytoezichthouder. In Nederland is dat de Autoriteit Persoonsgegevens (AP).</li> <li>of de betrokkenen verplicht zijn de persoonsgegevens te verstrekken. En zo ja, waarom. Vermeld dan ook wat de gevolgen zijn als zij de gegevens niet verstrekken.</li> <li>of er sprake is van geautomatiseerde besluitvorming, inclusief profilering. En zo ja, hoe deze beslissing wordt genomen.</li> <li> <p>als persoonsgegevens van een andere organisatie zijn ontvangen: de bron waar de persoonsgegevens vandaan komen. En of de gegevens afkomstig zijn van openbare bronnen.</p> </li> <li> <p>Het is denkbaar dat in een specifieke privacyverklaring informatie over onderliggende logica van het algoritme, alsmede het belang en de verwachte gevolgen van die verwerking voor de betrokkene. Het is ook denkbaar dat deze informatie in het algoritmeregister wordt opgenomen.</p> </li> <li>Als ervoor wordt gekozen om het algoritme uit te faseren, dan moet informatie in het algoriteregister hierop worden aangepast. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-06-vermelding-in-privacyverklaring/#risico","title":"Risico","text":"<p>Betrokkenen zijn niet op de hoogte dat hun persoonsgegevens worden verwerkt met een algoritme, waardoor zij hier geen controle over hebben en zich niet kunnen beroepen op hun privacyrechten.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-06-vermelding-in-privacyverklaring/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, PRI.8</li> <li>Autoriteit Persoonsgegevens  Algoritmekader </li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 3.12 </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-06-vermelding-in-privacyverklaring/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-07-klacht-bezwaar-beroep/","title":"Richt een proces in zodat burgers of andere belanghebbenden een klacht, bezwaar of beroep kunnen indienen over het gebruik van het algoritme en monitor dit proces.","text":"<p>imp-09ImplementatieMonitoring en beheerProjectleiderOntwikkelaarGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-07-klacht-bezwaar-beroep/#maatregel","title":"Maatregel","text":"<p>Richt een proces in zodat burgers of andere belanghebbenden een klacht, bezwaar of beroep kunnen indienen over het gebruik van het algoritme. Zorg voor goede monitoring van dit proces zodat het projectteam op de hoogte is van klachten, bezwaren en beroepen over het systeem. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-07-klacht-bezwaar-beroep/#toelichting","title":"Toelichting","text":"<ul> <li>Een goede datahuishouding van de binnengekomen bezwaren, klachten en beroepen is essentieel om de informatie rondom de klachten, bezwaren en beroepen vanuit datagedreven perspectief te kunnen monitoren.</li> <li>Goede monitoring kan ervoor zorgen dat eventuele patronen in bezwaar, klacht en beroep snel gesignaleerd worden. Eventuele patronen in klacht, bezwaar en beroep kunnen duiden op problemen in het functioneren van het algoritme. Dit kan bijvoorbeeld duiden op discriminerende effecten van het algoritme, waardoor nader onderzoek wenselijk is. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-07-klacht-bezwaar-beroep/#risico","title":"Risico","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-07-klacht-bezwaar-beroep/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Auditdienst Rijk, SV.17, PRI.9</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 1.08</li> <li>Onderzoek misbruik uitwonendenbeurs, PricewaterhouseCoopers</li> <li>Intern onderzoek controle uitwonendenbeurs, DUO</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-07-klacht-bezwaar-beroep/#voorbeeld","title":"Voorbeeld","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-08-vermelding-in-verwerkingsregister/","title":"Vermeld het gebruik van persoonsgegevens in het verwerkingsregister","text":"<p>imp-08ImplementatieProjectleiderJuristTransparantiePrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-08-vermelding-in-verwerkingsregister/#maatregel","title":"Maatregel","text":"<p>Neem de ontwikkeling en gebruik van een algoritme op in het verwerkingsregister als persoonsgegevens worden verwerkt.  </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-08-vermelding-in-verwerkingsregister/#toelichting","title":"Toelichting","text":"<ul> <li>Door in het verwerkingsregister te vermelden welke persoonsgegevens worden verwerkt voor het gebruik van een algoritme, wordt een betrokkene ge\u00efnformeerd over de verwerking van diens persoonsgegevens</li> <li>Hiermee is ook voor de organisatie intern inzichtelijk welke persoonsgegevens voor welke toepassingen worden verwerkt;</li> <li>Het is van belang dat vanaf het moment dat persoonsgegevens worden verwerkt, meteen een vermelding hiervan wordt gemaakt in het verwerkingsregister;</li> <li>Dat betekent dat als persoonsgegevens worden verwerkt bij het ontwikkelen en trainen van het algoritme, en deze nog niet in gebruik zijn genomen, al een vermelding moet worden gedaan in het verwerkingsregister;</li> <li>Bij be\u00ebindiging van het gebruik van het algoritme, moet het verwerkingsregister worden aangepast. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-08-vermelding-in-verwerkingsregister/#risico","title":"Risico","text":"<p>Betrokkenen en de interne organisatie zijn niet op de hoogte welke persoonsgegevens worden verwerkt met een algoritme, waardoor zij hier geen controle over hebben. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-08-vermelding-in-verwerkingsregister/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, PRI.8</li> <li>Autoriteit Persoonsgegevens</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 3.04</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-08-vermelding-in-verwerkingsregister/#voorbeeld","title":"Voorbeeld","text":"<ul> <li>Blurring as a Service, Verwerkingsregister gemeente Amsterdam</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-09-politiek-bestuurlijk-besluit/","title":"Maak een openbaar besluit over de inzet van het algoritme","text":"<p>imp-01OrganisatieverantwoordelijkhedenImplementatieProjectleiderGovernanceTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-09-politiek-bestuurlijk-besluit/#maatregel","title":"Maatregel","text":"<p>Een politieke-bestuurlijk besluit wordt genomen over de inzet van een impactvol algoritme. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-09-politiek-bestuurlijk-besluit/#toelichting","title":"Toelichting","text":"<ul> <li>Door een politiek-bestuurlijk besluit te nemen over de inzet of be\u00ebindiging van een impactvol algoritme, wordt een afweging en keuze gemaakt over de wenselijkheid, haalbaarheid, transparantie, invulling van menselijke controle en eventueel de mate van onbewuste vooringenomenheid van het betreffende algoritme.</li> <li>Impactvolle algoritmes bevatten aspecten die vragen om politieke afwegingen, en niet enkel door de ambtelijke organistie mogen worden beoordeeld.</li> <li>Een voorbeeld van een politiek afweging is wanneer er wel of geen sprake is van een gerechtvaardigd onderscheid wat wordt gemaakt door een algoritme. </li> <li>Het is van belang dat overheidsorganisaties een politiek-bestuurlijk kader opstellen waarin wordt beschreven hoe wordt omgegaan met dergelijke gevallen. </li> <li>Een openbaar besluit draagt bij aan de legitimiteit van de inzet van het algoritme en de controleerbaarheid van de overheidsorganisatie. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-09-politiek-bestuurlijk-besluit/#risico","title":"Risico","text":"<p>De ambtelijke organisatie maakt politieke-bestuurlijke afwegingen en beslissingen bij de inzet of be\u00ebindiging van het gebruik van impactvolle algoritmes, terwijl deze daar niet toe bevoegd is.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-09-politiek-bestuurlijk-besluit/#bronnen","title":"Bronnen","text":"<p>Algemene Rekenkamer</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-09-politiek-bestuurlijk-besluit/#voorbeeld","title":"Voorbeeld","text":"<p>Besluit College van Burgemeester en Wethouders Gemeente Amsterdam </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-01-backups-maken/","title":"Maak back-ups van algoritmes","text":"<p>mon-01OntwikkelenMonitoring en beheerOntwikkelaarBeleid en adviesTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-01-backups-maken/#maatregel","title":"Maatregel","text":"<p>Back-up kopie\u00ebn van informatie, software en systeemafbeeldingen dienen regelmatig te worden gemaakt en getest. Idealiter gebeurt dit in overeenstemming met een afgesproken back-up beleid. Maak back-ups van de omgeving van het algoritme en zorg ervoor dat het algoritme en de data hersteld kunnen worden.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-01-backups-maken/#toelichting","title":"Toelichting","text":"<p>Er is een back-up beleid waarin de eisen voor het bewaren en beschermen zijn gedefinieerd en vastgesteld. Dit beleid moet vervolgens worden vertaald naar (technische) maatregelen om het kunnen maken van back-ups te realiseren.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-01-backups-maken/#risico","title":"Risico","text":"<p>Als er geen regelmatige back-ups worden gemaakt en de restore-procedure niet regelmatig wordt getest, bestaat het risico dat er geen hersteloptie is en mogelijkheid van gegevensverlies.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-01-backups-maken/#bronnen","title":"Bronnen","text":"<ul> <li>Baseline Informatiebeveiliging Overheid, 12.3.1.1, 12.3.1.4, 12.3.1.5.</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, IB.26</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 4.08 </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-01-backups-maken/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/","title":"Beveilig de software","text":"<p>mon-02Dataverkenning en datapreparatieOntwikkelenMonitoring en beheerProjectleiderBeleid en adviesOntwikkelaarTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/#maatregel","title":"Maatregel","text":"<p>Zorg voor een goede beveiliging van de verschillende softwarecomponenten van een algoritme. Bepaal of de data voldoende is beveiligd en maak hierin onderscheid tussen de inputdata en de outputdata.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/#toelichting","title":"Toelichting","text":"<p>Er zijn beheersmaatregelen die kunnen helpen bij het zorgen voor een goede beveiliging van verschillende (software-)componenten van een algoritme. Hierbij kan worden gedacht aan: Het toepassen van wachtwoordbeheer. Baseline Informatiebeveiliging Overheid, de NCSC Handreiking voor implementatie van detectieoplossingen en het Impact Assessment Mensenrechten en Algoritmes.</p> <ul> <li>Inzicht cre\u00ebren in de beoogde opzet van de IT-infrastructuur (de architectuur) en de werkelijk geconfigureerde hard- en software. (CIS Control 1, BIO 8.1.1).</li> <li>Inrichten van een formeel proces voor het beheer van technische kwetsbaarheden. Dit omvat minimaal periodieke (geautomatiseerde) controle op de aanwezigheid van kwetsbaarheden in de te toetsen systemen, een risicoafweging en navolgbare afwerking daarvan of risicoacceptatie (BIO 12.6).</li> <li>Beoordelen, patchen en updaten van kwetsbaarheden in IT-systemen als deze bekend zijn. (BIO 12.6.1)</li> <li>Verwijderen of deactiveren van softwarecomponenten en services die niet noodzakelijk zijn voor het functioneren van het algoritme om beveiligingsrisico\u2019s te beperken. (BIO 12.6.1)</li> <li>Er vindt zonering plaats binnen de technische infrastructuur conform de uitgangspunten die zijn vastgelegd in een operationeel beleidsdocument, waarbij minimaal sprake is van scheiding tussen vertrouwde en onvertrouwde netwerken (BIO 9.4.2). Denk ook aan het scheiden in netwerken (BIO 13.1.3).</li> <li>Actieve monitoring van de algoritme data vindt plaats zodat beveiligingsincidenten en -gebeurtenissen in een vroeg stadium worden gedetecteerd. (BIO 12.4.1, NCSC Handreiking voor implementatie van detectieoplossingen).</li> <li>Netwerkverkeer en componenten worden actief gemonitord. (BIO 12.4.1).</li> <li>Beoordeel of de data ten behoeve van het ontwikkelen en gebruiken van het algoritme voldoende is beveiligd. Maak hierin onderscheid tussen de trainingsdata, inputdata en de outputdata.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/#risico","title":"Risico","text":"<p>Oneigenlijke toegang van buitenaf kan plaatsvinden via zwakheden in het systeem.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/#bronnen","title":"Bronnen","text":"<ul> <li>Baseline Informatiebeveiliging Overheid</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, IB.18 t/m IB.25</li> <li>NCSC Handreiking voor implementatie van detectieoplossingen</li> <li>Handleiding Quickscan Information Security</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/","title":"Maak een noodplan voor beveiligingsincidenten","text":"<p>mon-03OrganisatieverantwoordelijkhedenMonitoring en beheerProjectleiderBeleid en adviesJuristTechnische robuustheid en veiligheidGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/#maatregel","title":"Maatregel","text":"<p>Richt een proces in waarmee beveiligingsincidenten m.b.t. algoritmes en data zo spoedig mogelijk worden opgelost.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/#toelichting","title":"Toelichting","text":"<p>Er zijn procedures aanwezig die borgen dat beveiligingsincidenten m.b.t. algoritmes en data zo spoedig mogelijk, afhankelijk van de kwalificatie van het incident, worden opgepakt.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/#risico","title":"Risico","text":"<p>Te late reactie op incidenten kan ervoor zorgen dat de BIV (beschikbaarheid, integriteit en vertrouwelijkheid) van het algoritme of data kan worden aangetast.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/#bronnen","title":"Bronnen","text":"<ul> <li>Baseline Informatiebeveiliging Overheid, BIO 12.3.1.1, 12.3.1.4, 12.3.1.5</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, IB.30</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 4.06</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-04-evalueer-bij-veranderingen-in-data/","title":"Monitor regelmatig op veranderingen in de data. Bij veranderingen evalueer je de prestaties en output van het algoritme.","text":"<p>mon-04Monitoring en beheerOntwikkelaarDataTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-04-evalueer-bij-veranderingen-in-data/#maatregel","title":"Maatregel","text":"<p>Monitor regelmatig op veranderingen in de inputdata. Bij geconstateerde veranderingen evalueer je de prestaties en de output van het algoritme.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-04-evalueer-bij-veranderingen-in-data/#toelichting","title":"Toelichting","text":"<p>De inputdata kan voortdurend veranderen.  Dat kan komen doordat de context waarin het algoritme wordt gebruikt verandert, of door een technische fout wanneer de data bijvoorbeeld niet goed is ingelezen of aangeleverd.  Het te laat opmerken van zo'n verandering kan grote gevolgen hebben.  Daarom is het belangrijk om regelmatig te controleren en evalueren of:</p> <ul> <li>de data van voldoende kwaliteit is voor de beoogde toepassing</li> <li>of het algoritme nog presteert in lijn met de vastgestelde doelen</li> <li>de gegevens op de juiste en volledige manier worden verwerkt. </li> </ul> <p>Zeker wanneer er gebruikt wordt gemaakt van informatie van derden, is het belangrijk om regelmatig te controleren of er veranderingen in de data zijn. Goede monitoring op datakwaliteit zorgt ervoor dat je voldoende controle hebt over de kwaliteit van de data, zelfs als je hiervoor afhankelijk bent van andere partijen. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-04-evalueer-bij-veranderingen-in-data/#risico","title":"Risico","text":"<p>Door veranderingen in de data presteert het model niet meer zoals verwacht.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-04-evalueer-bij-veranderingen-in-data/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Auditdienst Rijk, DM.8</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 1.02, 1.08, 2.06, 2.08, 2.13 </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-04-evalueer-bij-veranderingen-in-data/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/","title":"Meten, monitoren en rapporteren van milieu-impact van algoritmes","text":"<p>mon-05OntwerpMonitoring en beheerOntwikkelaarBeleid en adviesProjectleiderDuurzaamheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/#maatregel","title":"Maatregel","text":"<p>Inventariseer en monitor de milieu-impact van algoritmes (bijvoorbeeld door het doen van een impact-assessment), zowel tijdens ontwerp als bij het gebruik, en rapporteer deze om duurzame keuzes mogelijk te maken.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/#toelichting","title":"Toelichting","text":"<p>Tref bijvoorbeeld de volgende maatregelen, wanneer je de milieu-impact van algoritmes gaat inventariseren of monitoren:</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/#digital-product-passports","title":"Digital Product Passports","text":"<p>De milieu-impact van algoritmes kan worden gemeten en geoptimaliseerd door een Digital Product Passport (DPP) te overwegen. DPP's bieden een platform voor duurzame rapportage door middel van real-time informatie over onder andere CO\u2082-uitstoot, herkomst en energiegebruik, wat kan helpen om de ecologische voetafdruk van een algoritme transparant te maken. Door deze gegevens structureel te verzamelen en te delen, kunnen gebruikers en bedrijven inzicht krijgen in de duurzaamheidsprestaties. De milieu-impact van verschillende algoritmes/modellen kan een rol spelen bij het kiezen van een model in de ontwerpfase. Ook kan het ervoor zorgen dat je later kiest om een ander model te gebruiken, of het gebruik van een model of systeem zelfs te be\u00ebindigen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/#milieu-impact-assessments","title":"Milieu-impact assessments","text":"<p>Wanneer de milieu-impact (in bepaalde mate) inzichtelijk is, kan er een milieu-impact assessment worden gedaan. Ga na of je organisatie die een heeft of overweeg deze te ontwikkelen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/#periodieke-monitoring","title":"Periodieke monitoring","text":"<p>Probeer ook periodieke monitoringsrapporten op te stellen waarin de milieu-impact van algoritmes wordt bijgehouden. Hiermee vergroot je de duurzaamheid door tijdig verbeteringen te signaleren en door te voeren. Hierbij kan ook een onderscheid worden gemaakt in de impact tijdens de trainingsfase van het algoritme en de gebruiksfase. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/#risico","title":"Risico","text":"<p>Wanneer in de ontwerpfase niet wordt nagedacht over milieu-impact kan onbewust voor een algoritme of model worden gekozen dat meer energie verbruikt (en wellicht hogere kosten met zich mee brengt) dan een model dat misschien even goed presteert voor het gekozen doel. Zonder structurele monitoring van de milieu-impact kan de organisatie onbewust bijdragen aan een hoge CO\u2082-uitstoot en hoge energieverbruikskosten.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/#bronnen","title":"Bronnen","text":"<ul> <li>Coalitie Duurzame Digitalisering - Digital Product Passport</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk - DM.24</li> <li>Ethische richtsnoeren voor betrouwbare KI, Hoofdstuk II 1.6: Maatschappelijk en milieuwelzijn</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/","title":"Vereisten","text":"<p>Overzicht van de belangrijkste vereisten voor overheden die algoritmes of AI-systemen ontwikkelen of gebruiken. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/#wetten-en-regels","title":"Wetten en regels","text":"<p>De vereisten zijn gebaseerd op de wetten en regels voor het uitvoeren van wettelijke taken, zoals de:</p> <ul> <li>AI-verordening</li> <li>Algemene verordening gegevensbescherming (AVG)</li> <li>Algemene wet bestuursrecht (Awb)</li> <li>Algemene wet gelijke behandeling (Awgb) </li> <li>Auteurswet</li> <li>Baseline Informatiebeveiliging Overheid (BIO)</li> <li>Grondwet</li> </ul> <p>Bij elke vereiste staat de bron er duidelijk bij.</p> <p>Let op!</p> <p>Het Algoritmekader biedt een overzicht van de belangrijkste vereisten. Dit is niet volledig. Sectorspecifieke wetgeving is bijvoorbeeld niet meegenomen. Hierdoor kan het zijn dat er meer regelgeving van geldt voor jouw toepassing. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/#aantal-vereisten-verschilt-per-situatie","title":"Aantal vereisten verschilt per situatie","text":"<p>Welke vereisten gelden voor jouw organisatie, hangt af van:</p> <ul> <li>de technologie die je gebruikt: rekenregels, machinelearning of generatieve AI</li> <li>de risicoclassificatie van het algoritme dat je gebruikt</li> <li>je rol: ben je ontwikkelaar of alleen gebruiker van het algoritme?</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/#voorbeeld","title":"Voorbeeld","text":"<p>Impactvolle algoritmes en AI-systemen worden gepubliceerd in het Nederlandse algoritmeregister.</p> <p>Deze vereiste geldt alleen voor impactvolle algoritmes en hoog-risico-AI-systemen. Een niet-impactvolle rekenregel hoef je niet te registreren.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/#help-ons-deze-pagina-te-verbeteren","title":"Help ons deze pagina te verbeteren","text":"<p>Deel je idee, suggestie of opmerking via GitHub of mail ons via algoritmes@minbzk.nl.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/","title":"Personeel en gebruikers zijn voldoende AI-geletterd","text":"<p>aia-01OrganisatieverantwoordelijkhedenProjectleiderMenselijke controleGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/#vereiste","title":"Vereiste","text":"<p>Aanbieders en gebruiksverantwoordelijken van AI-systemen nemen maatregelen om, zoveel als mogelijk, te zorgen voor een toereikend niveau van AI-geletterdheid bij hun personeel en andere personen die namens hen AI-systemen exploiteren en gebruiken, en houden daarbij rekening met hun technische kennis, ervaring, onderwijs en opleiding en de context waarin de AI-systemen zullen worden gebruikt, evenals met de personen of groepen personen ten aanzien van wie de AI-systemen zullen worden gebruikt.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/#toelichting","title":"Toelichting","text":"<p>Aanbieders en gebruiksverantwoordelijken van AI-systemen nemen maatregelen om ervoor te zorgen dat hun personeel en andere betrokkenen voldoende kennis hebben van AI. Dit omvat het bevorderen van kennis over de techniek, evenals kennis over de context waarin de AI-systemen worden gebruikt en de gebruikers van deze systemen.  Daarnaast moet er worden ingezet op het delen van ervaringen, passend onderwijs en opleiding van inidividuen. Het doel is om een adequaat niveau van begrip en vaardigheden te waarborgen, wat bijdraagt aan een verantwoord gebruik van AI en het minimaliseren van risico's.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/#bronnen","title":"Bronnen","text":"<p>Artikel 4 Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAI-model voor algemene doeleindenhoog risico AI-systeemverboden AIgeen hoog risico AI-systeemAanbiederGebruiksverantwoordelijke</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/#risico","title":"Risico","text":"<p>Onvoldoende AI-geletterdheid kan leiden tot misbruik of onjuist gebruik van AI-systemen en tot situaties waarin AI-systemen verkeerd worden ingezet, onbedoeld gebruikt worden voor taken waar ze niet geschikt voor zijn, of dat de veiligheid en effectiviteit van de systemen in het gedrang komt. Dit kan leiden tot ineffici\u00ebntie, fouten, en mogelijk schade aan organisaties, gebruikers of betrokkenen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/","title":"Verboden AI-systemen mogen niet worden gebruikt.","text":"<p>aia-01OrganisatieverantwoordelijkhedenProbleemanalyseProjectleiderGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/#vereiste","title":"Vereiste","text":"<p>Verboden AI-systemen mogen niet worden gebruikt.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/#toelichting","title":"Toelichting","text":"<p>Afgezien van de vele nuttige toepassingen van AI kan zij ook worden misbruikt en nieuwe en krachtige instrumenten voor manipulatie, uitbuiting en sociale controle opleveren.  Dergelijke praktijken zijn bijzonder schadelijk en abusief en moeten worden verboden omdat zij in strijd zijn met de waarden van de Unie, namelijk eerbied voor de menselijke waardigheid, vrijheid, gelijkheid, democratie en de rechtsstaat, en met de grondrechten van de Unie die zijn vastgelegd in het Handvest, waaronder het recht op non-discriminatie, gegevensbescherming en privacy, en de rechten van het kind.</p> <p>In de volgende gevallen gaat het om een verboden toepassing op grond van de AI-Verordening: - gebruik kan gaan maken van subliminale technieken om mensen onbewust of bewust kunnen manipuleren, waardoor ze beslissingen nemen die ze anders niet zouden hebben genomen? - gebruik kan gaan maken van kwetsbaarheden van individuen of specifieke groepen, zoals leeftijd, handicaps of sociale/economische omstandigheden, om het gedrag van die personen aanzienlijk te verstoren, wat kan leiden tot aanzienlijke schade bij henzelf of anderen? - gebruikt kan worden om natuurlijke personen of groepen gedurende een periode te evalueren of te classificeren op basis van hun sociale gedrag of afgeleide persoonlijke kenmerken? - gebruikt kan worden voor risicobeoordelingen van natuurlijke personen om het risico op crimineel gedrag te voorspellen, gebaseerd op profilering of persoonlijkheidskenmerken? (Dit geldt niet voor AI-systemen die worden gebruikt om menselijke beoordelingen te ondersteunen, gebaseerd op objectieve en verifieerbare feiten die rechtstreeks verband houden met criminele activiteiten) - gebruikt kan worden om databanken voor gezichtsherkenning aan te leggen of aan te vullen door willekeurige gezichtsafbeeldingen van internet of CCTV-beelden te scrapen? - gebruikt kan worden om emoties van een persoon op de werkplek of in het onderwijs af te leiden? (Dit is niet van toepassing als het gebruik van het AI-systeem is bedoeld voor medische- of veiligheidsdoeleinden) - gebruikt kan worden om natuurlijke personen individueel in categorie\u00ebn in te delen op basis van biometrische gegevens om ras, politieke opvattingen, lidmaatschap van een vakbond, religieuze of levensbeschouwelijke overtuigingen, seksleven of seksuele geaardheid af te leiden? (Dit verbod geldt niet voor het labelen of filteren van rechtmatig verkregen biometrische datasets, zoals afbeeldingen, op basis van biometrische gegevens, of voor categorisering van biometrische gegevens op het gebied van rechtshandhaving) - gebruikt kan worden als een biometrisch systeem in de publieke ruimte voor identificatie op afstand in real-time, met het oog op de rechtshandhaving?</p> <p>Er zijn een tweetal uitzonderingen voor het inzetten van verbonden AI-systemen. Deze zijn: - Er is sprake van een rechtshandhavingsactiviteit i.v.m. een specifiek misdrijf (terrorisme, mensenhandel, seksuele uitbuiting van kinderen en materiaal over seksueel misbruik van kinderen, illegale handel in verdovende middelen en psychotrope stoffen, illegale handel in wapens, munitie en explosieven, moord, zware mishandeling, illegale handel in menselijke organen en weefsels, illegale handel in nucleaire en radioactieve stoffen, ontvoering, wederrechtelijke vrijheidsberoving en gijzeling, misdrijven die onder de rechtsmacht van het Internationaal Strafhof vallen, kaping van vliegtuigen/schepen, verkrachting, milieucriminaliteit, georganiseerde of gewapende diefstal, sabotage, deelneming aan een criminele organisatie die betrokken is bij een of meer van de bovengenoemde misdrijven). - Er is sprake van gerichte opsporing van specifieke slachtoffers, ontvoering, mensenhandel en seksuele uitbuiting van mensen, vermiste personen; of het voorkomen van bedreigingen voor het leven of de fysieke veiligheid van personen of het reageren op de huidige of voorzienbare dreiging van een terreuraanslag.</p> <p>Bepaal in een vroege fase en bij het onderbouwen van het gebruik van een AI-systeem of de beoogde toepassing is toegestaan. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/#bronnen","title":"Bronnen","text":"<p>Artikel 5 Verordening Artifici\u00eble Intelligentie.</p> <p>Overweging 29 - 44 AI-Verordening.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemverboden AIAanbiederGebruiksverantwoordelijke</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/#risico","title":"Risico","text":"<p>Er ontstaat een onrechtmatige situatie voor een organisatie als deze AI inzet, die verboden is. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/","title":"Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd","text":"<p>aia-02OntwerpProjectleiderGovernanceTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/#vereiste","title":"Vereiste","text":"<p>Een aanbieder die van mening is dat een in bijlage III bedoeld AI-systeem geen hoog risico inhoudt, documenteert zijn beoordeling voordat dat systeem in de handel wordt gebracht of in gebruik wordt gesteld. Die aanbieder is onderworpen aan de registratieverplichting van artikel 49, lid 2 AI-verordening. Op verzoek van de nationale bevoegde autoriteiten verstrekt de aanbieder de documentatie van de beoordeling.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/#toelichting","title":"Toelichting","text":"<p>Een aanbieder die oordeelt dat een AI-systeem niet valt onder hoog-risico zoals gefedinieerd in bijlage III van de AI-verordening, documenteert deze beoordeling voorafgaand aan het in de handel brengen of in gebruik nemen van het systeem. Op verzoek van de nationale autoriteiten verstrekt de aanbieder de documentatie van de beoordeling. De aanbieder of in voorkomend geval de gemachtigd registreert zichzelf en het betreffende AI-systeem in de EU-databank (artikel 71 AI-verordening). AI-systemen met een hoog risico als bedoeld in punt 2 van bijlage III (kritieke infrastructuur) worden op nationaal niveau geregistreerd.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 6(4) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 49(2) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 71 Verordening Artifici\u00eble Intelligentie</li> <li>Bijlage III Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/#risico","title":"Risico","text":"<p>Gebrek aan transparantie en verantwoording bij risicobeoordeling kan leiden tot onrechtmatig in de markt brengen en onrechtmatig gebruik van risicovolle AI-systemen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/","title":"Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem","text":"<p>aia-03OrganisatieverantwoordelijkhedenProjectleiderGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/#vereiste","title":"Vereiste","text":"<p>Voor AI-systemen met een hoog risico wordt een systeem voor risicobeheer vastgesteld, uitgevoerd, gedocumenteerd en in stand gehouden.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/#toelichting","title":"Toelichting","text":"<p>Het systeem voor risicobeheer moet bestaan uit een tijdens de gehele levensduur van een AI-systeem met een hoog risico doorlopend en gepland iteratief proces. Dit proces moet gericht zijn op het vaststellen en beperken van de relevante risico\u2019s van AI-systemen voor de gezondheid, veiligheid en grondrechten. Het systeem voor risicobeheer moet periodiek worden ge\u00ebvalueerd en geactualiseerd om de blijvende doeltreffendheid ervan te waarborgen, alsook de motivering en de documentatie van eventuele significante besluiten en maatregelen die op grond van de AI-verordening zijn genomen.</p> <p>Dit proces moet ervoor zorgen dat de aanbieder de risico\u2019s of negatieve effecten vaststelt en risicobeperkende maatregelen uitvoert voor de bekende en de redelijkerwijs te voorziene risico\u2019s van AI-systemen voor de gezondheid, veiligheid en grondrechten. Hierin moeten ook maatregelen zitten voor redelijkerwijs te voorzien misbruik, met inbegrip van de mogelijke risico\u2019s die voortvloeien uit de wisselwerking tussen het AI-systeem en de omgeving waarin het werkt. Het systeem voor risicobeheer moet de passendste risicobeheersmaatregelen vaststellen. Bij het vaststellen van de passendste risicobeheersmaatregelen moet de aanbieder de gemaakte keuzes documenteren en toelichten en, in voorkomend geval, deskundigen en externe belanghebbenden betrekken. Bij het vaststellen van het redelijkerwijs te voorzien misbruik van AI-systemen met een hoog risico moet de aanbieder aandacht hebben voor het gebruik van AI-systemen waarvan, hoewel zij niet rechtstreeks onder het beoogde doel vallen en niet in de gebruiksinstructies worden vermeld, mag worden verwacht dat zij kunnen voortvloeien uit gemakkelijk voorspelbaar menselijk gedrag.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/#bronnen","title":"Bronnen","text":"<p>Artikel 9(1) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/#risico","title":"Risico","text":"<p>Het ontbreken van risicobeheer kan leiden tot schade aan gebruikers of derden en wettelijke aansprakelijkheid voor de aanbieder.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/","title":"Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen","text":"<p>aia-04OntwerpMonitoring en beheerProjectleiderBeleid en adviesFundamentele rechtenBias en non discriminatie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/#vereiste","title":"Vereiste","text":"<p>Bij het doorlopen, periodieke systematische toetsing en actualisatie van het risicosysteem nemen aanbieders in overweging of het beoogde doel van het AI-systeem negatieve effecten zal hebben op personen jonger dan 18 jaar of andere kwetsbare groepen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/#toelichting","title":"Toelichting","text":"<p>Bij de uitvoering van het in de leden 1 tot en met 7 van art. 9 AI-Verordening bedoelde systeem voor risicobeheer houden aanbieders rekening met de vraag of het beoogde doel van het AI-systeem met een hoog risico waarschijnlijk negatieve gevolgen zal hebben voor personen jonger dan 18 jaar en, in voorkomend geval, voor andere groepen kwetsbare personen. Er moet een grondige risicoanalyse plaatsvinden en worden vertaald naar mitigerende maatregelen om het risico te elimineren of te mitigeren.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/#bronnen","title":"Bronnen","text":"<p>Artikel 9(9) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/#risico","title":"Risico","text":"<p>Niet adequaat adresseren van risico's voor jongeren en kwetsbare groepen kan leiden tot ernstige ethische en maatschappelijke schade.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/","title":"Datasets voor hoog-risico-AI-systemen voldoen aan kwaliteitscriteria","text":"<p>aia-05Dataverkenning en datapreparatieVerificatie en validatieProjectleiderOntwikkelaarData</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/#vereiste","title":"Vereiste","text":"<p>AI-systemen met een hoog risico die technieken gebruiken die het trainen van AI-modellen met data omvatten, worden ontwikkeld op basis van datasets voor training, validatie en tests die voldoen aan de kwaliteitscriteria telkens wanneer dergelijke datasets worden gebruikt.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/#toelichting","title":"Toelichting","text":"<p>AI-systemen met een hoog risico die data gebruiken voor het trainen van AI-modellen, moeten gebaseerd zijn op datasets die voldoen aan specifieke kwaliteitscriteria. Deze criteria zorgen ervoor dat de data geschikt zijn voor training, validatie en tests, wat de betrouwbaarheid en nauwkeurigheid van het AI-systeem waarborgt.</p> <p>Deze vereiste houdt in dat de gebruikte datasets onder meer moeten voldoen aan:</p> <ul> <li>datasets voor training, validatie en tests worden onderworpen aan praktijken op het gebied van databeheer die stroken met het beoogde doel van het AI-systeem met een hoog risico. Dit heeft in het bijzonder betrekking op relevante ontwerpkeuzes, processen voor dataverzameling, verwerkingsactiviteiten voor datavoorbereiding, het opstellen van aannames met name betrekking tot de informatie die de data moeten meten en vertegenwoordigen, beschikbaarheid, kwantiteit en geschiktheid van de datasets en een beoordeling op mogelijke vooringenomenheid en passende maatregelen om deze vooringenomenheid op te sporen, te voorkomen en te beperken. </li> <li>datasets voor training, validatie en tests zijn relevant, voldoende representatief en zoveel mogelijk foutenvrij en volledig met het oog op het beoogde doel.</li> <li>Er wordt rekening gehouden met de eigenschappen of elementen die specifiek zijn voor een bepaalde geografische, contextuele, functionele of gedragsomgeving waarin het AI-systeem wordt gebruikt.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/#bronnen","title":"Bronnen","text":"<p>Artikel 10(1) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/#risico","title":"Risico","text":"<p>Gebruik van laagkwalitatieve of bevooroordeelde datasets kan leiden tot onbetrouwbare en oneerlijke AI-besluitvorming. Onvoldoende kwaliteitsborging van testdata kan leiden tot vertekende resultaten en gebrekkige prestaties van het AI-systeem bij gebruik in de praktijk.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/","title":"Hoog-risico-AI-systemen zijn voorzien van voldoende technische documentatie.","text":"<p>aia-06Dataverkenning en datapreparatieOntwikkelenVerificatie en validatieProjectleiderOntwikkelaarTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/#vereiste","title":"Vereiste","text":"<p>Hoog-risico-AI-systemen zijn voorzien van voldoende technische documentatie.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/#toelichting","title":"Toelichting","text":"<p>De technische documentatie van een AI-systeem met een hoog risico wordt voorafgaand aan het in de handel brengen of in gebruik nemen opgesteld en regelmatig bijgewerkt.</p> <p>Deze documentatie moet duidelijk aantonen dat het systeem voldoet aan de vereisten van AI-Verordening (afdeling 2), zodat nationale autoriteiten en aangemelde instanties de naleving kunnen beoordelen. Daarvoor moet de informatie op een heldere en begrijpelijke wijze zijn opgesteld. </p> <p>De documentatie bevat ten minste de elementen zoals uiteengezet in bijlage IV AI-Verordening:</p> <ol> <li>Een algemene beschrijving van het AI-syseem.</li> <li>Een gedetailleerde beschrijving van de elementen van het AI-systeem en het proces voor de ontwikkeling ervan.</li> <li>Gedetailleerde informatie over de monitoring, werking en controle van het AI-systeem.</li> <li>Een beschrijving van de geschiktheid van de prestatiestatistieken.</li> <li>Een gedetailleerde beschrijving van het systeem voor risicobeheer overeenkomstig artikel 9 van de AI verordening.</li> <li>Een beschrijving van de wijzigingen die tijdens de levensduur worden aangebracht.</li> <li>Een lijst van normen die worden toegepast.</li> <li>Een exemplaar van de EU-conformiteitsverklaring.</li> <li>Een gedetailleerde beschrijving voor evaluatie van prestaties nadat het systeem in handel is gebracht, in overeenstemming met artikel 72 van de AI-verordening.</li> </ol> <p>De documentatie kan opgevraagd worden door een bevoegde autoriteit met een met redenen omkleed verzoek, zoals toegelicht in artikel 21 van de AI-verordening.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 11 Verordening Artifici\u00eble Intelligentie</li> <li>Bijlage IV Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/#risico","title":"Risico","text":"<p>Het ontbreken van de benodigde informatie over de algoritmische toepassing of AI-systeem kan ertoe leiden dat de technische functionering onduidelijk is. Dat kan tot problemen leiden bij de verantwoording, controle, beheer en conformiteit met regelgeving.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/#voorbeeld","title":"Voorbeeld","text":"<ul> <li>Gemeente Amsterdam - Onderzoekswaardigheid Algoritme \u2018Slimme check\u2019. (Een tool die de medewerkers helpt om te bepalen of een aanvraag levensonderhoud onderzoekswaardig is, niet meer in gebruik!): Technische documentatie.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/","title":"Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.","text":"<p>aia-07OntwikkelenMonitoring en beheerOntwikkelaarProjectleiderTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/#vereiste","title":"Vereiste","text":"<p>Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/#toelichting","title":"Toelichting","text":"<p>AI-systemen met een hoog risico zijn ontworpen met functionaliteiten die gebeurtenissen gedurende hun levenscyclus automatisch registreren. Dit wordt vaak aangeduid als \"logs\".</p> <p>Deze logs bieden een traceerbaarheidsmechanisme waarmee gebruiksverantwoordelijken en autoriteiten incidenten en fouten kunnen analyseren, naleving kunnen controleren en mogelijke risico's kunnen identificeren en aanpakken.</p> <p>Het doel van deze registratie is om de transparantie en verantwoordingsplicht van AI-systemen te vergroten, waardoor het beheer van risico's en incidenten verbetert. Voor AI-systemen met een hoog-risico voorziet de loggingcapaciteit ten minste in: </p> <ol> <li>de registratie van de duur van elk gebruik van het systeem; </li> <li>de referentiedatabank aan de hand waarvan de inputdata zijn gecontroleerd door het systeem; </li> <li>de inputdata ten aanzien waarvan de zoekopdracht een match heeft opgeleverd; </li> <li>de identificatie van natuurlijke personen die betrokken zijn bij de verificatie van de resultaten. Specifiek voor gebruiksverantwoordelijken</li> </ol> <p>Voor AI-systemen die door bestuursorganen worden gebruikt of AI-systmen die persoonsgegevens verwerken leveren de BIO en AVG vergelijkbare verplichingen op die ook van toepassing zijn op AI-systemen die niet gezien worden als een AI-systeem met hoog risico. Daarbij komen nog verplichtingen om de logs doorlopend of periodiek te monitoren op incidenten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 12 Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 26(6) Verordening Artifici\u00eble Intelligentie, zie ook deze vereiste over logging door gebruiksverantwoordelijke.</li> <li>Hoofdstuk 12.4 Baseline Informatiebeveiliging Overheid </li> <li>Artikel 5 en 32 Algemene Verordening Gegevensbescherming</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenhoog risico AI-systeemAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/#risico","title":"Risico","text":"<p>Ontbreken van automatische logregistratie kan leiden tot een gebrek aan transparantie en traceerbaarheid van het AI-systeem, wat het vermogen om verantwoordelijkheid te nemen en eventuele problemen aan te pakken belemmert.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/","title":"Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.","text":"<p>aia-08OntwerpOntwikkelenMonitoring en beheerProjectleiderOntwikkelaarBeleid en adviesTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/#vereiste","title":"Vereiste","text":"<p>Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/#toelichting","title":"Toelichting","text":"<p>AI-systemen met een hoog risico worden ontworpen en ontwikkeld met een hoge mate van transparantie, zodat gebruikers de output van het systeem kunnen begrijpen en correct kunnen gebruiken. </p> <p>Dit zorgt ervoor dat de aanbieders en gebruikers kunnen voldoen aan de verplichtingen zoals uiteengezet in de relevante regelgeving, waardoor de betrouwbaarheid en verantwoordelijkheid van het gebruik van deze systemen worden verzekerd. </p> <p>In artikel 13 lid 3 is een overzicht gegeven van de informatie die gebruikersinstructies tenminste moeten bevatten. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/#bronnen","title":"Bronnen","text":"<p>Artikel 13(1) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/#risico","title":"Risico","text":"<p>Onvoldoende transparantie kan leiden tot een gebrek aan begrip over hoe het AI-systeem functioneert, wat de effectiviteit van de inzet ervan kan belemmeren en de naleving van wettelijke verplichtingen in gevaar kan brengen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/","title":"Hoog-risico-AI-systemen staan onder menselijk toezicht.","text":"<p>aia-09OntwerpOntwikkelenMonitoring en beheerProjectleiderMenselijke controle</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/#vereiste","title":"Vereiste","text":"<p>Hoog-risico-AI-systemen staan onder menselijk toezicht. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/#toelichting","title":"Toelichting","text":"<p>AI-systemen met een hoog risico worden zodanig ontworpen en ontwikkeld, met inbegrip van passende mens-machine-interface-hulpmiddelen, dat hierop tijdens de periode dat zij worden gebruikt, op doeltreffende wijze toezicht kan worden uitgeoefend door natuurlijke personen.</p> <p>Het menselijk toezicht is gericht op het voorkomen of beperken van de risico\u2019s voor de gezondheid, veiligheid of grondrechten die zich kunnen voordoen wanneer een AI-systeem met een hoog risico wordt gebruikt in overeenstemming met het beoogde doel ervan of in een situatie van redelijkerwijs te voorzien misbruik, met name wanneer dergelijke risico\u2019s blijven bestaan ondanks de toepassing van andere eisen van deze afdeling.</p> <p>De te treffen toezichtmaatregelen staan in verhouding met de risico's, de mate van autonomie en de gebruikscontext van het AI-systeem met een hoog risico. Hierbij kan het gaan om:</p> <ol> <li>door de aanbieder bepaalde maatregelen die waar technisch haalbaar in het AI-systeem met een hoog risico worden ingebouwd voordat dit systeem in de handel wordt gebracht of in gebruik wordt gesteld;</li> <li>door de aanbieder bepaalde maatregelen voordat het AI-systeem met een hoog risico in de handel wordt gebracht of in gebruik wordt gesteld en die passend zijn om door de gebruiksverantwoordelijke te worden uitgevoerd.</li> </ol> <p>De natuurlijke personen die verantwoordelijk zijn voor het menselijk toezicht, moeten in staat worden gesteld om waar passend en in verhouding tot de omstandigheden het volgende te kunnen doen:</p> <ol> <li>Goed kunnen begrijpen van de relevante capaciteiten en beperkingen van het AI-systeem met een hoog risico. Met het oog op het opsporen en aanpakken van onregelmatigheden, storingen en onverwachte prestaties moet de werking van het AI-systeem goed kunnen worden begrepen;</li> <li>Bewust blijven van de mogelijke neiging om automatisch of te veel te vertrouwen op de output van een AI-systeem met hoog risico (automation bias). Dit geldt in het bijzonder voor het gebruik van een hoog risico AI-systeem dat wordt gebruikt om informatie of aanbevelingen te versterkken voor beslisisngen die door natuurlijke personen moeten worden genomen;</li> <li>De output juist kunnen interpreteren, bijvoorbeeld met behulp van de juiste hulpmiddelen en methoden voor interpretatie;</li> <li>In alle specifieke situaties kunnen besluiten om het hoog risico AI-systeem niet te gebruiken of de output op een andere wijze te negeren, door een andere beslissing te vervangen of terug te draaien;</li> <li>ingrijpen in de werking van het hoog risico AI-systeem of het systeem onderbreken door middel van een stopknop of een vergelijkbare procedure waarmee het systeem op een veilige wijze kan worden stopgezet.</li> </ol> <p>In het geval van een hoog risico systeem als bedoeld in bijlage III, punt 1, a  (systemen voor biometrische identificatie op afstand) geldt het vereiste dat twee natuurlijke personen met de nodige bekwaamheid, opleiding en bevoegdheid apart de indentificatie van het systeem verifici\u00ebren en bevestigen, tenzij het wordt gebruikt voor rechtshandhaving, migratie, grenstoezicht of asiel, in gevallen waarin het Unierecht of het nationale recht de toepassing van dit vereiste onevenredig acht.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/#bronnen","title":"Bronnen","text":"<p>Artikel 14 verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/#risico","title":"Risico","text":"<p>Ontbreken van betekenisvol menselijk toezicht kan leiden tot gebrek aan controle en begrip over het functioneren van het AI-systeem, wat kan resulteren in ongewenste of onvoorspelbare uitkomsten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/","title":"Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.","text":"<p>aia-10OntwerpOntwikkelenMonitoring en beheerProjectleiderBeleid en adviesOntwikkelaarTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/#vereiste","title":"Vereiste","text":"<p>Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/#toelichting","title":"Toelichting","text":"<p>AI-systemen met een hoog risico worden zorgvuldig ontworpen en ontwikkeld om een hoog niveau van nauwkeurigheid, robuustheid en cyberbeveiliging te bieden.</p> <p>Dit garandeert consistente prestaties gedurende hun levensduur en minimaliseert risico's met betrekking tot deze aspecten, waardoor de betrouwbaarheid en veiligheid van het systeem worden gewaarborgd.</p> <p>Technische robuustheid is een essenti\u00eble eis voor AI-systemen met een hoog risico. Deze systemen moeten bestand zijn tegen schadelijk of anderszins ongewenst gedrag dat kan voortvloeien uit de beperkingen binnen de systemen of de omgeving waarin de systemen opereren (bijvoorbeeld fouten, onregelmatigheden, onverwachte situaties).</p> <p>Er moeten technische en organisatorische maatregelen worden getroffen om de robuustheid van AI-systemen met een hoog risico te waarborgen. Een technische oplossing kan bijvoorbeeld bestaan uit mechanismen die het systeem in staat stellen zijn werking veilig te onderbreken (storingsbeveiligingsplannen) wanneer zich bepaalde anomalie\u00ebn voordoen of wanneer de werking buiten bepaalde vooraf bepaalde grenzen plaatsvindt.</p> <p>Cyberbeveiliging is cruciaal om te waarborgen dat AI-systemen bestand zijn tegen pogingen van kwaadwillige derden die gebruikmaken van de kwetsbaarheden van het systeem om het gebruik, het gedrag of de prestaties ervan te wijzigen of de veiligheidskenmerken ervan in gevaar te brengen.</p> <p>Bij cyberaanvallen tegen AI-systemen kunnen AI-specifieke activa worden gebruikt, zoals trainingsdatasets (bv. datavervuiling) of getrainde modellen (bv. vijandige aanvallen of membership inference), of kwetsbaarheden in de digitale activa van het AI-systeem of de onderliggende ICT-infrastructuur worden benut.</p> <p>Om te zorgen voor een niveau van cyberbeveiliging dat aansluit op de risico\u2019s, moeten aanbieders van AI-systemen met een hoog risico passende maatregelen zoals veiligheidscontroles nemen, waarbij ook rekening wordt gehouden met de onderliggende ICT infrastructuur.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/#bronnen","title":"Bronnen","text":"<p>Artikel 15 Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/#risico","title":"Risico","text":"<p>Gebrek aan nauwkeurigheid, robuustheid of cyberbeveiliging kan leiden tot onbetrouwbare prestaties, kwetsbaarheid voor storingen en blootstelling aan beveiligingsrisico's, wat de effectiviteit en veiligheid van het AI-systeem in gevaar kan brengen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/","title":"Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteem","text":"<p>aia-11OrganisatieverantwoordelijkhedenProjectleiderBeleid en adviesGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-systemen met een hoog risico voorzien in een systeem voor kwaliteitsbeheer dat de naleving van deze verordening waarborgt. Dit systeem wordt op systematische en ordelijke wijze gedocumenteerd in de vorm van schriftelijke beleidslijnen, procedures en instructies en omvat ten minste de aspecten vermeld in artikel 17 AI-verordening.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/#toelichting","title":"Toelichting","text":"<p>Aanbieders van AI-systemen met een hoog risico moeten een kwaliteitsbeheersysteem implementeren om te garanderen dat ze voldoen aan de AI-verordening. Dit systeem omvat gedocumenteerde beleidslijnen, procedures en instructies, en behandelt beknopt de volgende aspecten:</p> <ol> <li>een strategie voor de naleving van de regelgeving, inclusief de naleving van de conformiteitsbeoordelingsprocedures en de procedures voor het beheer van de wijzigingen van het AI-systeem met een hoog risico;</li> <li>technieken, procedures en systematische maatregelen die moeten worden toegepast voor het ontwerp, de controle van het ontwerp en de verificatie van het ontwerp van het AI-systeem met een hoog risico;</li> <li>technieken, procedures en systematische maatregelen die moeten worden toegepast voor de ontwikkeling, de kwaliteitscontrole en de kwaliteitsborging van het AI-systeem met een hoog risico;</li> <li>procedures voor het inspecteren, testen en valideren die v\u00f3\u00f3r, tijdens en na de ontwikkeling van het AI-systeem met een hoog risico moeten worden uitgevoerd en de regelmaat waarmee zij moeten worden uitgevoerd;</li> <li>technische specificaties, met inbegrip van normen, die moeten worden toegepast en, wanneer de relevante geharmoniseerde normen niet volledig worden toegepast of geen betrekking hebben op alle relevante eisen van afdeling 2, de middelen die worden gebruikt om ervoor te zorgen dat het AI-systeem met een hoog risico in overeenstemming is met deze eisen;</li> <li>systemen en procedures voor databeheer, met inbegrip van dataverwerving, - verzameling, -analyse, -labeling, -opslag, -zuivering, -aggregatie en -behoud en datamining en eventuele andere operaties met betrekking tot de data die worden uitgevoerd voorafgaand aan en met het oog op het in de handel brengen of in gebruik stellen van AI-systemen met een hoog risico;</li> <li>het systeem voor risicobeheer zoals bedoeld in artikel 9 van de AI-verordening;</li> <li>het opzetten, toepassen en onderhouden van een systeem voor monitoring na het in de handel brengen, overeenkomstig artikel 72 AI-verordening;</li> <li>procedures in verband met het melden van een ernstig incident in overeenstemming met artikel 73 van de AI-verordening;</li> </ol>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 17 Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 16(c) Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/#risico","title":"Risico","text":"<p>Zonder toepassing van een kwaliteitsbeheersysteem kunnen risico's ontstaan voor de veiligheid, betrouwbaarheid en naleving van het AI-systeem en conformiteit met wet- en regelgeving.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/","title":"Documentatie over hoog-risico-AI-systemen wordt 10 jaar bewaard door de aanbieder","text":"<p>aia-12OntwerpMonitoring en beheerUitfaserenProjectleiderTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/#vereiste","title":"Vereiste","text":"<p>De aanbieder houdt gedurende een periode van tien jaar nadat het AI-systeem met een hoog risico in de handel is gebracht of in gebruik is gesteld de volgende elementen ter beschikking van de nationale bevoegde autoriteiten: </p> <ol> <li>de technische documentatie als bedoeld in artikel 11 van de AI-verordening; </li> <li>de documentatie betreffende het in artikel 17 bedoelde systeem voor kwaliteitsbeheer; </li> <li>in voorkomend geval de documentatie betreffende de door aangemelde instanties goedgekeurde wijzigingen; </li> <li>in voorkomend geval de besluiten en andere documenten die door de aangemelde instanties zijn afgegeven; </li> <li>de EU-conformiteitsverklaring als bedoeld in artikel 47. </li> </ol>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/#toelichting","title":"Toelichting","text":"<p>De aanbieder moet gedurende tien jaar na het op de markt brengen of in gebruik nemen van het AI-systeem met een hoog risico de vereiste documentatie beschikbaar houden voor de nationale autoriteiten. Dit houdt in dat technische documentatie, documentatie over het kwaliteitsbeheersysteem, eventuele documentatie over besluiten en goedgekeurde wijzigingen door aangemelde instanties en de EU-conformiteitsverklaring beschikbaar moet zijn. Dit waarborgt dat de autoriteiten toegang hebben tot relevante informatie voor controle en naleving van de voorschriften gedurende deze periode.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 18(1) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 16(d) Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/#risico","title":"Risico","text":"<p>Niet voldoen aan de bewaartermijn kan leiden tot juridische consequenties en kan het vermogen van de autoriteiten om toezicht te houden op de naleving van de regelgeving belemmeren.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/","title":"Logs van hoog-risico-AI-systemen worden zes maanden bewaard door de aanbieder","text":"<p>aia-13OntwerpMonitoring en beheerUitfaserenProjectleiderTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-systemen met een hoog risico bewaren de in artikel 12, lid 1, bedoelde logs die automatisch worden gegenereerd door hun AI-systemen met een hoog risico voor zover dergelijke logs onder hun controle vallen. Onverminderd het toepasselijke Unie- of nationale recht worden deze logs bewaard gedurende een periode, die passend is voor het beoogde doel van het AI-systeem met een hoog risico, van ten minste zes maanden, tenzij anders is bepaald in het Unie- of nationaal recht, met name de Uniewetgeving inzake de bescherming van persoonsgegevens.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/#toelichting","title":"Toelichting","text":"<p>Aanbieders van AI-systemen met een hoog risico moeten de automatisch gegenereerde logs bewaren volgens de voorschriften van artikel 12, lid 1, zolang deze logs onder hun controle vallen. Deze logs moeten ten minste zes maanden worden bewaard, tenzij anders bepaald door Unie- of nationale wetgeving met betrekking tot gegevensbescherming, om te voldoen aan de relevante voorschriften en verantwoordingsplicht.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 19(1) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 16(e) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 12(1) Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/#risico","title":"Risico","text":"<p>Het niet of onvoldoende bewaren van logs kan het vermogen belemmeren om incidenten te analyseren, naleving te controleren en verantwoordelijkheid vast te stellen bij mogelijke problemen met het AI-systeem.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/","title":"Hoog-risico-AI-systemen worden pas geleverd of gebruikt na een conformiteitsbeoordelingsprocedure","text":"<p>aia-14Verificatie en validatieImplementatieJuristProjectleiderGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-systemen met een hoog risico zorgen ervoor dat voor het AI-systeem met een hoog risico een conformiteitsbeoordelingsprocedure wordt uitgevoerd voordat dit systeem in de handel wordt gebracht of in gebruik wordt gesteld</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/#toelichting","title":"Toelichting","text":"<p>Conformiteitsbeoordelingen dragen bij aan het kunnen vertrouwen op de kwaliteit van producten en diensten. Aanbieders van AI-systemen met een hoog risico moeten ervoor zorgen dat de conformiteitsbeoordelingsprocedure wordt uitgevoerd v\u00f3\u00f3rdat het systeem op de markt wordt gebracht of in gebruik wordt genomen. Hiervoor moet worden beoordeeld of het ontwikkelde hoog risico AI-systeem voldoet aan de vereisten die gelden voor deze systemen. Denk hierbij aan de vereisten van risicobeheer, technische documentatie, data en datagovernance en transparantie en informatieverstrekking aan gebruiksverantwoordelijken (Afdeling 2, AI-Verordening).  </p> <p>Een conformiteitbeoordeling kan worden uitgevoerd door middel van  - een interne controle (als bedoeld in bijlage VI van de AI-verordening) - of met betrokkenheid van een aangemelde instantie voor de beoordeling van het systeem voor kwaliteitsbeheer en de technische documentatie (als bedoeld in bijlage VII van de AI-verordening). Een conformiteitsbeoordeling door een aangemelde instatie wordt ookwel een conformiteitsbeoordeling door een derden genoemd. </p> <p>Als overheidsorganisaties hoog risico AI-systemen gebruiken van aanbieders of deze zelf ontwikkelen, zullen deze systemen veelal de conformiteitsbeoordeling middels een interne controle moeten doorlopen (bijlage VI). Let op! In het geval dat een hoog risico AI-systeem door een rechtshandhavingsinstantie, immigratie- of asielautoriteit wordt ingezet, dan zal de markttoezichtautoriteit als aangemelde instantie optreden die de conformiteitsbeoordeling zal uitvoeren.  </p> <p>AI-systemen met een hoog risico die al aan een conformiteitsbeoordelingsprocedure zijn onderworpen, ondergaan een nieuwe conformiteitsbeoordelingsprocedure telkens wanneer zij substantieel zijn gewijzigd, ongeacht of het gewijzigde systeem bedoeld is om verder te worden gedistribueerd of door de huidige gebruiksverantwoordelijke gebruikt blijft worden.</p> <p></p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 16(f) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 43 Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 76 Verordening Artifici\u00eble Intelligentie</li> <li>Bijlage VI Verordening Artifici\u00eble Intelligentie</li> <li>Bijlage VII Verordening Artifici\u00eble Intelligentie</li> <li>Hoe werkt het allemaal in de praktijk voor aanbieders van AI-systemen met een hoog risico</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/#risico","title":"Risico","text":"<p>Niet naleven van deze verplichtingen kan leiden tot juridische en operationele problemen, en kan de veiligheid en betrouwbaarheid van het AI-systeem in gevaar brengen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/","title":"Hoog-risico-AI-systemen zijn voorzien van een EU-conformiteitsverklaring","text":"<p>aia-15Verificatie en validatieImplementatieJuristProjectleiderGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-systemen met een hoog risico stellen een EU-conformiteitsverklaring op.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/#toelichting","title":"Toelichting","text":"<p>Een EU-conformiteitsverklaring is een verplicht document dat een fabrikant of gemachtigde vertegenwoordiger moet ondertekenen, waarmee wordt verklaard dat het product aan de EU-eisen voldoet. De aanbieder stelt voor elk AI-systeem met een hoog risico een schriftelijke machineleesbare, fysieke of elektronisch ondertekende EU-conformiteitsverklaring op en houdt deze verklaring tot tien jaar na het in de handel brengen of het in gebruik stellen van het AI-systeem met een hoog risico ter beschikking van de nationale bevoegde autoriteiten. De conformiteitsverklaring bevat de informatie zoals genoemd in bijlage V AI-verordening. Voorbeelden hiervan zijn de naam en type van het AI-systeem, naam en adres van de aanbieder, dat de EU-conformiteitsverklaring wordt versterkt onder verantwoordelijkheid van de aanbieder en de vermelding van eventuele toegepaste relevante geharmoniseerde normen of van andere gemeenschappelijke specificaties waarop de conformiteitsverklaring betrekking heeft.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 16(g) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 47(1) Verordening Artifici\u00eble Intelligentie</li> <li>Bijlage V Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/#risico","title":"Risico","text":"<p>Niet naleven van deze verplichtingen kan leiden tot juridische en operationele problemen, en kan de veiligheid en betrouwbaarheid van het AI-systeem in gevaar brengen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/","title":"Hoog-risico-AI-systemen zijn voorzien van een CE-markering","text":"<p>aia-16ImplementatieProjectleiderTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-systemen met een hoog risico moeten een CE-markering toevoegen aan het AI-systeem met een hoog risico of, wanneer dit niet mogelijk is, op de verpakking of in de bij het product gevoegde documentatie, om aan te geven dat aan de AI-verordening is voldaan.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/#toelichting","title":"Toelichting","text":"<p>Op AI-systemen met een hoog risico moet de CE-markering worden aangebracht om aan te geven dat zij in overeenstemming zijn met de AI-verordening, zodat het vrije verkeer ervan op de interne markt mogelijk is. Op AI-systemen met een hoog risico die in een product zijn ge\u00efntegreerd moet een fysieke CE-markering worden aangebracht, die kan worden aangevuld met een digitale CE-markering. Voor AI-systemen met een hoog risico die alleen digitaal worden verstrekt, moet een digitale CE-markering worden gebruikt. De lidstaten mogen het in de handel brengen en het in gebruik stellen van AI-systemen met een hoog risico die aan de in de AI-verordening vastgelegde eisen voldoen en waarop de CE-markering is aangebracht, niet op ongerechtvaardigde wijze belemmeren.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 16(h) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 48 Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/#risico","title":"Risico","text":"<p>Niet naleven van deze verplichtingen kan leiden tot juridische en operationele problemen, en kan de veiligheid en betrouwbaarheid van het AI-systeem in gevaar brengen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/","title":"Hoog-risico-AI-systemen zijn geregistreerd in de EU-databank","text":"<p>aia-17ImplementatieProjectleiderGovernanceTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-systemen met een hoog risico leven de registratieverplichtingen als bedoeld in artikel 49 na, wat betekent dat voor het in de handel brengen of in bedrijf te stellen van het hoog risico AI-systeem, de aanbieder of in voorkomende gevallen de gemachtigde het systeem registreert in de EU-databank.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/#toelichting","title":"Toelichting","text":"<p>V\u00f3\u00f3r de distributie of inbedrijfstelling van een AI-systeem met een hoog risico van bijlage III, met uitzondering van specifieke gevallen zoals beschreven in punt 2 van bijlage III, is het vereist dat de aanbieder of gemachtigde zichzelf en het systeem registreert in de EU-databank zoals genoemd in art. 71 AI-verordening.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 16(i) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 49(1) Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/#risico","title":"Risico","text":"<p>Niet naleven van deze verplichtingen kan leiden tot juridische en operationele problemen, en kan de veiligheid en betrouwbaarheid van het AI-systeem in gevaar brengen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/","title":"Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in","text":"<p>aia-18OrganisatieverantwoordelijkhedenMonitoring en beheerProjectleiderMenselijke controleTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-systemen met een hoog risico die van mening zijn of redenen hebben om aan te nemen dat een door hen in de handel gebracht of in gebruik gesteld AI systeem met een hoog risico niet in overeenstemming is met de AI-verordening, nemen onmiddellijk de nodige corrigerende maatregelen om dat systeem naargelang het geval in overeenstemming te brengen, uit de handel te nemen, te deactiveren of terug te roepen. Zij stellen de distributeurs van het betrokken AI-systeem met een hoog risico en, indien van toepassing, de gebruiksverantwoordelijken, de gemachtigden en importeurs dienovereenkomstig in kennis.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/#toelichting","title":"Toelichting","text":"<p>Aanbieders van AI-systemen met een hoog risico die constateren dat hun systeem niet aan de verordening voldoet, moeten onmiddellijk corrigerende acties ondernemen, zoals het terugroepen of uit de handel nemen van het systeem. Ze moeten ook alle relevante partijen, zoals distributeurs, gebruiksverantwoordelijken en importeurs, op de hoogte stellen van deze maatregelen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 20 Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 16(j) Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/#risico","title":"Risico","text":"<p>Niet reageren op non-conformiteit kan leiden tot risico's voor gebruikers en derden. Het kan leiden tot juridische procedures en reputatieschade voor organisaties.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/","title":"Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen","text":"<p>aia-19OntwerpProjectleiderOntwikkelaarMenselijke controleTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-systemen met een hoog risico zorgen ervoor dat het AI-systeem met een hoog risico voldoet aan de toegankelijkheidseisen overeenkomstig de Richtlijnen (EU) 2016/2102 en (EU) 2019/882</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/#toelichting","title":"Toelichting","text":"<p>Aanbieders van AI-systemen met een hoog risico moeten ervoor zorgen dat hun systeem toegankelijk is volgens de EU-richtlijnen 2016/2102 en 2019/882. In het kader van Richtlijn 2016/2102 moet onder toegankelijkheid worden verstaan het geheel van principes en technieken die in acht moeten worden genomen bij het ontwerpen, bouwen, beheren en bijwerken van websites en mobiele applicaties om hen voor gebruikers toegankelijker te maken, met name voor personen met een beperking. Bijlage 1 bevat de toegankelijkheidsvoorschriften voor producten en diensten die moeten worden toegepast op hoog-risico-AI-systemen.</p> <p>Richtlijn 2019/882 strekt ertoe een bijdrage te leveren tot het goed functioneren van de interne markt middels onderlinge  aanpassing van de wettelijke en bestuursrechtelijke bepalingen van de lidstaten inzake de toegankelijkheidsvoorschriften  voor bepaalde producten en diensten, in het bijzonder door het wegwerken en voorkomen van belemmeringen voor het vrije verkeer van onder deze richtlijn vallende producten en diensten ten gevolge van uiteenlopende toegankelijkheidsvoorschriften in de lidstaten</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 16(l) Verordening Artifici\u00eble Intelligentie</li> <li>EU-richtlijn 2016/2102</li> <li>EU-richtlijn 2019/882</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/#risico","title":"Risico","text":"<p>Niet naleven van deze verplichtingen kan leiden tot juridische en operationele problemen, en kan de veiligheid en betrouwbaarheid van het AI-systeem in gevaar brengen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/","title":"Hoog-risico-AI-systemen worden gebruikt volgens de gebruiksaanwijzing","text":"<p>aia-20OrganisatieverantwoordelijkhedenImplementatieProjectleiderOntwikkelaarGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/#vereiste","title":"Vereiste","text":"<p>Gebruiksverantwoordelijken van AI-systemen met een hoog risico nemen passende technische en organisatorische maatregelen om te waarborgen dat zij dergelijke systemen gebruiken in overeenstemming met de gebruiksaanwijzingen die bij de systemen zijn gevoegd, in overeenstemming met de leden 3 en 6 van artikel 26 van de AI-verordening.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/#toelichting","title":"Toelichting","text":"<p>Gebruiksverantwoordelijken van AI-systemen met een hoog risico moeten geschikte maatregelen nemen om ervoor te zorgen dat zij deze systemen gebruiken volgens de bijgevoegde instructies. De gebruiksverantwoordelijke zorgt ervoor dat de inputdata relevant en voldoende representatief zijn voor het beoogde doel van het AI-systeem met een hoog risico, voor zover hij daar controle over heeft.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/#bronnen","title":"Bronnen","text":"<p>Artikel 26(1) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenGebruiksverantwoordelijke</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/#risico","title":"Risico","text":"<p>Het niet naleven van deze maatregelen kan leiden tot onjuist gebruik van de AI-systemen, wat de effectiviteit en veiligheid ervan kan verminderen, en kan resulteren in risico's voor gebruikers en derden.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/","title":"Menselijke controle van hoog-risico-AI-systemen wordt uitgevoerd door mensen met voldoende kennis en mogelijkheden","text":"<p>aia-21OrganisatieverantwoordelijkhedenProjectleiderGovernanceMenselijke controle</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/#vereiste","title":"Vereiste","text":"<p>Gebruiksverantwoordelijken dragen het menselijk toezicht over een hoog risico AI-systeem op aan natuurlijke personen die over de nodige bekwaamheid, opleiding en autoriteit beschikken en de nodige ondersteuning krijgen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/#toelichting","title":"Toelichting","text":"<p>Het is van belang dat natuurlijke personen die het menselijk toezicht moeten uitvoeren over het AI-systeem met een hoog risico, daarvoor over de nodige bekwaamheid, opleiding en autoriteit beschikt. Daarbij kan het van belang zijn dat deze natuurlijke personen ondersteuning krijgen bij het uitvoeren van deze taak.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 26(2) Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenGebruiksverantwoordelijke</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/#risico","title":"Risico","text":"<p>Als de natuurlijke toezichthouder geen effectief toezicht kan houden op het hoog risico AI-systeem, kunnen ongewenste, negatieve effecten onstaan voor betrokkenen en de organisatie.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/","title":"De werking van hoog-risico-AI-systemen wordt gemonitord","text":"<p>aia-22Monitoring en beheerProjectleiderMenselijke controle</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/#vereiste","title":"Vereiste","text":"<p>Gebruiksverantwoordelijken monitoren de werking van het AI-systeem met een hoog risico op basis van de gebruiksaanwijzingen en stellen in voorkomend geval de aanbieders in kennis overeenkomstig artikel 72 AI Verordening</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/#toelichting","title":"Toelichting","text":"<p>Gebruiksverantwoordelijken moeten de werking van hoog risico AI-systemen monitoren. Dit is van belang om passende maatregelen te kunnen treffen als het systeem onbedoeld anders gaat functioneren.</p> <p>Wanneer gebruiksverantwoordelijken redenen hebben om aan te nemen dat het gebruik overeenkomstig de gebruiksaanwijzingen ertoe kan leiden dat dat AI-systeem een risico vormt in de zin van artikel 79, lid 1, stellen zij de aanbieder of distributeur en de betreffende markttoezichtautoriteit hiervan zonder onnodige vertraging in kennis en onderbreken zij het gebruik van dat systeem. Wanneer gebruiksverantwoordelijke een ernstig incident vaststellen, stellen zij ook onmiddellijk eerst de aanbieder hiervan in kennis, en vervolgens de importeur of distributeur en de betreffende markttoezichtautoriteiten van dat incident. Wanneer de gebruiksverantwoordelijke de aanbieder niet kan bereiken, is artikel 73 mutatis mutandis van toepassing. Deze verplichting geldt niet voor gevoelige operationele gegevens van gebruiksverantwoordelijke van AI-systemen die de hoedanigheid van rechtshandhavingsinstanties hebben.</p> <p>Voor gebruiksverantwoordelijke die in de hoedanigheid van financi\u00eble instellingen onderworpen zijn aan eisen met betrekking tot hun interne governance, regelingen of processen uit hoofde van het Unierecht inzake financi\u00eble diensten, wordt de monitoringsverplichting overeenkomstig de eerste alinea geacht te zijn vervuld door te voldoen aan de regels inzake interne governance, regelingen of processen en -mechanismen uit hoofde van het desbetreffende recht inzake financi\u00eble diensten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/#bronnen","title":"Bronnen","text":"<p>Artikel 26(5) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenGebruiksverantwoordelijke</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/#risico","title":"Risico","text":"<p>Zonder monitoring door gebruiksverantwoordelijken en (waar nodig) het informeren van aanbieder, distributeur of markttoezichtautoriteit, kan de foutieve werking van een hoog risico AI-systeem niet worden gesignaleerd en hersteld.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/","title":"Logs voor hoog-risico-AI-systemen worden bewaard door de gebruiksverantwoordelijke","text":"<p>aia-23OntwikkelenMonitoring en beheerProjectleiderTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/#vereiste","title":"Vereiste","text":"<p>Gebruiksverantwoordelijken van AI-systemen met een hoog risico bewaren de logs die automatisch worden gegenereerd door dat AI-systeem met een hoog risico voor zover dergelijke logs onder hun controle vallen gedurende een periode die passend is voor het beoogde doel van het AI-systeem met een hoog risico, of ten minste zes maanden, tenzij anders is bepaald in het toepasselijke Unie- of nationaal recht, meer in het bijzonder het Unierecht over de bescherming van persoonsgegevens</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/#toelichting","title":"Toelichting","text":"<p>Anders dan in artikel 16(e) AI-verordening, waar een vergelijkbare vereiste geldt voor aanbieders, gaat het hier om een vereiste specifiek voor de gebruiksverantwoordelijken. Het is van belang dat de gebruiksverantwoordelijken een zelfstandige beoordeling maakt wat moet worden gelogd en voor welke periode gezien de doelstelling van de inzet van het AI-systeem. Daarbij is het van belang om te beoordelen in hoeverre een gebruiksverantwoordelijke hier 'controle' over heeft. De gebruiksverantwoordelijke zal, al dan niet samen met de aanbieder, (technische) maatregelen moeten treffen om dit te realiseren.</p> <p>Gebruiksverantwoordelijken die in de hoedanigheid van financi\u00eble instellingen onderworpen zijn aan eisen met betrekking tot hun interne governance, regelingen of processen uit hoofde van het Unierecht inzake financi\u00eble diensten bewaren de logs als onderdeel van de documentatie die bewaard wordt krachtens het desbetreffende Unierecht inzake financi\u00eble diensten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/#bronnen","title":"Bronnen","text":"<p>Artikel 26(6) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenGebruiksverantwoordelijke</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/#risico","title":"Risico","text":"<p>Het niet of onvoldoende bewaren van logs kan het vermogen belemmeren om incidenten te analyseren, naleving te controleren en verantwoordelijkheid vast te stellen bij mogelijke problemen met het AI-systeem.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-24-informeren-werknemers/","title":"Werknemers weten dat hun organisatie een hoog-risico AI-systeem gebruikt","text":"<p>aia-24ImplementatieProjectleiderTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-24-informeren-werknemers/#vereiste","title":"Vereiste","text":"<p>Voordat een AI-systeem met een hoog risico op de werkplek in gebruik wordt gesteld of wordt gebruikt, delen gebruiksverantwoordelijken die werkgever zijn werknemersvertegenwoordigers en de betrokken werknemers mee dat zij zullen worden onderworpen aan het gebruik van het AI-systeem met een hoog risico. Deze informatie wordt, indien van toepassing, verstrekt in overeenstemming met de in het Unie- en nationaal recht vastgelegde regels en procedures en de praktijk inzake informatie van werknemers en hun vertegenwoordigers.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-24-informeren-werknemers/#toelichting","title":"Toelichting","text":"<p>Dit vereiste benadrukt het belang van het informeren van werknemersvertegenwoordigers en betrokken werknemers over de inzet van een hoog risico AI-systeem op de werkplaats. Dit dient voorafgaand aan de inzet van het systeem plaats te vinden. De gebruiksverantwoordelijke als werknemer dient hier zorg voor te dragen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-24-informeren-werknemers/#bronnen","title":"Bronnen","text":"<p>Artikel 26(7) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-24-informeren-werknemers/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenGebruiksverantwoordelijke</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-24-informeren-werknemers/#risico","title":"Risico","text":"<p>Als werknemersvertegenwoordigers en werknemers niet worden ge\u00efnformeerd over de inzet van een hoog risico AI-systeem, kunnen zij zich niet weren tegen mogelijk ongewenste en negatieve effecten van de inzet van het hoog risico AI-systeem.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/","title":"Gebruiksverantwoordelijken controleren de registratie van het hoog-risico AI-systeem in de EU-databank","text":"<p>aia-25OrganisatieverantwoordelijkhedenImplementatieMonitoring en beheerProjectleiderTransparantieGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/#vereiste","title":"Vereiste","text":"<p>Gebruiksverantwoordelijken van AI-systemen met een hoog risico die de hoedanigheid van overheidsinstanties of instellingen, organen of instanties van de Unie hebben, leven de in artikel 49 bedoelde registratieverplichtingen na. Wanneer deze gebruiksverantwoordelijke vaststellen dat het AI-systeem met een hoog risico dat zij voornemens zijn te gebruiken niet in de in artikel 71 bedoelde EU-databank is geregistreerd, gebruiken zij dat systeem niet en stellen zij de aanbieder of de distributeur daarvan in kennis.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/#toelichting","title":"Toelichting","text":"<p>Het is van belang dat gebruiksverantwoordelijken nagaan of het betreffende hoog risico AI-systeem door aanbieder is geregistreerd in de EU-databank (zoals omschreven in artikel 71 AI-verordening). Voordat het betreffende AI-systeem (bijlage III vermeld AI-systeem met een hoog risico) in gebruik te stellen of te gebruiken (met uitzondering van de in punt 2 van bijlage III vermelde AI-systemen met een hoog risico) registreren gebruiksverantwoordelijken die overheidsinstanties, instellingen, organen of instanties van de Unie, of personen die namens hen optreden, zichzelf en selecteren zij het systeem en registreren zij het gebruik ervan in de in artikel 71 bedoelde EU-databank.</p> <p>Heeft de aanbieder het betreffende hoog risico AI-systeem niet geregistreerd in de EU-Databank, dan mag het hoog risico AI-systeem niet worden gebruikt. De aanbieder of distributeur wordt door de gebruiksverantwoordelijke ge\u00efnformeerd dat het systeem niet is geregistreerd in de EU-databank.</p> <p>AI-systemen met een hoog risico als bedoeld in punt 2 van bijlage III (kritieke infrastructuur) worden op nationaal niveau geregistreerd.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 26(8) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 49 (3) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 71 Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenGebruiksverantwoordelijke</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/#risico","title":"Risico","text":"<p>Zonder registratie van het hoog risico AI-systeem en het registreren welke organisaties of personen hier gebruik van maken, is het negatieve negatieve van het mogelijk onjuist of ongewenst functioneren van het AI-systeem niet te overzien en onduidelijk welke betrokken dit raakt.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/","title":"Mensen over wie besluiten worden genomen door een hoog-risico-AI-systemen, krijgen op verzoek informatie over deze besluiten","text":"<p>aia-28OrganisatieverantwoordelijkhedenOntwerpMonitoring en beheerProjectleiderGovernanceFundamentele rechtenTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/#vereiste","title":"Vereiste","text":"<p>Elke getroffen persoon op wie een besluit van toepassing is dat door de gebruiksverantwoordelijke wordt genomen op basis van de output van een in bijlage III vermeld AI-systeem met een hoog risico, met uitzondering van systemen die in punt 2 van die bijlage zijn vermeld, en dat rechtsgevolgen heeft voor die persoon, of op deze op vergelijkbare wijze aanzienlijke invloed heeft die hij of zij als nadelige gevolgen voor zijn of haar gezondheid, veiligheid of grondrechten beschouwt, heeft het recht om van de gebruiksverantwoordelijke duidelijke, inhoudelijke toelichting te verkrijgen bij de rol van het AI-systeem in de besluitvormingsprocedure en de voornaamste elementen van het genomen besluit.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/#toelichting","title":"Toelichting","text":"<p>Getroffen personen moeten het recht hebben om uitleg te krijgen indien het besluit van een gebruiksverantwoordelijke voornamelijk is gebaseerd op de output van bepaalde AI-systemen met een hoog risico die binnen het toepassingsgebied van de AI-verordening vallen en indien dat besluit rechtsgevolgen of gelijkaardige aanzienlijke gevolgen heeft voor de gezondheid, veiligheid of grondrechten van die personen. Die uitleg moet duidelijk en zinvol zijn en moet de grondslag zijn waarop de getroffen personen zich kunnen baseren om hun rechten uit te oefenen. Het recht om uitleg te krijgen mag niet van toepassing zijn op het gebruik van AI-systemen waarvoor uitzonderingen of beperkingen voortvloeien uit het Unierecht of het nationale recht en moet alleen van toepassing zijn voor zover het Unierecht niet reeds in dit recht voorziet. Dit vereiste geldt bijvoorbeeld niet als het gaat om AI-systemen die bedoeld zijn om te worden gebruikt als veiligheidscomponent bij het beheer of de exploitatie van kritieke digitale infrastructuur, wegverkeer of bij de levering van water, gas, verwerking en electriciteit (punt 2 bij Bijlage III van AI-verordening).</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 86(1) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 26(11) Verordening Artifici\u00eble Intelligentie</li> <li>Bijlage III Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenGebruiksverantwoordelijke</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/#risico","title":"Risico","text":"<p>Als gebruiksverantwoordelijke geen duidelijke, inhoudelijke toelichting geeft over de rol van het AI-systeem in de besluitvormingsprocedure en de voornaamste elementen bij het genomen besluit, is het voor getroffen personen niet mogelijk zich te verdedigen tegen de rechtsgevolgen die hieruit voortkomen of de nadelige gevolgen voor gezondheid, veiligheid of diens grondrechten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/","title":"Hoog-risico-AI-systemen voor publieke taken worden beoordeeld op gevolgen voor grondrechten","text":"<p>aia-29OntwerpVerificatie en validatieProjectleiderBeleid en adviesFundamentele rechten</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/#vereiste","title":"Vereiste","text":"<p>Voordat een AI-systeem met een hoog risico als bedoeld in artikel 6, lid 2 AI-verordening, in gebruik wordt genomen, met uitzondering van AI-systemen met een hoog risico die bedoeld zijn om te worden gebruikt op het in punt 2 van bijlage III vermelde gebied, voeren operatoren die publiekrechtelijke instellingen zijn of particuliere entiteiten zijn die openbare diensten verlenen, en operatoren van AI-systemen met een hoog risico als bedoeld in bijlage III, punt 5, onder b) en c), een beoordeling uit van de gevolgen voor de grondrechten die het gebruik van een dergelijk systeem kan opleveren.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/#toelichting","title":"Toelichting","text":"<p>Voordat een AI-systeem met een hoog risico in gebruik wordt genomen, moeten publieke instellingen of particuliere entiteiten die openbare diensten leveren, en operators van bepaalde AI-systemen, een beoordeling uitvoeren van de impact op de grondrechten die het gebruik ervan kan hebben. Deze evaluatie is bedoeld om potenti\u00eble risico's te identificeren die kunnen voortvloeien uit het gebruik van dergelijke systemen en om passende maatregelen te nemen om deze risico's te beheersen. Het doel is om de bescherming van grondrechten te waarborgen bij het gebruik van AI-systemen met een hoog risico, met name in sectoren waar deze systemen cruciale diensten leveren aan het publiek.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 27(1) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 6.2 Verordening Artifici\u00eble Intelligentie</li> <li>Bijlage III.2 en III.5 Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenGebruiksverantwoordelijke</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/#risico","title":"Risico","text":"<p>Het niet uitvoeren van deze beoordeling kan leiden tot schendingen van de grondrechten, juridische complicaties en verlies van vertrouwen van het publiek in het gebruik van AI-systemen door overheids- en openbare dienstverlenende entiteiten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/#hulpmiddelen","title":"Hulpmiddelen","text":"HulpmiddelenImpact Assessment Mensenrechten en Algoritmes"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/","title":"AI-systemen worden zo ontworpen en gebruikt, dat mensen begrijpen wanneer zij met een AI-systeem communiceren en welke content gemaakt is door een AI-systeem","text":"<p>aia-28OntwikkelenImplementatieProjectleiderOntwikkelaarTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-systemen zorgen dat AI-sytemen zodanig worden ontworpen en ontwikkeld dat de betrokken natuurlijke personen worden ge\u00efnformeerd dat zij interacteren met een AI-systeem.  Gebruiksverantwoordelijken moeten betrokkenen informeren over de werking van het systeem en in het geval van een AI-systeem dat content gegenereert duidelijk kenbaar maken dat de content kunstmatig is gegenereerd of gemanipuleerd.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/#toelichting","title":"Toelichting","text":"<p>Dit geldt voor AI-systemen die:</p> <ul> <li>gebruikt worden voor directe interactie met natuurlijke personen (zoals chatbots). </li> <li>synthetische afbeeldingen, audio, video of tekst genereert en/of manipuleert (bijvoorbeeld deepfake).</li> <li>doen aan emotieherkenning of biometrische categorisatie.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 50 Verordening Artifici\u00eble Intelligentie</li> <li>Overweging 132 Verordening Artifici\u00eble Intelligentie</li> <li>Overweging 134 Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenhoog risico AI-systeemgeen hoog risico AI-systeemAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/#risico","title":"Risico","text":"<p>Bepaalde AI-systemen die bedoeld zijn om met natuurlijke personen te interageren of om content te genereren, kunnen specifieke risico\u2019s op imitatie of misleiding met zich meebrengen, ongeacht of zij als systeem met een hoog risico gelden. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/","title":"AI-modellen voor algemene doeleinden zijn voorzien van voldoende technische documentatie en informatie","text":"<p>aia-29OntwerpOntwikkelenMonitoring en beheerProjectleiderTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-modellen voor algemene doeleinden moeten (technische) informatie en documentatie opstellen, up-to-date houden en beschikbaar stellen voor aanbieders van AI-systemen die het AI-model voor algemene doeleinden in hun AI-systemen willen integreren.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/#toelichting","title":"Toelichting","text":"<p>Aanbieders van AI-modellen voor algemene doeleinden hebben een bijzondere rol en verantwoordelijkheid. Zij leveren modellen die de basis kunnen vormen voor weer andere systemen en algoritmen, die vaak weer door andere partijen worden aangeboden dan de ontwikkelaar van het algemene systeem. Dit vraagt om een goed inzicht in de modellen en hun capaciteiten, zowel qua integratie van de modellen in producten als qua naleving van verplichtingen.</p> <p>Er zijn daarom evenredige transparantiemaatregelen nodig, zoals het opstellen en bijwerken van documentatie en verstrekken van informatie over het AI-model voor algemeen gebruik door de aanbieders van systemen die de algemene modellen gebruiken in hun product. De aanbieder van het AI-model voor algemene doeleinden dient technische documentatie op te stellen en bij te werken om deze op verzoek te kunnen overleggen aan het AI-bureau en de nationale bevoegde autoriteiten. De minimaal in de documentatie op te nemen elementen moeten worden vastgelegd volgens bijlage XII van de AI-Verordening. Hierbij is het ook van belang dat de aanbieder van AI-modellen voor algemene doelstelling beleid opstellen voor naleving van auteursrechten en naburige rechten (artikel 4, lid 3 Richtlijn (EU) 2019/790).</p> <p>In art. 53 lid 2 wordt een uitzondering gemaakt op deze vereisten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/#bronnen","title":"Bronnen","text":"<p>Artikel 53 Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-model voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/#risico","title":"Risico","text":"<p>Het niet voldoen aan deze verplichtingen kan leiden tot juridische en ethische complicaties, inclusief schendingen van auteursrechten en gebrek aan transparantie in het gebruik van AI-modellen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/","title":"Aanbieders van AI-modellen voor algemene doeleinden met een systeemrisico treffen extra maatregelen","text":"<p>aia-30OntwikkelenVerificatie en validatieMonitoring en beheerProjectleiderOntwikkelaarTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-modellen voor algemene doeleinden met een systeemrisico moeten modelevaluatie uitvoeren overeenkomstig gestandaardiseerde protocollen en instrumenten die de stand van de techniek weerspiegelen, met inbegrip van het uitvoeren en documenteren van tests gericht op het ontdekken van kwetsbaarheden van het model om systeemrisico\u2019s in kaart te brengen en te beperken.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/#toelichting","title":"Toelichting","text":"<p>De aanbieders van AI-modellen voor algemene doeleinden die systeemrisico\u2019s inhouden, moeten, naast de verplichtingen voor aanbieders van AI-modellen voor algemene doeleinden, onderworpen worden aan verplichtingen die gericht zijn op het identificeren en beperken van die risico\u2019s en op waarborging van een passend niveau van cyberbeveiliging, ongeacht of het model een op zichzelf staand model is of ingebed in een AI-systeem of in een product. Aanbieders van AI-modellen voor algemene doeleinden met een potentieel systeemrisico moeten modelevaluaties uitvoeren. Dit omvat het testen en documenteren van het model volgens de stand van de techniek, met specifieke aandacht voor het identificeren en beperken van kwetsbaarheden. Deze maatregelen zijn bedoeld om systematische risico's te adresseren en te verminderen. Deze vereiste is een aanvulling op de genoemde verplichtingen in artikel 53 van de AI-verordening.</p> <p>Systeemrisico betekent: een risico dat specifiek is voor de capaciteiten met een grote impact van AI-modellen voor algemene doeleienden, die aanzienlijke gevolgen hebben voor de markt van de Uniek vanwege hun bereik, of vanwege feitelijke of redelijkerwijs te voorziene negatieve gevolgen voor de gezondheid, de veiligheid, de openbare veiligheid, de grondrechten of de samenleving als geheel, en dat op grote schaal in de hele waardeketen kan worden verspreid.</p> <p>Systeemrisico\u2019s nemen logischerwijs toe naargelang de capaciteiten en het bereik van een model groter zijn, kunnen zich voordoen gedurende de gehele levenscyclus van het model en worden be\u00efnvloed door elementen als misbruik van het model, de betrouwbaarheid, billijkheid, beveiliging en mate van autonomie ervan. Ook worden ze be\u00efnvloed door de toegang van het model tot instrumenten, nieuwe of gecombineerde modaliteiten, introductie- en distributiestrategie\u00ebn, en door het potentieel om waarborgen te omzeilen en andere factoren.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 55 Verordening Artifici\u00eble Intelligentie</li> <li>[Overweging 110 Verordening Artifici\u00eble Intelligentie]</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-model voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/#risico","title":"Risico","text":"<p>Niet voldoen aan deze verplichtingen kan leiden tot negatieve gevolgen voor de gezondheid, veiligheid, de openbare veiligheid, de grondrechten of de samenleving als geheel.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/","title":"Als AI-modellen voor algemene doeleinden met systeemrisico\u2019s ernstige incidenten veroorzaken, wordt dit gedocumenteerd en gerapporteerd","text":"<p>aia-31Monitoring en beheerProjectleiderGovernanceTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-modellen voor algemene doeleinden met een systeemrisico moeten relevante informatie over ernstige incidenten en mogelijke corrigerende maatregelen bijhouden, documenteren en onverwijld rapporteren aan het AI bureau en, in voorkomend geval, aan de nationale bevoegde autoriteiten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/#toelichting","title":"Toelichting","text":"<p>Aanbieders van AI-modellen voor algemene doeleinden met een systeemrisico moeten ernstige incidenten documenteren en rapporteren. Deze informatie moet onmiddellijk worden gemeld aan het AI-bureau en eventueel aan nationale autoriteiten. Dit proces is cruciaal voor het waarborgen van de veiligheid en het nemen van passende corrigerende maatregelen. Dit vereiste is een aanvulling op de in artikel 53 AI-verordening genoemde verplichtingen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/#bronnen","title":"Bronnen","text":"<p>Artikel 55(1c) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-model voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/#risico","title":"Risico","text":"<p>Niet voldoen aan deze verplichtingen kan leiden tot risico's op veiligheidsincidenten, datalekken en schade aan de betrokken partijen en het publiek.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/","title":"AI-modellen voor algemene doeleinden met systeemrisico\u2019s zijn voldoende beveiligd tegen cyberaanvallen","text":"<p>aia-32OntwikkelenMonitoring en beheerOntwikkelaarGovernanceTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-modellen voor algemene doeleinden met een systeemrisico zorgen voor een passend niveau van cyberbeveiligingsbescherming voor het AI-model voor algemene doeleinden met een systeemrisico en de fysieke infrastructuur van het model.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/#toelichting","title":"Toelichting","text":"<p>Aanbieders van AI-modellen met systeemrisico moeten zorgen voor passende cyberbeveiligingsmaatregelen. Dit omvat het beschermen van zowel het AI-model als de fysieke infrastructuur tegen potenti\u00eble cyberdreigingen. Het doel is om de integriteit en veiligheid van het model en de infrastructuur te waarborgen. Dit vereiste is een aanvulling op de in artikel 53 AI-verordening genoemde verplichtingen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/#bronnen","title":"Bronnen","text":"<p>Artikel 55(1d) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-model voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/#risico","title":"Risico","text":"<p>Niet voldoen aan deze verplichtingen kan leiden tot risico's op veiligheidsincidenten, datalekken en schade aan de betrokken partijen en het publiek.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/","title":"AI-testomgevingen die persoonsgegevens verwerken, voldoen aan strenge voorwaarden","text":"<p>aia-33OrganisatieverantwoordelijkhedenOntwikkelenDataverkenning en datapreparatieJuristOntwikkelaarProjectleiderPrivacy en gegevensbeschermingData</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/#vereiste","title":"Vereiste","text":"<p>Rechtmatig voor andere doeleinden verzamelde persoonsgegevens mogen uitsluitend in de AI-testomgeving voor regelgeving worden verwerkt ten behoeve van het ontwikkelen, trainen en testen van bepaalde AI-systemen en indien aan alle voorwaarden van art. 57 is voldaan.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/#toelichting","title":"Toelichting","text":"<p>De verwerking van persoonsgegevens voor AI-testdoeleinden is mogelijk maar het moet voldoen aan strikte voorwaarden die zijn opgenomen in artikel 57 AI-Verordening. Hierbij kan worden gedacht aan voorwaarden als het beschermen van persoonsgevens met passende technische en organisatorische maatregelen,  persoonsgegevens die in de testomgeving worden aangemaakt mogen niet buiten de testomgeving worden gedeeld en logbestanden worden bijgehouden voor de duur van de deelname aan de testomgeving. Voor toepassingen voor het verder verwerken van gegevens kan worden gedacht aan het ontwikkelen van een AI-systeem zodat een overheidsinstantie of een andere natuurlijke of rechtspersoon een aanzienlijk openbaar belang kan waarborgen, bijvoorbeeld op het gebied van kwaliteit van milieu, duurzaamheid, openbare veiligheid en gezondheid.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 57 Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-model voor algemene doeleindenAI-systeemAI-systeem voor algemene doeleindenAanbiederGebruiksverantwoordelijke</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/#risico","title":"Risico","text":"<p>Verdere verwerking van persoonsgegevens buiten een AI-testomgeving vergroot de kans op bijvoorbeeld het lekken van de persoonsgegevens, wat kan leiden tot een inbreuk op de privacyrechten van betrokken.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/","title":"Hoog-risico-AI-systemen zijn voorzien van een monitoringsysteem","text":"<p>aia-34Monitoring en beheerProjectleiderTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/#vereiste","title":"Vereiste","text":"<p>Aanbieders moeten een systeem voor monitoring na het in de handel brengen vaststellen en documenteren op een manier die evenredig is aan de aard van de AI-technologie\u00ebn en de risico\u2019s van het AI-systeem met een hoog risico.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/#toelichting","title":"Toelichting","text":"<p>Aanbieders moeten een monitoringssysteem opzetten voor het monitoren na het in de handel brengen. Dit systeem moet documenteren op een wijze die passend is bij de aard van de AI-technologie\u00ebn en de risico's van het betreffende AI-systeem met een hoog risico. Dit monitoringssysteem moet proportioneel zijn aan de complexiteit en potenti\u00eble impact van het AI-systeem.</p> <p>Het systeem voor monitoring na het in de handel brengen verzamelt, documenteert en analyseert actief en systematisch relevante data die door gebruiksverantwoordelijken kunnen zijn verstrekt of via andere bronnen kunnen zijn verzameld, over de prestaties van AI-systemen met een hoog risico gedurende hun hele levensduur. Dit stelt de aanbieder in staat na te gaan of AI-systemen blijvend voldoen aan de in hoofdstuk III, afdeling 2, van de AI-verordening vermelde voorschriften. In voorkomend geval omvat de monitoring na het in de handel brengen een analyse van de interactie met andere AI-systemen. Deze verplichting geldt niet voor gevoelige operationele gegevens van gebruiksverantwoordelijken die rechtshandhavingsinstanties zijn.</p> <p>Het systeem voor monitoring na het in de handel brengen is gebaseerd op een plan voor monitoring na het in de handel brengen. Het plan voor monitoring na het in de handel brengen maakt deel uit van de in bijlage IV bedoelde technische documentatie.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/#bronnen","title":"Bronnen","text":"<p>Artikel 72(1) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/#risico","title":"Risico","text":"<p>Zonder monitoringssysteem voor na het in handel brengen is er een risico dat verminderde pestaties van een AI-systeem met hoog risico ongedeteceerd blijven. Een aanbieder kan niet nagaan of een AI-systeem blijvend voldoet aan voorschriften.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/","title":"Ernstige incidenten door hoog-risico-AI-systemen worden gemeld aan de toezichthouder","text":"<p>aia-35OrganisatieverantwoordelijkhedenMonitoring en beheerProjectleiderGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/#vereiste","title":"Vereiste","text":"<p>Aanbieders van in de Europese Unie in de handel gebrachte AI-systemen met een hoog risico melden ernstige incidenten bij de markttoezichtautoriteiten van de lidstaten waarin dat incident heeft plaatsgevonden.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/#toelichting","title":"Toelichting","text":"<p>Aanbieders van AI-systemen met een hoog risico die binnen de EU worden verhandeld, moeten ernstige incidenten melden bij de markttoezichtautoriteiten van de lidstaten waar het incident heeft plaatsgevonden. Een 'ernstig incident' wordt in artikel 3 van de AI-verordening gedefinieerd als: een incident of gebrekkig functioneren van een AI-systeem dat direct of indirect leidt tot: </p> <ol> <li>het overlijden van een persoon of ernstige schade voor de gezondheid van een persoon;</li> <li>een ernstige en onomkeerbare verstoring van het beheer of de exploitatie van kritieke infrastructuur;</li> <li>een schending van de uit het recht van de Unie voortvloeiende verplichtingen ter bescherming van de grondrechten;</li> <li>ernstige schade aan eigendommen of het milieu.</li> </ol> <p>Dit meldingsproces is bedoeld om snel en adequaat te reageren op ernstige incidenten die zich voordoen bij het gebruik van deze AI-systemen, en om passende maatregelen te nemen ter bescherming van de consumenten en het publiek. Het doel is om de veiligheid en betrouwbaarheid van AI-systemen te waarborgen en mogelijke risico's voor gebruikers te minimaliseren.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/#bronnen","title":"Bronnen","text":"<p>Artikel 73(1) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/#risico","title":"Risico","text":"<p>Het niet melden van ernstige incidenten kan leiden tot vertraagde reactie op potenti\u00eble gevaren voor gebruikers en kan het vertrouwen in AI-systemen ondermijnen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/","title":"Klokkenluiders kunnen veilig melden dat een organisatie zich niet houdt aan de AI-verordening","text":"<p>aia-36OrganisatieverantwoordelijkhedenMonitoring en beheerProjectleiderGovernanceMenselijke controle</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/#vereiste","title":"Vereiste","text":"<p>Inbreuken op de AI verordening moeten gemeld kunnen worden en melders moeten dit op een veilige en vertrouwelijke manier kunnen doen, zoals beschreven in Richtlijn (EU) 2019/1937.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/#toelichting","title":"Toelichting","text":"<p>Personen die optreden als klokkenluiders bij inbreuken op de AI-verordening, moeten worden beschermd uit hoofde van het Unierecht. Richtlijn (EU) 2019/1937 (https://eur-lex.europa.eu/legal-content/NL/LSU/?uri=CELEX:32019L1937) van het Europees Parlement en de Raad moet daarom van toepassing zijn. De richtlijn biedt een kader voor het veilig en vertrouwelijk melden van schendingen van de verordening, terwijl het de melders (\"klokkenluiders\") beschermt tegen represailles of vervolging. Deze richtlijn bevordert transparantie en verantwoording binnen organisaties en draagt bij aan een cultuur van naleving en integriteit.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/#bronnen","title":"Bronnen","text":"<p>Artikel 87 Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAI-model voor algemene doeleindenAanbiederGebruiksverantwoordelijke</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/#risico","title":"Risico","text":"<p>Gebrek aan een veilige omgeving kan ertoe leiden dat klokkenluiders geen melding maken van inbreuk op de AI-verordening.  Dit schaadt het rapportagesysteem en heeft negatief effect op het maatschappelijk welzijn.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/","title":"Klachtrecht aanbieders verder in AI-waardeketen","text":"<p>aia-37OrganisatieverantwoordelijkhedenProjectleiderFundamentele rechten</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/#vereiste","title":"Vereiste","text":"<p>Aanbieders verder in de AI-waardeketen hebben het recht een klacht in te dienen wegens inbreuk op de AI verordening bij het AI-bureau.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/#toelichting","title":"Toelichting","text":"<p>Aanbieders verder in de AI-waardeketen hebben het recht om een klacht in te dienen bij het AI-bureau in het geval van een inbreuk op de AI-verordening. Dit biedt hen een mechanisme om actie te ondernemen bij schendingen van de regels met betrekking tot AI-modellen voor algemene doeleinden die zij ge\u00efntrigeerd hebben in AI-systemen. Het AI-bureau kan dan passende maatregelen nemen om de naleving van de verordening te handhaven en eventuele geschillen tussen aanbieders op te lossen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/#bronnen","title":"Bronnen","text":"<p>Artikel 89(2) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/#risico","title":"Risico","text":"<p>Gebrek aan klachtrecht verhindert het AI-bureau om tijdig en zorgvuldig te kunnen ingrijpen bij overtreding van de AI-verordening.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/","title":"Informatie over algoritmes wordt gedocumenteerd volgens de Archiefwet","text":"<p>arc-01UitfaserenMonitoring en beheerOntwikkelenProjectleiderOntwikkelaarTransparantieData</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/#vereiste","title":"Vereiste","text":"<p>Overheidsorganen zijn verplicht de onder hen berustende archiefbescheiden in goede, geordende en toegankelijke staat te brengen en te bewaren, alsmede zorg te dragen voor de vernietiging van de daarvoor in aanmerking komende archiefbescheiden.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/#toelichting","title":"Toelichting","text":"<p>Volgens de Archiefwet moeten overheden informatie bewaren. Op basis van deze informatie moet gereconstrueerd kunnen worden hoe besluiten, ook in de context van algoritmes, tot stand zijn gekomen. Informatie over en van algoritmes moet daarom op basis van de selectielijst bewaard en vernietigd worden.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 3 Archiefwet 1995 </li> <li>Artikel 15 lid 2 Archiefwet 1995 </li> <li>Archiefbesluit 1995</li> <li>Archiefregeling</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/#risico","title":"Risico","text":"<p>Zonder goede toepassing van de Archiefwet is het voor betrokkene(n) of derden niet mogelijk om achteraf te reconstrueren en te controleren hoe besluiten, waar algoritmes aan hebben bijgedragen, tot stand zijn gekomen. Het nalaten om archiefbescheiden na verloop van tijd te verwijderen brengt risico's met zich mee op het gebied van privacy en informatiebeveiliging.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/","title":"Auteursrechten zijn beschermd","text":"<p>aut-01Dataverkenning en datapreparatieOntwerpJuristDataGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/#vereiste","title":"Vereiste","text":"<p>Auteursrechten mogen niet geschonden worden bij het ontwikkelen en gebruiken van algoritmes.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/#toelichting","title":"Toelichting","text":"<p>Bepaalde type algoritmes worden ontwikkeld op basis van grote hoeveelheden data. Deze data wordt gebruikt voor het trainen en testen van algoritmes. Het gebruiken van deze data mag geen inbreuk maken op auteursrechten van diegene die deze rechten heeft. Ook de gegenereerde output van algoritmes mag geen inbreuk maken op deze rechten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 1 Auteurswet </li> <li>Artikel 4-9 Auteurswet</li> <li>Artikel 10 Auteurswet</li> <li>Artikel 13 Auteurswet</li> <li>Artikel 15n jo. 15o Auteurswet</li> <li>Artikel 3 en 4 van de DSM-richtlijn (EU 2019/790)</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/#risico","title":"Risico","text":"<p>Het niet voldoen aan het auteursrecht kan leiden tot onrechtmatig gebruik van auteursrechtelijk beschermde inhoud, wat kan resulteren in mogelijke juridische geschillen, boetes en schadevergoedingen voor inbreuk op het auteursrecht. Bovendien kan het niet naleven van het auteursrecht het vertrouwen van gebruikers en belanghebbenden ondermijnen, wat kan leiden tot reputatieschade en gebrek aan vertrouwen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/","title":"Persoonsgegevens worden op een rechtmatige manier verwerkt","text":"<p>avg-01ProbleemanalyseOntwerpDataverkenning en datapreparatieProjectleiderJuristPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/#vereiste","title":"Vereiste","text":"<p>De verwerking van persoonsgegevens moet rechtmatig plaatsvinden.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/#toelichting","title":"Toelichting","text":"<p>De verwerking van persoonsgegevens moet rechtmatig plaatsvinden, wat betekent dat de verwerking gebaseerd moet zijn op \u00e9\u00e9n van de wettelijke grondslagen die zijn geformuleerd in artikel 6 Algemene Verordening Gegevensbescherming. Persoonsgegevens mogen alleen worden verzameld voor specifieke, duidelijk omschreven en gerechtvaardigde doeleinden. Het is niet toegestaan om deze gegevens verder te verwerken op een manier die niet verenigbaar is met deze oorspronkelijke doeleinden.</p> <p>Bij het verwerken van persoonsgegevens ten behoeve van de ontwikkeling en gebruik van algoritmes moet worden onderzocht of dit kan worden gebaseerd op \u00e9\u00e9n van de verwerkingsgrondslagen. Het is van belang dat wordt uitgewerkt welke persoonsgegevens waarvoor worden verwerkt en op basis van welke grondslag. Hierbij kan worden gedacht aan persoonsgegevens ten behoeve van trainingsdata, voor het genereren van output of, indien (juridisch) mogelijk, voor het uitvoeren van een onderzoek naar onbewuste vooringenomenheid.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 5 lid 1 onder a en b Algemene Verordening Gegevensbescherming</li> <li>Artikel 6 lid 1 onder b Algemene Verordening Gegevensbescherming</li> <li>Artikel 6 Algemene Verordening Gegevensbescherming</li> <li>Overweging 39 en 45 Algemene Verordening Gegevensbescherming</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/#risico","title":"Risico","text":"<p>Het risico wanneer persoonsgegevens niet op een rechtmatige manier worden verwerkt (verzamelen van gegevens valt hier ook onder), is dat er niet aan de AVG wordt voldaan. Er worden dan onrechtmatig persoonsgegevens verwerkt, waarmee privacy van personen in het geding komt. Ook kan het leiden tot hoge boetes voor organisaties, en kan een datalek plaatsvinden.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/","title":"Persoonsgegevens worden zo kort mogelijk bewaard","text":"<p>avg-02OntwerpDataverkenning en datapreparatieOntwikkelenUitfaserenOntwikkelaarBeleid en adviesPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/#vereiste","title":"Vereiste","text":"<p>Persoonsgegevens moeten worden bewaard in een vorm die het mogelijk maakt om de betrokkenen niet langer te identificeren dan nodig is voor de realisering van de doeleinden waarvoor de persoonsgegevens initieel worden verwerkt.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/#toelichting","title":"Toelichting","text":"<p>Persoonsgegevens dienen toereikend en ter zake dienend te zijn en beperkt te blijven tot wat noodzakelijk is voor de doeleinden waarvoor zij worden verwerkt. Dit vereist dat ervoor wordt gezorgd dat de opslagperiode van de persoonsgegevens tot een strikt minimum wordt beperkt. Het beginsel van opslagbeperking betekent dat persoonsgegevens moeten worden bewaard in een vorm die het mogelijk maakt om de betrokkenen niet langer te identificeren dan voor de realisering van de doeleinden waarvoor de persoonsgegevens worden verwerkt.</p> <p>In de context van algoritmes is het belangrijk dat, wanneer persoonsgegevens worden verwerkt, er onderzocht wordt op welke manieren identificatie van betrokkenen tegen kan worden gegaan. Hierbij kan worden gedacht aan maatregelen als pseudonomisering en anonimisering.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/#bronnen","title":"Bronnen","text":"<p>Artikel 5 lid 1 onder de AVG</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/#risico","title":"Risico","text":"<p>Het onnodig lang bewaren van persoonsgegevens levert een onrechtmatige situatie op. De privacyrechten van betrokken worden hierdoor aangetast. Er ontstaan aanvullende risico's bij bijvoorbeeld een datalek.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/","title":"Persoonsgegevens worden zo min mogelijk verwerkt","text":"<p>avg-03OntwerpDataverkenning en datapreparatieOntwikkelenJuristOntwikkelaarPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/#vereiste","title":"Vereiste","text":"<p>De verwerking van persoonsgegevens moet minimaal worden gehouden, dat wil zeggen dat die verwerking toereikend moet zijn, ter zake dienend en beperkt tot wat noodzakelijk is voor de doeleinden waarvoor zij worden verwerkt.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/#toelichting","title":"Toelichting","text":"<p>Het is van belang dat \u00e9nkel persoonsgegevens worden verwerkt die noodzakelijk zijn gezien de doeleinden van die vewerking. Er moet een beoordeling worden gemaakt welke persoonsgegevens dit wel en eventueel niet zijn. Voor het ontwikkelen en gebruiken van algoritmes is het van belang om te beoordelen welke persoonsgegevens noodzakelijk zijn om het beoogde doel te bereiken. Afhankelijk van de toepassing vraagt dit om een intensieve toets. Er moet voor worden gezorgd dat persoonsgegevens die niet als noodzakelijk worden beschouwd, buiten de verwerking blijven. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/#bronnen","title":"Bronnen","text":"<p>Artikel 5 lid 1 onder c Algemene Verordening Gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/#risico","title":"Risico","text":"<p>Het onnodig verwerken van persoonsgegevens kan een inbreuk maken op rechten van betrokkenen, en zou kunnen leiden tot een datalek.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/","title":"Persoonsgegevens en andere data verwerken gebeurt proportioneel en subsidiair","text":"<p>avg-04OntwerpDataverkenning en datapreparatieJuristOntwikkelaarFundamentele rechtenPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/#vereiste","title":"Vereiste","text":"<p>Gegevensverwerking moet in verhouding staan tot het beoogde doel en persoonsgegevens mogen alleen verwerkt worden als er geen minder ingrijpende manier is om het doel te bereiken. Voor zover het gaat om de verwerking van persoonsgegevens moet dit vereiste aantoonbaar zijn. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/#toelichting","title":"Toelichting","text":"<p>Proportionaliteit vereist dat de impact van gegevensverwerking op de persoonlijke levenssfeer voor de toepassing van een algoritme en voor het genereren van de benodigde output in balans is met het beoogde doel. Subsidiariteit vereist dat persoonsgegevens alleen moeten worden verwerkt als dit de minst inbreukmakende manier is om het doel te bereiken.  Deze principes waarborgen dat de privacy van individuen wordt gerespecteerd en dat gegevensverwerking niet verder gaat dan noodzakelijk is voor legitieme doeleinden. Het is van belang om deze principes te hanteren om te bepalen of en in welke vorm een algoritmes moet worden toegepast en om tot een passende mate van gegevensverwerking te komen om het doel te bereiken.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 5(1)(c) Algemene Verordening Gegevensbescherming </li> <li>Overweging 170 Algemene Verordening Gegevensbescherming </li> <li>Artikel 5(4) Verdrag betreffende de Europese Unie, Maastricht, 07-02-1992 |</li> <li>Artikel 52 Handvest van de Grondrechten van de Europese Unie </li> <li>Protocol betreffende de toepassing van de beginselen van subsidiariteit en evenredigheid Verdrag betreffende de Europese Unie, Maastricht, 07-02-1992 </li> <li>Artikel 1.10, 1.13 en 1.16 Aanbestedingswet 2012 </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/#risico","title":"Risico","text":"<p>Zonder toetsing aan het proportinaliteits- en subsidiariteitsbeginsel ontstaat het risico dat er een onnodig zware en daardoor onrechtmatige inbreuk wordt gemaakt op de privacyrechten van betrokkenen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/","title":"Persoonsgegevens zijn juist en actueel","text":"<p>avg-05Dataverkenning en datapreparatieOntwikkelaarProjectleiderPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/#vereiste","title":"Vereiste","text":"<p>De te verwerken persoonsgegevens zijn juist, nauwkeurig en worden zo nodig geactualiseerd of gewist.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/#toelichting","title":"Toelichting","text":"<p>De te verwerken persoonsgegevens moeten nauwkeurig, juist en zo nodig actueel zijn. Dit betekent dat alle maatregelen moeten worden genomen om ervoor te zorgen dat onjuiste persoonsgegevens worden gerectificeerd of gewist. Dat kan betekenen dat persoonsgegevens moeten worden geactualiseerd of verbeterd. In de context van algoritmes is het van belang dat ook daar wordt onderzocht welke maatregelen nodig zijn om die juistheid toe te passen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/#bronnen","title":"Bronnen","text":"<p>Artikel 5 lid 1 sub d Algemene Verordening Gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/#risico","title":"Risico","text":"<p>Als er geen rekening wordt gehouden met de juistheid, nauwkeurigheid en volledigheid van persoonsgegevens, kunnen kwaliteit en integriteit van data niet voldoende worden gewaarborgd.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/","title":"Organisaties kunnen bewijzen dat zij persoonsgegevens op de juiste manier verwerken","text":"<p>avg-06OntwerpDataverkenning en datapreparatieJuristGovernancePrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/#vereiste","title":"Vereiste","text":"<p>De verantwoordelijken moeten bij de verwerking van persoonsgegevens door algoritmes kunnen aantonen dat de verwerkingen rechtmatig plaatsvinden. Dit betekent concreet dat de volgende punten aangetoond kunnen worden:</p> <ul> <li>Rechtmatigheid, behoorlijkheid en transparantie</li> <li>Doelbinding</li> <li>Minimale gegevensverwerking</li> <li>Juistheid</li> <li>Opslagbeperking</li> <li>Integriteit en vertrouwelijkheid</li> </ul> <p>Een aandachtpunt daarbij is dat de rechtmatigheid van de verwerking ten opzichte van andere gerelateerde wetgeving zoals de AI Act en de Algemene wet gelijke behandeling ook moeten kunnen worden aangetoond voor zover de rechtmatigheid van de verwerking onder de AVG daarvan afhankelijk is.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/#toelichting","title":"Toelichting","text":"<p>Bij het verwerken van persoonsgegevens voor algoritmes moeten de verantwoordelijkheden duidelijk beschreven en toegewezen zijn. De verwerkingsverantwoordelijke is degene die ervoor zorgt dat deze verantwoordelijkheden worden nageleefd en kan dit aantonen, wat bekend staat als de verantwoordingsplicht. Deze maatregelen zijn essentieel om de naleving van regelgeving met betrekking tot gegevensbescherming te waarborgen en het vertrouwen van gebruikers in de verwerking van hun gegevens te vergroten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 5 lid 2 Algemene Verordening Gegevensbescherming</li> <li>Artikel 24 Algemene Verordening Gegevensbescherming</li> <li>Artikel 26 Algemene Verordening Gegevensbescherming</li> <li>Artikel 27 Algemene Verordening Gegevensbescherming</li> <li>Artikel 29 Algemene Verordening Gegevensbescherming</li> <li>Verantwoordingsplicht</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/#risico","title":"Risico","text":"<p>Het niet naleven van deze norm moet worden gekwalificeerd als een onrechtmatigheid, niet als een risico voor de rechten en vrijheden van betrokkenen onder de AVG. Maar het niet voldoen aan artikel 5 betekent in de praktijk vaak wel dat er onvoldoende zicht is op risico's voor de rechten en vrijheden van betrokkenen of dat er te grote risico's worden genomen. Deze gevolgen zijn echter indirect een gevolg van het niet naleven van artikel 5 AVG. Het moeten voldoen aan het aantoonbaarheidsvereiste kan wel risico's hebben voor de organisatie die een algortime inzet. Enkele risico's zijn:</p> <ul> <li>Aantoonbaarheidsvereisten vragen in de praktijk veel documentatie. Deze documentatie kan via de Woo opgevraagd worden. Het ontbreken van documentatie kan door externen vaak relatief makkelijk in verband worden gebracht met een overtreding van deze vereisten.</li> <li>Algoritmes die van nature slecht inzichtelijk en uitlegbaar zijn (zoals deep-learning) hebben een zeer hoge drempel om aan deze vereiste te voldoen. Aantonen van rechtmatigheid is voor een belangrijk deel afhankelijk van inzicht in de werking van het algoritme. De inzet van een algortime kan dus mogelijk tegengehouden worden door deze vereisten.</li> <li>Bij leveranciers die niet of gedeeltelijke transparant zijn over hun product of dienstverlening ontstaat een vergelijkbaar risico. Waar de Woo uitzonderingen heeft voor bedrijfsgeheimen heeft de AVG daar maar beperkte ruimte voor. Het is dus mogelijk dat leveranciers terughoudend zullen zijn met het delen van informatie die onder de AVG ook aan betrokkenen gecommuniceerd moeten worden.</li> <li>Samenwerkingsverbanden en externe leveranciers kunnen niet als argumenten worden gebruikt om de aantoonbaarheidsvereisten op af te schuiven. Onafhankelijk van de onderlinge afspraken daarover hebben alle verwerkingsverantwoordelijken de verplichting om aan deze vereisten te kunnen voldoen. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/","title":"Organisaties zijn transparant over het verwerken van persoonsgegevens","text":"<p>avg-07ImplementatieMonitoring en beheerOntwikkelaarProjectleiderPrivacy en gegevensbeschermingTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/#vereiste","title":"Vereiste","text":"<p>De verwerking van persoonsgegevens moet transparant zijn.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/#toelichting","title":"Toelichting","text":"<p>Een betrokkene moet op de hoogte worden gesteld van het feit dat er verwerking plaatsvindt van diens persoonsgegevens en van de doeleinden daarvan (zoals ook is verwoord in het beginsel van transparante verwerking, artikel 5 AVG). Hierbij moeten de specifieke omstandigheden en de context waarin de persoonsgegevens worden verwerkt, worden meegenomen. In artikel 13 en 14 AVG wordt toegelicht welke informatie in welke gevallen moet worden verstrekt door de verwerkersverantwoordelijke. Als persoonsgegevens worden verwerkt ten behoeve van het ontwikkelen of gebruiken van algoritmes, zal deze informatie moeten worden verstrekt.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 5 lid 1 Algemene Verordening Gegevensbescherming</li> <li>Artikel 12 Algemene Verordening Gegevensbescherming</li> <li>Artikel 13 Algemene Verordening Gegevensbescherming</li> <li>Artikel 14 Algemene Verordening Gegevensbescherming</li> <li>Overweging 58 Algemene Verordening Gegevensbescherming</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/#risico","title":"Risico","text":"<p>Rechten van betrokken worden geschonden als er geen sprake is van transparantie over de verwerkingen van de persoonsgegevens.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/","title":"Gevoelige persoonsgegevens worden alleen gebruikt als hiervoor een wettelijke uitzondering geldt","text":"<p>avg-08OntwerpDataverkenning en datapreparatieProjectleiderJuristBeleid en adviesPrivacy en gegevensbeschermingBias en non discriminatie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/#vereiste","title":"Vereiste","text":"<p>Bijzondere categorie\u00ebn van persoonsgegevens mogen alleen worden verwerkt op basis van een wettelijke uitzondering.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/#toelichting","title":"Toelichting","text":"<p>Persoonsgegevens die door hun aard bijzonder gevoelig zijn wat betreft de grondrechten en fundamentele vrijheden, verdienen specifieke bescherming. Dit komt doordat de context van de verwerking ervan significante risico's kan meebrengen voor de grondrechten en de fundamentele vrijheden. Denk hierbij aan persoonsgegevens als ras, ethnische afkomst, politieke opvattingen of religieuze of levenschouwelijke overtuigingen.</p> <p>Bijzondere categorie\u00ebn persoonsgegevens mogen alleen worden verwerkt als er hier een wettelijke uitzondering voor is (artikel 9 AVG en artikel 30 UAVG). Deze vereiste is ook van toepassing bij het ontwikkelen en gebruiken van algoritmes en stelt daarmee beperkingen aan het mogen verwerken van deze categorie\u00ebn persoonsgegevens, bv. ten behoeve van trainingsdata of het genereren van de beoogde output.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 9 AVG</li> <li>Overweging 51 - 54 AVG</li> <li>Artikel 22 - 30 UAVG</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/#risico","title":"Risico","text":"<p>Het (onrechtmatige) verwerken van bijzondere categorie\u00ebn persoonsgegevens brengt risico's met zich mee op het gebied van respecteren van de persoonlijke levenssfeer en discriminatie.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/","title":"Betrokkenen kunnen een beroep doen op hun privacyrechten","text":"<p>avg-09OrganisatieverantwoordelijkhedenOntwikkelenOntwikkelaarPrivacy en gegevensbeschermingData</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/#vereiste","title":"Vereiste","text":"<p>Betrokkenen kunnen een beroep doen op hun privacyrechten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/#toelichting","title":"Toelichting","text":"<p>Mensen hebben het recht om hun privacyrechten uit te oefenen door een beroep te doen op verschillende wettelijke bepalingen, zoals het recht op inzage, correctie, verwijdering en bezwaar tegen de verwerking van hun persoonsgegevens. Dit betekent dat individuen controle hebben over hoe hun gegevens worden gebruikt en kunnen verzoeken om toegang te krijgen tot hun gegevens of om wijzigingen aan te brengen indien nodig.</p> <p>Het kunnen uitoefenen van privacyrechten is essentieel voor het beschermen van de privacy van individuen, het waarborgen van transparantie en controle uitvoeren over persoonsgegevens. Als persoonsgegevens worden verwerkt voor het ontwikkelen en gebruiken van algoritmes, is het van belang dat maatregelen worden getroffen om deze rechten te eerbiedigen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/#bronnen","title":"Bronnen","text":"<p>Artikel 15 - 21 Algemene Verordening Gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/#risico","title":"Risico","text":"<p>Betrokkenen hebben geen controle over hun persoonsgegevens wanneer ze geen beroep kunnen doen op hun privacyrechten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/","title":"Besluiten die levens kunnen be\u00efnvloeden, zijn niet volledig geautomatiseerd","text":"<p>avg-10OntwerpImplementatieProjectleiderBeleid en adviesPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/#vereiste","title":"Vereiste","text":"<p>Betrokkenen hebben het recht om niet onderworpen te worden aan een enkel op geautomatiseerde verwerking, waaronder proflering, gebaseerd besluit, wanneer dit rechtsgevolgen heeft voor hen of het hen anderszins in aanzienlijke mate treft. Dit verbod geldt niet indien de geautomatiseerde individuele besluitvorming, anders dan op basis van profilering, noodzakelijk is om te voldoen aan een wettelijke verplichting die op de verwerkingsverantwoordelijke rust of noodzakelijk is voor de vervulling van een taak van algemeen belang.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/#toelichting","title":"Toelichting","text":"<p>Overheidsorganisaties zijn vaak belast met de uitvoering van wettelijke taken waarbij zij 'besluiten' moeten nemen, bijvoorbeeld als een burger vraagt om een uitkering, toeslag of een subsidie. Hiervoor moeten gegevens worden verwerkt om te kunnen bepalen of een burger hier ook recht op heeft. Om deze gegevens snel en accuraat te verwerken, zetten overheidsorganisaties vaak algoritmes in. Deze gegevens worden dan vaak 'geautomatiseerd' door deze algoritmes verwerkt, zonder dat een ambtenaar dit werk controleert. Soms wordt het proces voor het nemen van een besluit volledig geautomatiseerd ingericht. Denk hierbij aan het opleggen van een boete voor een snelheidsovertreding. Hierdoor kan in korte tijd en op een effici\u00ebnte wijze, een grote hoeveelheid besluiten worden genomen. </p> <p>Het geautomatiseerd verwerken van gegevens voor de totstandkoming van een besluit brengt risico's met zich mee. Zeker als hierbij persoonsgegevens van individuen worden verwerkt en er sprake is van profilering. Hierdoor ontstaat bijvoorbeeld het risico op discriminatie. Daarom is in art. 22 AVG het recht voor betrokkenen gecre\u00eberd om niet te worden onderworpen aan een uitsluitend op geautomatiseerde verwerking, waaronder profilering, gebaseerd besluit. </p> <p>Dit verbod geldt voor besluiten die 'rechtsgevolgen' hebben voor een betrokkene, bijvoorbeeld een burger die een boete ontvangt voor de snelheidsovertreding, of hem anderzijds in aanmerkelijke mate treft. Het besluit mag in die gevallen niet geautomatiseerd worden genomen. Een individu moet namelijk kunnen rekenen op voldoende 'menselijke tussenkomst' bij de beoordeling van belangrijke beslissingen die deze persoon treffen.</p> <p>Bij het geautomatiseerd uitvoeren van processen dient altijd te worden voldaan aan de voorwaarden uit wetgeving, waaronder in het bijzonder de Algemene Verordening Gegevensbescherming (AVG) en de Algemene wet bestuursrecht(Awb). Bestuursorganen dienen dan ook te handelen conform de algemene beginselen van behoorlijk bestuur. Dit samenstel van regels moet de rechten van betrokkenen borgen. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/#algemene-eisen-aan-geautomatiseerde-besluitvorming-door-overheden","title":"Algemene eisen aan geautomatiseerde besluitvorming door overheden","text":"<p>De Nederlandse wetgever heeft in artikel 40 lid 1 UAVG gebruik gemaakt van de mogelijkheid een uitzondering te maken op het verbod van art. 22 lid 1 AVG. In Nederland is geautomatiseerde besluitvorming toegestaan, als het gaat om besluitvorming waarbij menselijke tussenkomst geen toegevoegde waarde heeft. Dit is het geval als er sprake is van een gebonden karakter waarbij weinig of geen beoordelingsruimte is waarin tot een andere conclusie kan worden gekomen. Hierbij kan worden gedacht aan het toekennen van kinderbijslag of de hoogte van het recht op studiefinanciering. Deze uitzondering geldt niet voor 'profilering', tenzij er specifieke (sectorale) wetgeving het verbod opheft.</p> <p>Om deze uitzondering toe te kunnen passen, moet er op grond van artikel 22 AVG een 'passende maatregel' in de vorm van wetgeving zijn die personen voldoende bescherming biedt. In Nederland moet de Algemene wet bestuursrecht deze bescherming aan burgers bieden als bestuursorganen besluiten nemen. De Awb bevat vereisten en algemene beginselen waaraan besluitvorming moet voldoen. </p> <p>Bij het toepassen van geautomatiseerde besluitvorming, moet aan de hand van een DPIA wordt vastgesteld of er bij toepassing van de Awb daadwerkelijk voldoende bescherming wordt geboden. Een verwerkersverantwoordelijke zal dus, naast het toepassen van vereisten uit de AVG en specifieke (sectorale) wetgeving, beginselen uit de Awb moeten vertalen naar concrete maatregelen om geautomatiseerde besluitvorming op een rechtmatige wijze toe te passen. Hierbij kan worden gedacht aan het toepassen van motiveringsbeginsel of het zorgvuldigheidsbeginsel.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/#begrippen","title":"Begrippen","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/#profilering","title":"Profilering","text":"<p>Profilering is bijzonder gevoelig. Bij profilering gaat het om elke vorm van een geautomatiseerde verwerking van persoonsgegevens, waarbij aan de hand van persoonsgegevens bepaalde persoonlijke aspecten van een natuurlijke persoon worden ge\u00ebvalueerd. Daarbij gaat het voornamelijk om het analyseren of verspellen van zaken als beroepsprestaties, economische situatie, gezondheid, persoonlijke voorkeuren, interesses, betrouwbaarheid, gedrag, locatie of een verplaatsingen. </p> <p>Volgens deze definitie gaat het om een verwerking door een computersysteem waarbij het systeem algemene aanname(s) toegepast in een concreet geval. Dit doet het door een individu, met gebruikmaking van diens persoonsgegevens, in te delen in een categorie(profiel). Een dergelijk categorie(profiel) wordt vaak in verband gebracht met bepaalde risico's, bijvoorbeeld het risico op het misbruiken van bepaalde publieke voorzieningen. De gevoeligheid is dat nog niet is vastgesteld dat, in dit voorbeeld, de betreffende natuurlijke persoon ook daadwerkelijk misbruik heeft gemaakt van bepaalde voorzieningen. Als daar wel automatisch gevolgen aan worden verbonden, ontstaat het risico op een onrechtmatige behandeling van een natuurlijk persoon. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/#besluit","title":"Besluit","text":"<p>In deze context moet het begrip 'besluit' worden gehanteerd zoals dit is bedoeld in artikel 22 AVG. Het begrip 'besluit' krijgt in de AVG een ruimere betekenis dan het geval is in artikel 1:3 Algemene wet bestuursrecht (Awb). In de Algemene wet bestuursrecht moet er sprake zijn van een 'rechtsgevolg', maar onder het besluitbegrip van de AVG kunnen ook situaties vallen waarin een individu \u2018slechts\u2019 feitelijke gevolgen ervaart als een besluit wordt genomen. Daarmee biedt de AVG dus bescherming voor meerdere situaties. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/#rechtsgevolgen","title":"Rechtsgevolgen","text":"<p>Het begrip 'rechtsgevolg' duidt op wijziging in de rechtspositie van betrokkene. Het betekent, juridisch uitgedrukt, een verandering in het geheel van de rechten, aanspraken, bevoegdheden en verplichtingen van \u00e9\u00e9n of meer natuurlijke personen of rechtspersonen. In deze context wijzigt de rechtspositie van een individu door een keuze van het systeem, bijvoorbeeld doordat deze een boete ontvangt. Rechtsgevolgen kwalificeren altijd als relevant. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/#aanmerkelijke-mate-treffen","title":"Aanmerkelijke mate treffen","text":"<p>De Europese wetgever heeft weinig richting gegeven aan hoe dit begrip moet worden ge\u00efnterpreteerd. Er zijn wel aanknopingspunten om te duiden wanneer hier sprake van is. De EDPB spreekt van ernstige, aanzienlijke effecten, groot of belangrijk genoeg zijn om aandacht te verdienen. Dat is in ieder geval zo als het besluit het potentieel heeft om de omstandigheden, het gedrag of de keuze van de betrokken personen in aanmerkelijke mate te treffen; een langdurig of blijvend effect op de betrokkene te hebben; of in het uiterste geval, tot uitsluiting of discriminatie te leiden. Dit vraagt per geval om een analyse welke 'keuzes' van het systeem welke gevolgen hebben voor een individu en of die gevolgen rechtsgevolgen zijn of alleen een feitelijk gevolg. Zie voor een nadere toelichting hiervoor het advies van de Autoriteit Persoonsgegevens inzake geautomatiseerde selectietechnieken.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/#toepassing","title":"Toepassing","text":"<p>Volledig geautomatiseerde vaststelling van een publiekrechtelijk besluit zoals een aanslag, een boete of een vergunning heeft rechtsgevolgen. Een beslissing dat een bepaalde aanvraag in aanmerking komt voor handmatige controle heeft op zichzelf geen rechtsgevolg - de rechtspositie van de betrokkene wijzigt (nog) niet. Wel moet beoordeeld worden of de betrokkene door dat besluit anderszins (dus feitelijk) in aanmerkelijke mate wordt getroffen. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 22 Algemene Verordening Gegevensbescherming</li> <li>Artikel 40 Uitvoeringswet AVG </li> <li>Artikel 1:3 Algemene wet bestuursrecht</li> <li>Advies landsadvocaat over geautomatiseerde selectietechnieken</li> <li>Advies artikel 22 AVG en geautomatiseerde selectie-instrumenten</li> <li>[Kamerbrief met kabinetsreactie AP-advies over geautomatiseerde selectie-instrumenten](Kamerbrief met kabinetsreactie AP-advies over geautomatiseerde selectie-instrumenten0</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/#risico","title":"Risico","text":"<p>Bij geautomatiseerde besluitvorming kan het risico ontstaan dat kenmerken van een bepaalde groep ten onrechte worden tegengeworpen aan een individu die deze kenmerken niet hoeft te bezitten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/","title":"Ontwerp en standaardinstellingen (defaults) zijn zo gunstig mogelijk voor de privacy van betrokkenen","text":"<p>avg-11OntwerpDataverkenning en datapreparatieBeleid en adviesProjectleiderJuristOntwikkelaarPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/#vereiste","title":"Vereiste","text":"<p>Privacy en gegevensbescherming door goed ontwerp en door standaardinstellingen</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/#toelichting","title":"Toelichting","text":"<p>Gegevensbescherming door ontwerp en standaardinstellingen houdt in dat privacy- en gegevensbescherming vanaf het begin worden ge\u00efntegreerd in de ontwikkeling van systemen en processen (ook wel privacy-by-design genoemd). Door al bij het ontwerp rekening te houden met privacyaspecten en door standaardinstellingen die privacy bevorderen, wordt de bescherming van persoonsgegevens versterkt. Hierbij kan worden gedacht een het pseudonimiseren van persoonsgegevens of dataminimalisatie.</p> <p>Deze aanpak zorgt ervoor dat privacy-overwegingen een integraal onderdeel zijn van alle aspecten van gegevensverwerking en draagt bij aan het vertrouwen van individuen in de veilige omgang met hun gegevens. Dit is eveneens van toepassing als persoonsgegevens worden verwerkt bij het ontwikkelen en gebruiken van algoritmes.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 25 Algemene Verordening Gegevensbescherming</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/#risico","title":"Risico","text":"<p>Door privacy en gegevensbescherming door ontwerp en standaardinstellingen niet toe te passen, kan een inbreuk op rechten van betrokkenen ontstaan.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/","title":"Data zoals persoonsgegevens zijn voldoende beveiligd tegen ongelukken en cyberaanvallen","text":"<p>avg-12OrganisatieverantwoordelijkhedenJuristOntwikkelaarPrivacy en gegevensbeschermingTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/#vereiste","title":"Vereiste","text":"<p>Rekening houdend met de stand van de techniek, de uitvoeringskosten, alsook met de aard, de omvang, de context en de verwerkingsdoeleinden en de qua waarschijnlijkheid en ernst uiteenlopende risico's voor de rechten en vrijheden van personen, treffen de verwerkingsverantwoordelijke en de verwerker passende technische en organisatorische maatregelen om een op het risico afgestemd beveiligingsniveau te waarborgen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/#toelichting","title":"Toelichting","text":"<p>Voor de ontwikkeling en gebruik van algoritmes is data nodig. Deze data kan persoonsgegevens bevatten die moeten worden beschermd. De organisatie zal technische en organisatorische maatregelen moeten treffen om de data en het algoritme voldoende te beschermen. Hierbij kan worden gedacht aan dataminimalisatie, het pseudonimiseren of aggregeren van persoonsgegevens. Per toepassing moet worden onderzocht welke maatregelen hiervoor geschikt zijn.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/#bronnen","title":"Bronnen","text":"<p>Artikel 32 Algemene Verordening Gegevensbescherming|</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/#risico","title":"Risico","text":"<p>Er kunnen risico's ontstaan zoals potenti\u00eble cyberaanvallen en datalekken. Dit kan leiden bijvoorbeeld tot verlies of diefstal van gevoelige gegevens, verstoring van organisatieprocessen,ongeautoriseerde toegang, vernietiging en onrechtmatige verwerking.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/","title":"Een Data Protection Impact Assessment (DPIA) wordt uitgevoerd wanneer de verwerking van persoonsgegevens waarschijnlijk een hoog risico met zich meebrengt voor de rechten en vrijheden van natuurlijke personen","text":"<p>avg-13OntwerpDataverkenning en datapreparatieVerificatie en validatieJuristProjectleiderPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/#vereiste","title":"Vereiste","text":"<p>Een gegevensbeschermingseffectbeoordeling (DPIA) is verplicht, indien een verwerking van persoonsgegevens waarschijnlijk een hoog risico inhoudt voor de rechten en vrijheden van natuurlijke personen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/#toelichting","title":"Toelichting","text":"<p>Een Gegevensbeschermingseffectbeoordeling (GEB) of Data Protection Impact Assessment (DPIA) is verplicht wanneer de verwerking van persoonsgegevens waarschijnlijk een hoog risico met zich meebrengt voor de rechten en vrijheden van natuurlijke personen.  Deze beoordeling identificeert en beperkt potenti\u00eble risico's en zorgt ervoor dat passende maatregelen worden genomen om de privacy van individuen te beschermen.  Deze verplichting draagt bij aan een zorgvuldige en verantwoorde omgang met persoonsgegevens in algoritmes, waardoor de privacy van individuen wordt gewaarborgd.</p> <p>Let op: de DPIA verplichting is niet gebaseerd op de hoog-risico criteria uit de AI-act. Volgens Besluit lijst verwerkingen persoonsgegevens waarvoor een gegevensbeschermingseffectbeoordeling (DPIA) verplicht is, Autoriteit Persoonsgegevens moet voor het uitvoeren van een DPIA in ieder geval uitgegaan worden van een hoog risico als er sprake is van \u00e9\u00e9n van de volgende voorwaarden:</p> <ol> <li>Evaluatie of scoretoekenning</li> <li>Geautomatiseerde besluitvorming met rechtsgevolg of vergelijkbaar wezenlijk gevolg</li> <li>Stelselmatige monitoring</li> <li>Gevoelige gegevens of gegevens van zeer persoonlijke aard</li> <li>Op grote schaal verwerkte gegevens</li> <li>Matching of samenvoeging van datasets</li> <li>Gegevens met betrekking tot kwetsbare betrokkenen</li> <li>Innovatief gebruik of innovatieve toepassing van nieuwe technologische of organisatorische oplossingen</li> <li>de situatie waarin als gevolg van de verwerking zelf \"betrokkenen [...] een recht niet kunnen uitoefenen of geen beroep kunnen doen op een dienst of een overeenkomst\";</li> </ol> <p>Het is mogelijk dat algoritmes die niet aan \u00e9\u00e9n of meer van deze eigenschappen voldoen toch voor een potentieel hoog risico zorgen. </p> <p>Gebruiksverantwoordelijken van AI-systemen met een hoog risico gebruiken die informatie op grond van artikel 13 AI Verordening om hun verplichting na te komen om een gegevensbeschermingseffectbeoordeling uit te voeren. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 35 Algemene Verordening Gegevensbescherming</li> <li>Artikel 26(9) Verordening Artifici\u00eble Intelligentie </li> <li>Besluit lijst verwerkingen persoonsgegevens waarvoor een gegevensbeschermingseffectbeoordeling (DPIA) verplicht is, Autoriteit Persoonsgegevens</li> <li>Data protection impact assessment (DPIA) Autoriteit Persoonsgegevens</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/#risico","title":"Risico","text":"<p>Het niet evalueren van de impact van het verwerking van persoonsgegevens in algoritmes kan resulteren in het niet onderkennen van de bijbehorende risico's  en het niet op tijd te mitigieren van deze risico's. Dit kan leiden tot potenti\u00eble schendingen van de rechten en vrijheden van betrokkenen en een onrechtmatige verwerking.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/#hulpmiddelen","title":"Hulpmiddelen","text":"HulpmiddelenData Protection Impact AssessmentToetsingskader Algoritmes Algemene Rekenkamer"},{"location":"voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/","title":"Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.","text":"<p>awb-01OntwerpOntwikkelenVerificatie en validatieProjectleiderBeleid en adviesFundamentele rechten</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/#vereiste","title":"Vereiste","text":"<p>Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/#toelichting","title":"Toelichting","text":"<p>Het zorgvuldigheidsvereiste eist dat een besluit met de nodige zorgvuldigheid wordt voorbereid en juist wordt genomen. Dit vraagt onder meer om een zorgvuldig onderzoek naar informatie, feiten, een zorgvuldige beslissingsprocedure en een deugdelijke besluitvorming. </p> <p>Dit betekent dat bij de ontwikkeling en gebruik van algoritmes informatie moet worden vastgelegd  over het algoritme. Hierbij kan worden gedacht aan: - Dat het doel en eventuele subdoelen van het algoritme of AI-systeem helder zijn gedefinieerd, ook in relatie tot het maatschappelijke resultaat (outcome). - Een bewuste afweging afmaken en vaststellen of het algoritme het juiste middel is om het probleem op doelmatige en doeltreffende wijze op te lossen. - Dat de werking van het algoritme is onderzocht en is vastgesteld dat dit passend is om te gebruiken in een besluitvormingsproces.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/#bronnen","title":"Bronnen","text":"<ul> <li>Afdeling 3.2 Algemene wet bestuursrecht</li> <li>Afdeling 3.4 Algemene wet bestuursrecht</li> <li>Advies artikel 22 AVG en geautomatiseerde selectie-instrumenten</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/#risico","title":"Risico","text":"<p>De werking van het algoritmes sluit niet of onvoldoende aan bij de juridische en ethische grenzen van de te ondersteunen wettelijke taak. Hierdoor kunnen ongewenste gevolgen ontstaan zoals een onjuist of onzorgvuldig genomen besluit.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/","title":"Organisaties kunnen duidelijk uitleggen waarom en hoe algoritmes leiden tot een besluit","text":"<p>awb-02OntwerpImplementatieMonitoring en beheerProjectleiderOntwikkelaarTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/#vereiste","title":"Vereiste","text":"<p>Een besluit berust op een deugdelijke en kenbare motivering.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/#toelichting","title":"Toelichting","text":"<p>De Awb eist dat een besluit een deugdelijke en kenbare motivering heeft. Dit geldt ook als algoritmes worden ingezet. Een betrokkene moet in staat zijn om te controleren of de overheid een besluit correct heeft genomen. Het motiveringsbeginsel draagt bij aan doelen als verantwoording kunnen afleggen en het bieden van rechtsbescherming. Het kan in samenhang worden gezien met transparantieverplichtingen die voortkomen uit de AVG. </p> <p>Het is van belang dat inzichtelijk wordt gemaakt in het besluit welke gegevens zijn verwerkt en welke 'aannames' een algoritme bevat. Dit speelt in het bijzonder als gebruik wordt gemaakt van geautomatiseerde besluitvormingsprocessen. Hierbij kan worden gedacht aan:</p> <ul> <li> <p>Dat een besluit tot stand is gekomen met behulp van een algoritme.</p> </li> <li> <p>Van welke feiten het bestuursorgaan is uitgegaan.</p> </li> <li> <p>Welke gegevens zijn verwerkt.</p> </li> <li> <p>Welke relevante belangen tegen elkaar zijn afgewogen en hoe die afweging is verlopen.</p> </li> <li> <p>Welke regels zijn gebruikt.</p> </li> <li> <p>Wat de hierachter is (kenbaarheid).</p> </li> <li> <p>Welke analytische technieken zijn gebruikt.</p> </li> <li> <p>Waarom deze regels en logica relevant zijn (uitleg)?</p> </li> <li> <p>Op welke wijze de regels en logica tot stand zijn gekomen en hoe deze regels worden gevalideerd.</p> </li> </ul> <p>Een besluit moet informatie hierover bevatten om als om als voldoende draagkrachtig gemotiveerd te gelden. Het motiveringsbeginsel op grond van de Awb is beperkt tot besluiten in de zin van de Awb. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 3:46 en 3:47 Awb</li> <li>Jurisprudentie over AERIUS (ABRvS 18 juli 2018, ECLI:NL:RVS:2018:2454), Hof van Justitie C-274/18</li> <li>Advies artikel 22 AVG en geautomatiseerde selectie-instrumenten</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/#risico","title":"Risico","text":"<p>Het is onduidelijk op wat voor manier het algoritmes heeft bijgedragen aan de totstandkoming van een besluit. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/","title":"Computersystemen zijn voldoende beveiligd tegen ongelukken en cyberaanvallen","text":"<p>bio-01OrganisatieverantwoordelijkhedenBeleid en adviesOntwikkelaarTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/#vereiste","title":"Vereiste","text":"<p>Informatie en informatiesystemen moeten op de juiste manier worden beveiligd.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/#toelichting","title":"Toelichting","text":"<p>Informatiebeveiliging is het proces van vaststellen van de vereiste beveiliging van informatiesystemen in termen van vertrouwelijkheid, beschikbaarheid en integriteit alsmede het treffen, onderhouden en controleren van een samenhangend pakket van bijbehorende maatregelen. In Nederland is besloten dat overheidsinstellingen de Baseline Informatiebeveiliging Overheid (BIO) dienen toe te passen over hun informatie en informatiesystemen. De BIO beoogt de beveiliging van informatie(systemen) bij alle bestuurslagen en bestuursorganen van de overheid te bevorderen, zodat alle onderdelen erop kunnen vertrouwen dat onderling uitgewisselde gegevens, in lijn met wet- en regelgeving, passend beveiligd zijn.</p> <p>Algoritmes en hun output kunnen onderdeel worden van de informatie en informatiesystemen waar de BIO op van toepassing is. Het is van belang om algoritmische toepassingen en AI-systemen op de juiste manier te beveiligen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/#bronnen","title":"Bronnen","text":"<ul> <li>Baseline Informatiebeveiliging Overheid </li> <li>Besluit voorschrift informatiebeveiliging rijksdienst 2007</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/#risico","title":"Risico","text":"<p>Er kunnen risico's ontstaan zoals ongeautoriseerde toegang, vernietiging, verlies, wijziging of niet-toegestane verwerking van gegevens als de informatie en informatiesystemen onvoldoende zijn beveiligd.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/","title":"Impactvolle algoritmes en hoog-risico-AI-systemen staan in het Nederlandse Algoritmeregister","text":"<p>bzk-01ImplementatieMonitoring en beheerProjectleiderTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/#vereiste","title":"Vereiste","text":"<p>Bestuursorganen publiceren algoritmes met impact en hoog-risico-AI-systemen in het Nederlandse Algoritmeregister.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/#toelichting","title":"Toelichting","text":"<p>Het publiceren van algoritmes draagt bij aan transparantie voor belanghebbenden en derden over welke algoritmes worden gebruikt door de overheid. Het is vastgesteld beleid dat overheidsinstellingen, tenzij er uitsluitingsgronden zijn, de door hen gebruikte impactvolle algoritmes en hoogrisico AI-systemen publiceren in het algoritmeregister. Er wordt gewerkt aan wetgeving om het bij wet verplicht te stellen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/#bronnen-bestaand-beleid","title":"Bronnen (bestaand beleid)","text":"<ul> <li>Handreiking Algoritmeregister</li> <li>Geactualiseerde Werkagenda Waardengedreven Digitaliseren 2024</li> <li>Kamerbrieven</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/#risico","title":"Risico","text":"<p>Door het niet publiceren van impactvolle algoritmes of hoog risico AI -systemen in het Algoritmeregister, is het voor betrokkenen of belanghebbenden minder goed mogelijk om de overheid kritisch te volgen, te bevragen en te controleren op de inzet van deze technologie\u00ebn die hen kunnen raken.  Bij het onjuist of onvolledig publiceren in het Algortimeregister ontstaat er een risico dat betrokkenen en belanghebbenden onjuiste inschattingen maken over het gebruik van het algoritmes en daardoor in hun rechten worden beperkt.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/#hulpmiddelen","title":"hulpmiddelen","text":"HulpmiddelenAlgoritmeregister"},{"location":"voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/","title":"Databanken worden alleen gebruikt met toestemming van de databank-producent","text":"<p>dat-01Dataverkenning en datapreparatieJuristData</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/#vereiste","title":"Vereiste","text":"<p>Het is verboden om zonder goedkeuring van de producent een databank op te vragen en/of te hergebruiken.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/#toelichting","title":"Toelichting","text":"<p>De Databankrichtlijn en Databankenwet beschermt de producten/fabrikanten van databanken tegen onrechtmatige toe-eigening van een databank. Degene die een substanti\u00eble financi\u00eble en professionele investering heeft verricht om de inhoud van de databank te verkijgen en te verzamelen, krijgt een verbodsrecht en kan zo anderen verbieden de databank te gebruiken. Bij verkrijgen gaat het om \"het verzamelen van de werken, gegevens of andere zelfstandige elementen die tezamen de inhoud van de databank vormen\". Dit recht bestaat naast het recht op bescherming van de originele keuze of rangschikking van de inhoud van databanken (auteurswet).</p> <p>Voor het ontwikkelen van algoritme is data nodig. De data die hiervoor wordt gebruikt mag niet ongeoorloofd zijn verkregen uit een databank.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 1 en 2 Databankenwet</li> <li>Artikel 5a en 5b Databankenwet</li> <li>Artikel 7 Databankrichtlijn</li> <li>Overwegingen 39 - 41 Databankrichtlijn</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/#risico","title":"Risico","text":"<p>Als een ontwikkelaar onbevoegd gebruik heeft gemaakt van data uit een databank bij de ontwikkeling van algoritmes, wordt het databankenrecht geschonden van de eigenaar.  De eigenaar van de databank kan bijvoorbeeld ontrekking van de data uit het handelsverkeer, vernietiging en onbruikbaarmaking  eisen, wat vergaande gevolgen kan hebben voor het gebruik kunnen maken van de algoritmische toepassing of AI-systeem.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/","title":"Algoritmes schenden geen grondrechten of mensenrechten","text":"<p>grw-01ProbleemanalyseOntwerpVerificatie en validatieMonitoring en beheerProjectleiderJuristFundamentele rechten</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/#vereiste","title":"Vereiste","text":"<p>Fundamentele vrijheden, mensenrechten en grondrechten worden beschermd bij de inzet van algoritmes.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/#toelichting","title":"Toelichting","text":"<p>Mensenrechten gelden voor alle mensen op de wereld. De mensenrechten in Nederland zijn beschermd door nationale wetten en internationale verdragen. In Nederland staan veel mensenrechten in hoofdstuk 1 van de Grondwet. Deze rechten heten ook wel \u2019grondrechten\u2019. Een bekend voorbeeld is artikel 1 van de Grondwet. Om mensenrechten te beschermen zijn ze op Europees en internationaal niveau in verschillende verklaringen en verdragen vastgelegd.</p> <p>Mensenrechten kunnen soms onder druk komen te staan. De inzet van algoritmes kan bijvoorbeeld een bedreiging vormen voor de privacy van burgers, voor het  recht op gelijke behandeling en voor het recht op behoorlijk bestuur. Het is daarom belangrijk om tijdig te onderzoeken of er sprake is of kan zijn van een eventuele inbreuk op fundamentele rechten en vrijheden van burgers. Het is van belang dat maatregelen worden getroffen om een eventuele inbreuk te voorkomen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/#bronnen","title":"Bronnen","text":"<ul> <li>Grondwet</li> <li>Europees Verdragvoor de Rechten van de Mens (EVRM)</li> <li>Handvest van de grondrechten van de Europese Unie</li> <li>Universele Verklaring van de Rechten van de Mens (UVRM)</li> <li>Internationaal Statuut van de Rechten van de Mens</li> <li>Internationale Verdrag inzake burgerrechten en politieke rechten (IVBPR)</li> <li>Internationale Verdrag inzake economische, sociale en culturele rechten (IVESCR)</li> <li>Internationaal Verdrag inzake de uitbanning van alle vormen van rassendiscriminatie (CERD)</li> <li>Internationaal Verdrag voor de rechten van het kind (CRC)</li> <li>Internationaal Verdrag voor de Rechten van Mensen met een Handicap (VN-verdrag Handicap)</li> <li>Artikel 27 Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/#risico","title":"Risico","text":"<p>Grondrechten kunnen worden geraakt door de inzet van algoritmes met eventuele schadelijke gevolgen voor betrokkenen. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/#hulpmiddelen","title":"hulpmiddelen","text":"HulpmiddelenImpact Assessment Mensenrechten en AlgoritmesThe Fairness HandbookHandreiking non-discriminatie by designDiscriminatie door risicoprofielen - Een mensenrechtelijk toetsingskader"},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/","title":"Algoritmes discrimineren niet","text":"<p>grw-02Dataverkenning en datapreparatieVerificatie en validatieMonitoring en beheerProjectleiderBias en non discriminatie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/#vereiste","title":"Vereiste","text":"<p>Allen die zich in Nederland bevinden, worden in gelijke gevallen gelijk behandeld. Directe en indirecte discriminatie wegens godsdienst, levensovertuiging, politieke gezindheid, ras, geslacht, handicap, seksuele gerichtheid of op welke grond dan ook, is niet toegestaan.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/#toelichting","title":"Toelichting","text":"<p>Overheidsinstanties moeten zich bij het uitvoeren van hun taken onthouden van discriminatie, ook wanneer er gebruik wordt gemaakt van algoritmes. Wanneer er algoritmes worden gebruikt om selecties te maken van burgers, dienen we te streven naar een gelijke behandeling van personen of groepen ten opzichte van andere personen in een vergelijkbare situatie. Hierbij is het belangrijk te beseffen dat discriminatie ook op indirecte wijze kan ontstaan. Hiervan is sprake wanneer een ogenschijnlijk neutrale bepaling, maatstaf of handelwijze personen met een beschermd persoonskenmerk in vergelijking met andere personen in het bijzonder benadeelt, tenzij hiervoor een objectieve rechtvaardiging bestaat.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 1 Grondwet </li> <li>Artikel 14 Verdrag tot bescherming van de rechten van de mens en de fundamentele vrijheden, Rome, 04-11-1950</li> <li>Artikel 21 Handvest van de Grondrechten van de Europese Unie</li> <li>Artikel 1 Algemene wet gelijke behandeling </li> <li>Artikel 1 Protocol nr. 12 bij het Verdrag tot bescherming van de rechten van de mens en de fundamentele vrijheden, Rome, 04-11-2000 </li> <li>Artikel 9 Algemene Verordening Gegevensbescherming </li> <li>Artikel 2:4 Algemene wet bestuursrecht </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/#risico","title":"Risico","text":"<p>Het risico bestaat dat het model onwenselijke systematische afwijkingen cre\u00ebert voor specifieke personen, groepen of andere eenheden, wat kan duiden op directe of indirecte discriminerende effecten van het algoritme.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/","title":"Iedereen kan openbare informatie over algoritmes vinden of aanvragen","text":"<p>woo-01OrganisatieverantwoordelijkhedenJuristProjectleiderTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/#vereiste","title":"Vereiste","text":"<p>Een bestuursorgaan draagt er zorg voor dat de documenten die het ontvangt, vervaardigt of anderszins onder zich heeft, zich in goede, geordende en toegankelijke staat bevinden. Een bestuursorgaan draagt er zoveel mogelijk zorg voor dat de informatie die het overeenkomstig deze wet verstrekt, actueel, nauwkeurig en vergelijkbaar is.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/#toelichting","title":"Toelichting","text":"<p>Bij het ontwikkelen en gebruiken van algoritmes kunnen documenten en publieke informatie ontstaan die (op verzoek) in aanmerking komen voor openbaarmaking. Het kunnen openbaren van publieke informatie is in het belang van een democratische rechtstaat. De Wet open overheid gaat uit van een recht op openbaarheid van publieke informatie. Iedereenkan een verzoek tot openbaarmaking van publieke informatie doen bij een bestuursorgaan zonder daarbij een belang te stellen (artikel 4.1 Woo). De aan een verzoeker verstrekte informatie wordt openbaar voor iedereen. De Woo is niet van toepassing op informatie die al openbaar is (uitspraken van de Afdeling bestuursrechtspraak van de Raad van State van 1 december 2010 (ECLI:NL:RVS:2010:BNS6990) en 20 oktober 2010 (ECLI:NL:RVS:2010:BO1165)). Er kunnen uitsluitingsgronden bestaan voor het openbaarmaken van documenten (artikel 5.1 Woo).</p> <p>In de context van het ontwikkelen en gebruiken van algoritmes is het van belang dat tijdig wordt vastgesteld welke documenten in aanmerking komen voor openbaarmaking. Dit moet worden bekeken in het licht van wat 'actief' moet worden geopenbaard, dus proactief vanuit overheidsinstanties zelf, of wat op 'verzoek' van iemand moet worden geopenbaard.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 1.1 Wet open overheid</li> <li>Artikel 2.5 Wet open overheid</li> <li>Artikel 4.1 Wet open overheid</li> <li>Artikel 5 Wet open overheid</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/#risico","title":"Risico","text":"<p>Zonder het openbaren van overheidsinformatie kan de overheid niet effectief worden gecontroleerd bij het uitvoeren van wettelijke taken.</p>"}]}
\ No newline at end of file
+{"config":{"lang":["nl"],"separator":"[\\s\\-]+","pipeline":["stopWordFilter"],"fields":{"title":{"boost":1000.0},"text":{"boost":1.0},"tags":{"boost":1000000.0}}},"docs":[{"location":"","title":"Algoritmekader","text":"Wetten en regels, tips en hulpmiddelen voor verantwoord gebruik van algoritmes door de overheid.       b\u00e8taversie <p>Deze website is in ontwikkeling. Alle versies ontstaan op een open manier. Iedereen mag opmerkingen of suggesties geven.</p> Onderwerpen <ul> <li>Discriminerende effecten van algoritmes</li> <li>Privacy en persoonsgegevens beschermen</li> <li>Publieke inkoop van algoritmes</li> </ul> Alle onderwerpen Waar beginnen? <ul> <li>Wat is een algoritme?</li> <li>Levenscyclus van algoritmes</li> <li>Governance van algoritmes binnen je organisatie</li> </ul> Eerste deadline: 2 februari 2025 <ul> <li>Tijdlijn AI-verordening</li> <li>Beslishulp AI-verordening</li> </ul> Voldoen aan wetten en regels <ul> <li>Overzicht vereisten voor de overheid</li> <li>Overzicht aanbevolen maatregelen</li> <li>Overzicht aanbevolen hulpmiddelen</li> </ul> <p></p>"},{"location":"version/","title":"Version","text":""},{"location":"version/#-","title":"---","text":""},{"location":"version/#huidige-versie","title":"Huidige versie","text":"<p>v1.6.1-37-g8aaaa3218</p>"},{"location":"levenscyclus/","title":"Levenscyclus algoritmes en AI","text":"<ul> <li> <p>Over de levenscyclus</p> <p>De levenscyclus helpt je te bepalen wat je wanneer moet doen. Hoe ziet dit eruit in een plaatje? En waarom 8 fasen?</p> </li> <li> <p>Fase 0: Organisatieverantwoordelijkheden</p> <p>Voordat je start met de ontwikkeling of het gebruik van een algoritme, zul je moeten zorgen dat je organisatie voldoende ingericht is om algoritmes te gebruiken of te ontwikkelen.</p> </li> <li> <p>Fase 1: Probleemanalyse</p> <p>In deze fase wordt het probleem en de doelstellingen van een opdrachtgever geanalyseerd en beschreven.</p> </li> <li> <p>Fase 2: Ontwerp</p> <p>In de ontwerpfase wordt het conceptuele ontwerp van het AI-systeem uitgedacht.</p> </li> <li> <p>Fase 3: Dataverkenning en datapreparatie</p> <p>Dit is de fase waarin het algoritme of AI-systeem wordt ontwikkeld door het ontwikkelteam.</p> </li> <li> <p>Fase 4: Ontwikkelen</p> <p>Dit is de fase waarin het algoritme of AI-systeem wordt ontwikkeld door het ontwikkelteam.</p> </li> <li> <p>Fase 5: Verificatie en validatie</p> <p>Bij de verificatie en validatie van het algoritme of AI-systeem dient bepaald te worden of het algoritme of AI-systeem gebouwd is volgens de (technische) specificaties en voldoet aan de beoogde doelstellingen.</p> </li> <li> <p>Fase 6: Implementatie</p> <p>In deze fase wordt het algoritme of AI-systeem in de praktijk gebracht en duurzaam ge\u00efntegreerd in het bedrijfsproces.</p> </li> <li> <p>Fase 7: Monitoring en beheer</p> <p>Het algoritme of AI-systeem wordt in deze fase voortdurend gemonitord om ervoor te zorgen dat het blijft presteren zoals verwacht en kan worden gebruikt door gebruikers.</p> </li> <li> <p>Fase 8: Uitfaseren</p> <p>Als wordt besloten dat het algoritme of AI-systeem niet langer nodig is of wordt vervangen door een wezenlijk andere versie, wordt het gearchiveerd en uitgefaseerd.</p> </li> </ul>"},{"location":"levenscyclus/dataverkenning-en-datapreparatie/","title":"Fase 3: Dataverkenning en datapreparatie","text":"<p>In deze fase worden relevante datasets ge\u00efdentificeerd en wanneer nodig wordt nieuwe data verzameld.  In deze fase zal ook de ontwikkelomgeving (verder) worden ingericht indien nodig.  Het is van belang dat voorafgaand aan verzameling is vastgesteld dat de benodigde data mag worden verwerkt en dat de juiste maatregelen worden getroffen, zodra de data kan worden verwerkt.  Denk hierbij aan het anonimiseren, pseudonimiseren of aggregeren van persoonsgegevens.  De data zullen vervolgens worden opgeschoond, geanalyseerd en voorbereid voor verdere verwerking. </p> <p>Het is van belang dat dataverzameling op de juiste manier gebeurt, en dat datasets die gebruikt gaan worden van goede kwaliteit zijn.  In deze fase is het van belang om de datakwaliteit en eventuele bias in de dataset te onderzoeken.  Indien er risico's optreden door bijvoorbeeld missende data of niet representatieve data, is het belangrijk om te kijken wat voor effecten dit heeft op het oorspronkelijke ontwerp van het algoritme.  Dit kan betekenen dat nieuwe keuzes moeten worden gemaakt in het ontwerp en eventueel eerste deze fase van ontwerp (deels) opnieuw moet worden doorlopen. </p> <p>Met voorgaande handelingen wordt het fundament gelegd om het algoritme te kunnen ontwikkelen.  In de praktijk zal bijvoorbeeld het analyseren van de data niet stoppen na deze fase, maar terugkerend zijn in alle fasen die volgen.  Als de verzamelde data van voldoende kwaliteit is en de vereiste maatregelen zijn getroffen, dan kan worden gestart met het ontwikkelen van het algoritme. </p>"},{"location":"levenscyclus/implementatie/","title":"Fase 6: Implementatie","text":"<p>In deze fase wordt het algoritme in de praktijk gebracht en duurzaam ge\u00efntegreerd in het bedrijfsproces.  In de praktijk worden veelal eerst een pilot uitgevoerd voor een afgebakende periode of over een beperkt aan zaken.  In deze situatie, een pilot, wordt tijdelijk productiedata verwerkt.  Dit vraagt om een goede samenwerking tussen het ontwikkelteam en de gebruikers van het algoritme.  Niet alleen de prestaties van het algoritme worden nogmaals gevalideerd, maar bijvoorbeeld ook of de output zodanig wordt gepresenteerd dat gebruikers hiermee kunnen werken.  Na deze pilot wordt onderzocht in hoeverre het algoritme presteert conform wens en verwachting.  Er kan worden gekozen om het algoritme eerst nog door te ontwikkelen op basis van de bevindingen, uit te faseren of om de oplossing structureel onderdeel te maken van de bedrijfsvoering door het te implementeren. </p> <p>Als een besluit wordt genomen om de oplossing te implementeren, dan is het van belang dat gebruikers goed begrijpen hoe de resultaten van het algoritme moeten worden ge\u00efnterpreteerd, dat de rest-risico's bekend zijn, de verantwoordelijkheden belegd zijn en dat er duidelijke werkinstructies zijn over het gebruik van het algoritme. Service- en incidentmanagement moet volledig worden geoperationaliseerd, zodat gebruikers kunnen worden geholpen bij vragen of incidenten.  Een kenmerkend element van deze fase is dat vanaf nu betrokkenen onderhevig zijn aan de werking van het algoritme.  Beslissingen en besluiten komen nu bijvoorbeeld mede of geheel door de werking van het algoritme tot stand.  Waar passend, bijvoorbeeld bij impactvolle of hoog risico AI-systemen wordt dit duidelijk gecommuniceerd naar betrokken, voordat de oplossing volledig is ge\u00efmplementeerd.  </p>"},{"location":"levenscyclus/monitoring-en-beheer/","title":"Fase 7: Monitoring en beheer","text":"<p>Het algoritme wordt in deze fase voortdurend gemonitord om ervoor te zorgen dat het blijft presteren zoals verwacht en kan worden gebruikt door gebruikers.  Eventuele afwijkingen of degradatie van prestaties worden gesignaleerd en er worden maatregelen getroffen om dit te herstellen.  Dit is van belang vanuit een technisch perspectief (presteert het model nog wel waar het voor ontworpen is), maar ook vanuit een juridische en ethische blik (functioneert het model nog wel rechtmatig en zijn er geen onvoorziene nadelige effecten op mens en maatschappij).  Hierbij dient ook voortdurend gemonitord te worden of de omstandigheden waarin het algoritme wordt gebruikt veranderlijk zijn, en of daar op geanticipeerd moet worden.  Dit kan bijvoorbeeld spelen bij veranderende data of bij het uitvoeren van nieuw beleid of wet- en regelgeving in het werkproces dat wordt ondersteund met het algoritme. </p> <p>Het is van belang dat beheer wordt uitgevoerd over het algoritme, zodat de (gehele) oplossing operationeel blijft.  Een wijziging in onderliggende systemen kan er bijvoorbeeld voor zorgen dat het algoritme niet meer wordt voorzien van de noodzakelijk data om de benodigde output te genereren.  Het beheerteam zorgt ervoor dat dergelijke situaties worden voorkomen of opgelost. Er kunnen ook incidenten worden gemeld door gebruikers die worden opgelost door het beheerteam.  </p>"},{"location":"levenscyclus/ontwerp/","title":"Fase 2: Ontwerp","text":"<p>In de ontwerpfase wordt het conceptuele ontwerp van het algoritme uitgedacht.  Het is van belang om belangrijke uitgangspunten en beleid, zoals doelarchitectuur en de datastrategie, van de betreffende organisatie meteen te verwerken in het ontwerp en dat het applicatielandschap en de databronnen in beeld wordt gebracht.  In deze fase worden doorgaans veel werkzaamheden verzet, zoals business- en informatieanalyse, om een goed beeld te krijgen hoe aan de beoogde doelstellingen kan worden voldaan met een passende oplossing.  </p> <p>Het is goed denkbaar dat meerdere ontwerpen in deze fase tot stand komen voor het te ontwikkelen algoritme.  Het is van belang om deze ontwerpen te toetsen bij bijvoorbeeld de proceseigenaar, opdrachtgever en gebruiker, maar ook bij informatiebeveiligingsadviseurs, privacy officers, informatiebeheerders, architecten of een ethicus.  Deze experts kunnen vanuit hun vakgebied een eerste toets doen in hoeverre het ontwerp haalbaar of gewenst is, aansluit bij de gebruikersbehoefte, aan welke vereisten moet worden voldaan of dat er risicoanalyses moeten worden uitgevoerd en een onafhankelijke commissies moet worden betrokken.</p> <p>Met deze input kan het ontwerp worden verbeterd en vraagstukken over bijvoorbeeld governance en risicomanagement verder worden uitgewerkt.  In deze fase kan ook een eerste stap worden gezet om de vereisten te vertalen naar concrete maatregelen, te structureren en te beleggen bij de betrokken experts.  Als bijvoorbeeld is vastgesteld dat persoonsgegevens noodzakelijkerwijs moeten worden verwerkt en hier een grondslag voor is, dan is het van belang dat voorafgaand aan de dataverkenning en datapreparatie fase voldoende (technische) maatregelen zijn getroffen om de data veilig te verwerken in de beoogde (ontwikkel)omgeving. </p> <p>Daarnaast dient er in de ontwerpfase ook aandacht besteed te worden aan de succesfactoren van een algoritme.  Het is belangrijk om in een multidisciplinaire setting te bepalen hoe het algoritme in de praktijk ge\u00ebvalueerd kan worden en wanneer we kunnen spreken van een rechtvaardig succes. Hierbij dient er ook te worden nagedacht over evaluatiemethoden om na te gaan of het algoritme voldoet aan bijvoorbeeld het vereiste van non-discriminatie. </p> <p>Nadat een besluit is genomen over het definitieve ontwerp van het algoritme, kan worden gestart met het inrichten van de ontwikkelomgeving (indien nodig), de dataverkenning, datapreparatie.  Dit besluit betekent dat een akkoord wordt gegeven voor het type algoritme en de beoogde werking.  </p>"},{"location":"levenscyclus/ontwikkelen/","title":"Fase 4: Ontwikkelen","text":"<p>Dit is de fase waarin het algoritme wordt ontwikkeld door het ontwikkelteam.  Als het gaat om AI-systemen, omvat deze fase het trainen van modellen met behulp van de voorbereide gegevens. Als het gaat om algoritmes op basis van rekenregels, betreft dit het implementeren van deze rekenregels in de (ontwikkelomgeving van de) systemen.  </p> <p>Het algoritme technisch correct ontwikkelen, inclusief het kunnen begrijpen van de beperkingen ervan, vraagt om een samenspel van expertise vanuit verschillende disciplines.  Denk hierbij aan de proceseigenaar, domeinexperts van het te ondersteunen werkproces, data scientists, data engineer, (privacy)juristen, beleidsmedewerkers en een ethicus.  Een voorbeeld hiervan is het beoordelen van de zogenaamde inputvariabelen of rekenregels (die voor een groot deel bepalen hoe een algoritme functioneert) van een machine learning model of algoritme.  Deze rollen zijn bijzonder waardevol bij het beoordelen of deze variabelen of rekenregels juridisch zijn toegestaan, ethisch wenselijk zijn, technisch gezien- voldoende significant zijn en of deze van toegevoegde waarde zijn voor gebruikers.  Dit multidisciplinaire team kan tijdens de ontwikkeling continu bijsturen, zodat het algoritme op een verantwoorde wijze functioneert en aansluit bij de beoogde doelstellingen.  </p> <p>In deze fase is niet alleen het ontwikkelen van een algoritme, maar ook het documenteren van belangrijke afwegingen en het opstellen van technische documentatie van groot belang.  Daarnaast zullen tal van (technische) maatregelen moeten worden getroffen zoals de verdere beveiliging van het informatiesysteem of bij de ontsluiting van de output naar gebruikers, het automatische genereren van logs en het inrichten van service en incidentmanagementprocedures.  </p>"},{"location":"levenscyclus/organisatieverantwoordelijkheden/","title":"Fase 0: Organisatieverantwoordelijkheden","text":"<p>Voordat je start met de ontwikkeling of het gebruik van een algoritme, zul je moeten zorgen dat je organisatie voldoende ingericht is om algoritmes te gebruiken of te ontwikkelen.  In deze fase beschrijven we de randvoorwaarden die je als organisatie moet hebben om aan de slag te gaan. Dit zijn aspecten die je in het ideale geval al regelt voordat je begint aan het gebruik van algoritmes. Het zijn ook taken die je voortdurend aandacht zal moeten geven, maar die je niet voor ieder algorite opnieuw hoeft te organiseren. </p>"},{"location":"levenscyclus/over-de-levenscyclus/","title":"Over de levenscyclus","text":"<p>Om algoritmes op een verantwoorde manier te gebruiken, zul je op de juiste momenten aandacht moeten hebben voor de juiste onderwerpen en risico's. Van het ontwikkelen van een oplossing, tot het in gebruik nemen van die oplossing en er uiteindelijk weer mee stoppen. Door al in een vroeg stadium aandacht besteden aan bijvoorbeeld een eventuele inbreuk op mensenrechten kan je hier gedurende het hele proces al rekening mee houden. De levenscyclus helpt je om te bepalen wat je wanneer moet doen.</p> <pre><code>  flowchart TD\n      subgraph organisatieniveau [organisatieniveau &amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp]\n        0(0. Organisatieverantwoordelijkheden) --&gt; 1(1. Probleemanalyse);\n        subgraph systeemniveau [systeemniveau &amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp&amp;nbsp]\n          7(7. Monitoring en beheer) --&gt; 1(1. Probleemanalyse);\n          1(1. Probleemanalyse) --&gt; 2(2. Ontwerp);\n          2(2. Ontwerp) --&gt; 3(3. Dataverkenning en datapreparatie);\n          3(3. Dataverkenning en datapreparatie) --&gt; 4(4. Ontwikkelen);\n          4(4. Ontwikkelen) --&gt; 5(5. Verificatie en validatie);\n          5(5. Verificatie en validatie) --&gt; 6(6. Implementatie);\n          6(6. Implementatie) --&gt; 7(7. Monitoring en beheer);\n          7(7. Monitoring en beheer) -.-&gt; 8(8. Uitfaseren);\n        end\n      end\n      click 0 href \"organisatieverantwoordelijkheden\"\n      click 1 href \"probleemanalyse\"\n      click 2 href \"ontwerp\"\n      click 3 href \"dataverkenning-en-datapreparatie\"\n      click 4 href \"ontwikkelen\"\n      click 5 href \"verificatie-en-validatie\"\n      click 6 href \"implementatie\"\n      click 7 href \"monitoring-en-beheer\"\n      click 8 href \"uitfaseren\"\n      style 0 color:#fff, fill:#1975d2, stroke:#1975d2, text-decoration:underline;\n      style 1 color:#fff, fill:#1975d2, stroke:#1975d2, text-decoration:underline;\n      style 2 color:#fff, fill:#1975d2, stroke:#1975d2, text-decoration:underline;\n      style 3 color:#fff, fill:#1975d2, stroke:#1975d2, text-decoration:underline;\n      style 4 color:#fff, fill:#1975d2, stroke:#1975d2, text-decoration:underline;\n      style 5 color:#fff, fill:#1975d2, stroke:#1975d2, text-decoration:underline;\n      style 6 color:#fff, fill:#1975d2, stroke:#1975d2, text-decoration:underline;\n      style 7 color:#fff, fill:#1975d2, stroke:#1975d2, text-decoration:underline;\n      style 8 color:#fff, fill:#1975d2, stroke:#1975d2, text-decoration:underline;\n      style organisatieniveau fill:transparant</code></pre> <p>Tip</p> <p>In de praktijk herhaal je soms fases of ga je terug naar een eerdere fase. Mislukt bijvoorbeeld het valideren (fase 5), dan moet je terug naar de ontwerpfase (fase 2) omdat het product nog niet voldoet aan de wensen of vereisten.</p>"},{"location":"levenscyclus/over-de-levenscyclus/#fases-van-de-levenscyclus","title":"Fases van de levenscyclus","text":"<ol> <li> Organisatieverantwoordelijkheden</li> <li> Probleemanalyse</li> <li> Ontwerp</li> <li> Dataverkenning en datapreparatie</li> <li> Ontwikkelen</li> <li> Verificatie en validatie</li> <li> Implementeren</li> <li> Monitoring en beheer</li> <li> Uitfaseren</li> </ol>"},{"location":"levenscyclus/over-de-levenscyclus/#systeemniveau-en-organisatieniveau","title":"Systeemniveau en organisatieniveau","text":"<p>De levenscyclus kent 2 verschillende niveau's: </p> <ul> <li>organisatieniveau: Sommige vereisten zijn algemeen en vragen om een organisatiebrede aanpak. Dit gaat bijvoorbeeld om passende processen en risicomanagment in je organisatie. Of het cre\u00eberen van bewustzijn en kennis binnen je organisatie. In het ideale geval besteed je hier al aandacht aan voordat je begint met de ontwikkeling of het gebruik van algoritmes. Bij deze fase horen maatregelen die je niet voor ieder systeem opnieuw zal hoeven te bekijken.</li> <li>systeemniveau: Sommige vereisten voor verantwoorde inzet van algoritmes zul je bij ieder algoritme weer opnieuw aandacht moeten geven. Dat geldt bijvoorbeeld voor het beschermen van grondrechten. </li> </ul>"},{"location":"levenscyclus/over-de-levenscyclus/#andere-levenscyclusmodellen","title":"Andere levenscyclusmodellen","text":"<p>De 9 fasen van de levenscyclus zijn gebaseerd op 10 belangrijke levenscyclusmodellen voor het ontwikkelen van AI, zoals:</p> <ul> <li>CRISP-DM (cross-industry standard process for data mining)</li> <li>ASUM-DM (analytics solutions unified method)</li> <li>SEMMA (Sample, Explore, Modify, Model, and Assess)</li> <li>Microsoft TDSP (Team Data Science Process)</li> <li>MDLM (mobile device lifecycle management)</li> <li>NIST (National Institute of Standards and Technology)</li> <li>ISO/IEC 22989</li> </ul> <p>Deze 9 fasen passen zo goed mogelijk bij de manier van werken van overheden. Het is geen verplicht model. Mogelijk past een ander levenscyclusmodel beter bij jouw organisatie.</p>"},{"location":"levenscyclus/probleemanalyse/","title":"Fase 1: Probleemanalyse","text":"<p>In deze fase wordt het probleem en de doelstellingen van een opdrachtgever geanalyseerd en beschreven.  Er wordt bijvoorbeeld onderzocht welke publieke taak moet worden ondersteund en welke publieke waarden daarbij moeten worden beschermd of juist gerealiseerd.  In deze fase wordt onderzocht of het ontwikkelen van een algoritme een geschikt middel is om het doel te realiseren en het probleem op te lossen. Dat hangt van verschillende zaken af. </p> <p>Hierbij kan worden gedacht aan de middelen (capaciteit en financi\u00eble middelen) die nodig zijn om algoritmen op een verantwoorde wijze te ontwikkelen, de complexiteit van de oplossing, het in beeld brengen van de verwachte risico's (hoog over), een eerste beeld krijgen bij wat voor data nodig zijn en het in kaart brengen en beleggen van de verschillende verantwoordelijkheden.  Daarnaast is het van belang om het beleid met betrekking tot de inzet van algoritme een organisatie te raadplegen.  </p> <p>Er zal een conclusie moeten volgen of de ontwikkeling van een algoritme passend is.  Deze fase wordt doorgaans afgerond met een akkoord van de (gemandateerd) verantwoordelijk(en)/opdrachtgever om een algoritme te ontwikkelen.  Een vastgestelde business case of plan van aanpak vormen veelal de basis om de ontwerpfase te starten met de benodigde experts. </p>"},{"location":"levenscyclus/uitfaseren/","title":"Fase 8: Uitfaseren","text":"<p>Als wordt besloten dat het algoritme niet langer nodig is of wordt vervangen door een wezenlijk andere versie, wordt het gearchiveerd en uitgefaseerd.  Hiermee wordt ervoor gezocht dat later kan worden gereconstrueerd hoe het algoritme heeft gefunctioneerd en dat gebruikers er geen gebruik meer van kunnen maken.  </p> <p>Archiveren betekent dat documentatie en eventuele relevante artefacten (zoals logbestanden en de parameters van het model) worden bewaard voor een bepaalde periode.  Het gaat daarbij ook om informatie over het algoritme, bijvoorbeeld het besluit en onderbouwing waarom het niet meer wordt gebruikt en waarom het in het verleden wel gebruikt werd.  Archiveren is niet enkel relevant aan het einde van de levenscyclus, maar is ook gedurende het gebruik van het algoritme van belang.  Er moet tijdig worden vastgesteld welke versies van een model moeten worden gearchiveerd, bijvoorbeeld al tijdens de ontwerpfase. </p> <p>Bij AI-systemen is er in praktijk vaak sprake van hertrainen op nieuwe data, wat het model anders maakt en andere voorspellingen kan doen geven.  Ook meer eenvoudige algoritmes kunnen gedurende de tijd veranderen en andere voorspellingen geven, bijvoorbeeld door veranderende data of veranderende rekenregels.  Er moet worden vastgesteld welke versies van een model moet gearchiveerd. </p> <p>Bij uitfaseren wordt het algoritme verwijderd uit de productieomgeving en, na archivering, wordt de trainingsdata uit de ontwikkelomgeving verwijderd.  Het algoritme is hiermee niet meer te gebruiken door gebruikers.  Gebruikers moeten hier vooraf over worden ge\u00efnformeerd en waar passend, bijvoorbeeld bij impactvolle of hoog risico AI-systemen, worden betrokkenen ge\u00efnformeerd over het be\u00ebindigen van het gebruik. </p>"},{"location":"levenscyclus/verificatie-en-validatie/","title":"Fase 5: Verificatie en validatie","text":"<p>Bij de verificatie en validatie van het algoritme dient bepaald te worden of het algoritme gebouwd is volgens de (technische) specificaties en voldoet aan de beoogde doelstellingen.  Hiervoor moeten technische, maar ook organisatorische maatregelen worden getroffen.  </p> <p>Bij verificatie kan worden gedacht aan het (laten) controleren of het algoritme voldoet aan de (technische) specificaties, bijvoorbeeld door een interne of externe audit of in de toekomst een conformiteitsbeoordeling voor hoog risico AI-systemen.  Hiermee kan (onafhankelijk) worden vastgesteld of het systeem voldoet aan de vereisten die organisaties daaraan stellen.  Op basis van bevindingen uit een audit of conformiteitsbeoordeling, is het denkbaar dat het ontwikkelteam nog bepaalde maatregelen moet treffen om te voldoen aan de specificaties. </p> <p>Bij het valideren van een algoritme moet worden bepaald of het goed genoeg presteert en of het geschikt is voor het beoogde doel van het systeem.  Wanneer het een AI-systeem betreft, is het belangrijk dat dit gevalideerd wordt op nieuwe, niet eerder geziene data.  Het valideren betreft het iteratief evalueren van de nauwkeurigheid en prestaties van het systeem.  Daarnaast is het ook belangrijk om te valideren of het algoritme gelijke prestaties toont voor verschillende groepen en om te testen hoe het algoritme presteert in uitzonderlijke gevallen.  Het is net als in de ontwerpfase belangrijk dat een multidisciplinair team beoordeelt of de werking passend en bijvoorbeeld non-discriminatoir is.  In het geval van impactvolle algoritmen of hoog risico AI-systemen, is het raadzaam om een onafhankelijke commissie of partij te betrekken die een advies geeft over de werking van het algoritme of AI-systeem.  </p> <p>In praktijk zal vaak na validatie weer worden teruggegaan naar de ontwikkelfase om prestaties van het model te verbeteren voorafgaand aan implementatie van de oplossing.  Het is ook denkbaar dat het algoritme onvoldoende aansluit bij de doelstellingen en het gebruik ervan moet wordt be\u00ebindigd.  Een andere conclusie kan zijn dat het presteert conform verwachting en naar de implementatiefase kan worden gegaan.  </p>"},{"location":"onderwerpen/","title":"Onderwerpen","text":"<ul> <li> <p>Bias en non-discriminatie</p> <p>Hulp bij het voorkomen van bias en discriminatie in algoritmes. Met aanbevelingen en hulpmiddelen zoals het toetsingskader van het College voor de Rechten van de Mens.</p> </li> <li> <p>Data</p> <p>Hulp bij het verantwoord selecteren en verwerken van data voor je algoritmes. Gebruik bijvoorbeeld de toolbox verantwoord datagebruik.</p> </li> <li> <p>Duurzaamheid</p> <p>Hulp bij het maken van duurzame keuzes voor hardware en software. Bijvoorbeeld voor de aanschaf van apparaten of het energieverbruik van trainen en data-opslag.</p> </li> <li> <p>Governance</p> <p>Hulp bij het verantwoordelijk omgaan met algoritmes. Bijvoorbeeld het vastleggen van rollen en verantwoordelijkheden.</p> </li> <li> <p>Grondrechten</p> <p>Hulp bij het beschermen van grondrechten en mensenrechten in algoritmes. Bijvoorbeeld het beoordelen van de gevolgen per grondrecht.</p> </li> <li> <p>Menselijke controle</p> <p>Hulp bij de controle als mens over algoritmes. Bijvoorbeeld kunnen ingrijpen bij onbetrouwbare resultaten.</p> </li> <li> <p>Privacy en gegevensbescherming</p> <p>Hulp bij verantwoord gebruik van gegevens voor algoritmes, zoals persoonsgegevens en privacygevoelige gegevens.</p> </li> <li> <p>Publieke inkoop</p> <p>Hulp bij het publiek inkopen van software met algoritmen en AI. Met hulpmiddelen zoals modelcontracten en de PIANOo-handreiking Inkoop van algoritmes.</p> </li> <li> <p>Technische robuustheid en veiligheid</p> <p>Hulp bij het bewaken van de prestaties van algoritmes. En beveiliging van de systemen tegen bijvoorbeeld cyberaanvallen.</p> </li> <li> <p>Transparantie</p> <p>Hulp bij transparant zijn over algoritmes, zoals gebruikers informeren en publiceren in het algoritmeregister.</p> </li> </ul>"},{"location":"onderwerpen/bias-en-non-discriminatie/","title":"Bias en non-discriminatie","text":"<p>Algoritmes worden binnen de overheid veelvuldig ingezet om publieke taken uit te voeren. Dit biedt veel kansen, maar er zijn ook risico's aan verbonden. Hoewel algoritmes in sommige gevallen kunnen bijdragen aan het tegengaan van discriminatie, kan bias in het algoritme leiden tot een ongelijke en oneerlijke behandeling van burgers of groepen, en kan er sprake zijn van discriminerende effecten.  In dit bouwblok van het algoritmekader besteden we aandacht aan de onderwerpen bias, eerlijkheid en non-discriminatie.  We werken uit wat bias is, hoe bias kan ontstaan, hoe we dit kunnen signaleren, welke maatregelen er genomen kunnen worden om dit te voorkomen en geven we handvatten wat te doen wanneer een (onwenselijke) bias is gesignaleerd. </p> <p>Hierbij is het goed om op te merken dat het omgaan met het thema bias gedurende het ontwikkelen, inkopen of gebruik van het algoritme vraagt om continue aandacht voor dit onderwerp.  Het betreft geen probleem dat eenmalig kan worden weggenomen. Het vraagt voortdurend om reflectie op eerlijkheid en rechtvaardigheid van het systeem. </p> <p>Dit bouwblok wordt uitgewerkt in vereisten die weergeven wat er vanuit wet- en regelgeving en bestaande toetsingskaders vereist is om bias en discriminatie tegen te gaan.  Daarbij worden er suggesties gedaan hoe deze vereisten kunnen worden nageleefd met concrete maatregelen, en welke actoren daarbij betrokken kunnen zijn.  Waar mogelijk worden concrete voorbeelden en best practices uit de praktijk gegeven en zal worden aangegeven bij welk type algoritmen of AI dit relevant is. Deze vereisten en maatregelen worden ook gekoppeld aan de algoritme levenscyclus.  Dit geeft een beeld van wanneer bepaalde vereisten of maatregelen, bij het ontwikkelen van algoritmen en AI, moeten worden geadresseerd.   </p> <p>Door bij de ontwikkeling van algoritmes rekening te houden met vereisten die voorkomen uit wet- en regelgeving, het type algoritme of AI en de potenti\u00eble risico\u2019s die ontstaan bij het gebruiken ervan, kunnen negatieve gevolgen worden voorkomen. </p> <p>De onderwerpen bias en non-discriminatie spelen daarom een belangrijke rol bij de totstandkoming van verantwoord ontwikkelde algoritmen en AI en het gebruik daarvan door ambtenaren. </p>"},{"location":"onderwerpen/bias-en-non-discriminatie/#wat-is-discriminatie-en-bias","title":"Wat is discriminatie en bias?","text":""},{"location":"onderwerpen/bias-en-non-discriminatie/#discriminatie","title":"Discriminatie","text":"<p>Artikel 1 van de Nederlandse Grondwet verbiedt discriminatie: </p> <p>Allen die zich in Nederland bevinden, worden in gelijke gevallen gelijk behandeld. Discriminatie wegens godsdienst, levensovertuiging, politieke gezindheid, ras, geslacht, handicap, seksuele gerichtheid of op welke grond dan ook, is niet toegestaan. </p> <p>De prominente positie in de Grondwet benadrukt het belang van het mensenrecht in Nederland.  De afgelopen jaren hebben incidenten in de praktijk de aandacht gericht op de discriminatoire effecten die algoritmes kunnen hebben.</p>"},{"location":"onderwerpen/bias-en-non-discriminatie/#bias","title":"Bias","text":"<p>Bias is een Engelse term die in het Nederlands wordt vertaald als vooroordeel, vooringenomenheid of neiging.  Omdat niet \u00e9\u00e9n van die termen helemaal de lading van het begrip bias dekt, maken we in het Algoritmekader gebruik van de term bias.  De term bias heeft verschillende betekenissen afhankelijk van de context waarin het gebruikt wordt en de disciplines die daarbij betrokken zijn.  Vaak wordt er naar bias gekeken als een technisch concept, maar het omvat daarnaast ook menselijke aspecten.  We starten met een verduidelijking hoe het begrip bias in algoritmische context gebruikt wordt en hoe dit in verhouding staat tot discriminatie.  Vervolgens maken we onderscheid tussen drie verschillende aspecten van bias: statistische bias, systemische bias en menselijke bias.  Deze drie aspecten van bias kunnen los van elkaar bestaan, maar kunnen juist in combinatie met elkaar tot problemen leiden. </p>"},{"location":"onderwerpen/bias-en-non-discriminatie/#bias-in-algoritmische-context","title":"Bias in algoritmische context","text":"<p>Het concept bias wordt in algoritmische context gedefinieerd als een systematisch verschil in behandeling van bepaalde objecten, mensen of groepen in vergelijking met anderen.<sup>1</sup></p> <p>Dit systematische verschil of onderscheid kan zowel op een directe als op een indirecte manier ontstaan. </p> <p>De Algemene wet gelijke behandeling spreekt van direct onderscheid wanneer een persoon op een andere wijze wordt behandeld dan een ander in een vergelijkbare situatie wordt, is of zou worden behandeld, op grond van godsdienst, levensovertuiging, politieke gezindheid, ras, geslacht, nationaliteit, hetero- of homoseksuele gerichtheid <sup>2</sup> of burgerlijke staat.</p> <p>De Algemene wet gelijke behandeling spreekt van indirect onderscheid indien een ogenschijnlijk neutrale bepaling, maatstaf of handelwijze personen met een bepaalde godsdienst, levensovertuiging, politieke gezindheid, ras, geslacht, nationaliteit, hetero- of homoseksuele gerichtheid <sup>2</sup> of burgerlijke staat in vergelijking met andere personen bijzonder treft. </p> <p>Een geconstateerd systematische onderscheid is niet altijd fout en is niet altijd verboden, maar het vraagt wel altijd om aandacht en zorgvuldigheid.  Het geconstateerde onderscheid kan in bepaalde situaties en onder bepaalde strikte voorwaarden gerechtvaardigd zijn.  Voor direct onderscheid kan er bijvoorbeeld sprake zijn van een wettelijke uitzondering die het gemaakte onderscheid toelaat.  Voor indirect onderscheid geldt dat behalve een wettelijke uitzondering er ook een objectieve rechtvaardiging kan bestaan, waarmee het geconstateerde onderscheid in bepaalde gevallen toelaatbaar kan zijn. </p> <p>Het maken van een eventueel onderscheid is in sommige gevallen nauw verbonden met het gebruik van algoritmes.  Soms worden algoritmes en AI bijvoorbeeld juist ingezet om op een zo objectief mogelijke manier te bepalen welke groepen meer of minder belang hebben bij een andere behandeling.  In deze gevallen zal er altijd na moeten worden gegaan of er sprake is van een objectieve rechtvaardiging voor het gemaakte onderscheid.</p> <p>Wanneer er geen rechtvaardiging is voor het gemaakte onderscheid, spreken we van een verboden direct of indirect onderscheid, ofwel discriminatie.  Het algoritme of AI-systeem mag in dat geval niet gebruikt worden. Bias vormt daarmee een risico op discriminatie.</p>"},{"location":"onderwerpen/bias-en-non-discriminatie/#fairness","title":"Fairness","text":"<p>In de context van algoritmes wordt de term unfairness gebruikt wanneer er sprake is van een ongerechtvaardigd onderscheid waarbij bepaalde groepen meer bevoordeeld worden dan andere.<sup>3</sup>  In de Nederlandse taal spreken we dan van oneerlijkheid of onrechtvaardigheid (of in positieve zin van respectievelijk fairness, eerlijkheid en rechtvaardigheid).  Wanneer we het hebben over fairness hebben we het minder over de juridische kant van discriminatie en verboden onderscheid.  Ook als er wel een objectieve rechtvaardiging bestaat voor een gemaakt onderscheid, kan afgevraagd worden of het gemaakte onderscheid ethisch wenselijk is. </p>"},{"location":"onderwerpen/bias-en-non-discriminatie/#statistische-bias","title":"Statistische bias","text":"<p>Statistische bias wordt gedefinieerd als een consistente numerieke afwijking van een schatting ten opzichte van de werkelijke onderliggende waarde.<sup>1</sup> Dit fenomeen kan in allerlei verschillende contexten plaatsvinden, niet alleen bij het gebruik van algoritmes.  Een voorbeeld is wanneer een bepaalde meting van een waarde niet goed gekalibreerd is en er sprake is van een consistente afwijking van de te meten waarde (bijvoorbeeld dat we consistent 10% hoger meten). </p> <p>In de context van algoritmes kan deze vorm van bias voorkomen wanneer er een steekproef wordt gebruikt die niet representatief is voor de populatie, en de schattingen op basis van de steekproef vervolgens systematisch afwijken van de werkelijke waarde in de gebruikte doelpopulatie. Statistische bias duidt op een systematische fout die gemaakt wordt door het algoritme.  Deze fout kan hetzelfde zijn voor alle groepen en hoeft daardoor niet in alle gevallen te duiden op ongelijke behandeling of discriminerende effecten.  Voorbeelden van statistische bias zijn meetfouten (measurement bias), foute data of data op een te simpele manier representeren (representatie bias).</p>"},{"location":"onderwerpen/bias-en-non-discriminatie/#systemische-bias","title":"Systemische bias","text":"<p>We spreken van systemische bias wanneer bepaalde processen of systemen op zo'n wijze worden gebruikt dat bepaalde groepen bevoordeeld worden en andere groepen benadeeld worden. Dit is vaak geen bewuste vorm van vooringenomenheid, maar kan bijvoorbeeld ontstaan doordat de meerderheid bestaande regels of normen volgt, en het systeem geoptimaliseerd is op de meerderheid. Systemische bias heeft een sterk institutioneel karakter. Systemische bias wordt daarom ook wel institutionele vooringenomenheid genoemd.  Deze vooroordelen zijn vaak verweven in de bredere cultuur en samenleving, en zitten daardoor ook in veel datasets.  Een veel voorkomend voorbeeld van systemische bias is historische bias. </p>"},{"location":"onderwerpen/bias-en-non-discriminatie/#menselijke-bias","title":"Menselijke bias","text":"<p>Menselijke bias omvat systematische fouten in het menselijk denken.  Deze (onbewuste) menselijke vooroordelen zijn vaak impliciet van aard en hebben betrekking op de manier waarop een individu bepaalde informatie waarneemt en verwerkt om bijvoorbeeld een beslissing te nemen.  In de context van algoritmes kan deze vorm van bias invloed hebben op de verzamelde data, op de wijze waarop het algoritme wordt geoptimaliseerd en de besluiten die door mensen worden genomen op basis van het algoritme. Voorbeelden van vormen menselijke bias zijn wanneer er voorkeur wordt geven aan de voorspellingen van een algoritme die reeds bestaande overtuigingen bevestigen (bevestigingsbias), of wanneer mensen de neiging hebben om voorkeur te geven aan suggesties die door het algoritme worden gedaan (automatiseringsbias)</p>"},{"location":"onderwerpen/bias-en-non-discriminatie/#overzicht-van-gebruikte-definities","title":"Overzicht van gebruikte definities","text":"<p>Onderstaand bieden we een overzicht van de gebruikte definities in het algoritmekader die betrekking hebben op het onderwerp bias en non-discriminatie. </p> Term of begrip Definitie Bron direct onderscheid indien een persoon op een andere wijze wordt behandeld dan een ander in een vergelijkbare situatie wordt, is of zou worden behandeld, op grond van godsdienst, levensovertuiging, politieke gezindheid, ras, geslacht, nationaliteit, hetero- of homoseksuele gerichtheid<sup>2</sup> of burgerlijke staat Algemene wet gelijke behandeling indirect onderscheid indien een ogenschijnlijk neutrale bepaling, maatstaf of handelwijze personen met een bepaalde godsdienst, levensovertuiging, politieke gezindheid, ras, geslacht, nationaliteit, hetero- of homoseksuele gerichtheid<sup>2</sup> of burgerlijke staat in vergelijking met andere personen bijzonder treft. Algemene wet gelijke behandeling discriminatie mensen anders behandelen, achterstellen of uitsluiten op basis van (persoonlijke) kenmerken. College voor de rechten van de mens directe discriminatie de ongelijke behandeling van een persoon of groep personen ten opzichte van andere personen in een vergelijkbare situatie, op grond van een beschermd persoonskenmerk (discriminatiegrond). College voor de rechten van de mens, Discriminatie door risicoprofielen - een mensenrechtelijk toetsingskader indirecte discriminatie wanneer een ogenschijnlijk neutrale bepaling, maatstaf of handelwijze personen met een bepaald beschermd persoonskenmerk (discriminatiegrond) in vergelijking met andere personen in het bijzonder benadeelt, tenzij hiervoor een objectieve rechtvaardiging bestaat. College voor de rechten van de mens, Discriminatie door risicoprofielen - een mensenrechtelijk toetsingskader algoritmische fairness het vakgebied dat bestudeert hoe algoritmische systemen zich moeten gedragen om mensen eerlijk te behandelen, dat wil zeggen zonder discriminatie op grond van beschermde gevoelige kenmerken zoals leeftijd, geslacht, handicap, etnische of raciale afkomst, religie of geloofsovertuiging, of seksuele geaardheid The fairness handbook ground truth (NL vertaling?) waarde van de doelvariabele voor een bepaald item van gelabelde invoergegevens. <sup>5</sup> NEN-EN-ISO/IEC 22989:2023 en <sup>4</sup> etnisch profileren Het gebruik door overheidsinstanties van selectiecriteria als ras, huidskleur, taal, religie, nationaliteit of nationale of etnische afkomst bij de uitoefening van toezichts-, handhavings- en opsporingsbevoegdheden, zonder dat daarvoor een objectieve en redelijke rechtvaardiging bestaat. College voor de rechten van de mens, Discriminatie door risicoprofielen - een mensenrechtelijk toetsingskader discriminatiegrond Beschermde persoonskenmerken op basis waarvan het maken van onderscheid tussen personen verboden is. Bijvoorbeeld: ras, nationaliteit, religie, geslacht, seksuele gerichtheid, handicap of chronische ziekte College voor de rechten van de mens, Discriminatie door risicoprofielen - een mensenrechtelijk toetsingskader risicoprofiel Een verzameling van \u00e9\u00e9n of meer selectiecriteria op basis waarvan een bepaald risico op normovertreding wordt ingeschat en een selectiebeslissing wordt gemaakt. College voor de rechten van de mens, Discriminatie door risicoprofielen - een mensenrechtelijk toetsingskader groep deelverzameling van objecten in een domein die zijn gekoppeld omdat ze gemeenschappelijke kenmerken hebben. ISO/IEC TR 24027:2021 en <sup>4</sup>"},{"location":"onderwerpen/bias-en-non-discriminatie/#verschillende-vormen-van-bias","title":"Verschillende vormen van bias","text":"<p>Omdat bias op verschillende manieren kan ontstaan, zijn er allerlei verschillende vormen van bias, die hieronder gedefinieerd worden. Deze lijst is niet uitputtend. </p> Begrip Definitie Bron automatiseringsbias de neiging van mensen om de voorkeur te geven aan suggesties van geautomatiseerde besluitvormingssystemen en om tegenstrijdige informatie te negeren die zonder automatisering is verkregen, zelfs als deze correct is ISO/IEC TR 24027:2021 en <sup>4</sup> data bias dataeigenschappen die, als ze niet worden aangepakt, leiden tot AI-systemen die beter of slechter presteren voor verschillende groepen ISO/IEC TR 24027:2021 en <sup>4</sup> statistische bias soort consistente numerieke afwijking in een schatting ten opzichte van de werkelijke onderliggende waarde, inherent aan de meeste schattingen ISO/IEC TR 24027:2021 en <sup>4</sup> historische bias verwijzend naar de langdurige vooroordelen die in de loop der tijd in de samenleving zijn gecodeerd. Verwant aan, maar verschillend van, vooroordelen in historische beschrijving, of de interpretatie, analyse en verklaring van de geschiedenis. Een veel voorkomend voorbeeld van historische vooringenomenheid is de neiging om de wereld te bekijken vanuit een Westers of Europees perspectief NIST, Towards a Standard for identifying and managing bias in artificial intelligence activiteitenbias een soort selectievooroordeel dat optreedt wanneer systemen/platforms hun trainingsgegevens krijgen van de meest actieve gebruikers, in plaats van minder actieve (of inactieve) gebruikers. NIST, Towards a Standard for identifying and managing bias in artificial intelligence versterkingsbias ontstaat wanneer de verdeling over voorspellingsoutputs scheef is in vergelijking met de prior-verdeling van het voorspellingsdoel. NIST, Towards a Standard for identifying and managing bias in artificial intelligence cognitieve bias een brede term die in het algemeen verwijst naar een systematisch patroon van afwijking van rationele oordeels- en besluitvorming. In vele decennia van onderzoek naar oordeelsvorming en besluitvorming is een grote verscheidenheid aan cognitieve vertekeningen ge\u00efdentificeerd, waarvan sommige adaptieve mentale snelkoppelingen zijn die bekend staan als heuristieken. NIST, Towards a Standard for identifying and managing bias in artificial intelligence bevestigingsbias soort menselijke cognitieve bias die de voorkeur geeft aan voorspellingen van AI-systemen die reeds bestaande overtuigingen of hypotheses bevestigen ISO/IEC TR 24027:2021 en <sup>4</sup> implementatie bias ontstaat wanneer systemen worden gebruikt als beslissingshulp voor mensen, omdat de menselijke tussenpersoon kan handelen op voorspellingen op manieren die meestal niet zijn gemodelleerd in het systeem. Het zijn echter nog steeds individuen die het gebruikte systeem gebruiken NIST, Towards a Standard for identifying and managing bias in artificial intelligence evaluatie bias ontstaat wanneer de test- of externe benchmarkpopulaties niet in gelijke mate de verschillende delen van de gebruikerspopulatie vertegenwoordigen of door het gebruik van prestatiemaatstaven die niet geschikt zijn voor de manier waarop het model zal worden gebruikt NIST, Towards a Standard for identifying and managing bias in artificial intelligence meetbias ontstaat wanneer kenmerken en labels benaderingen zijn voor gewenste grootheden, waarbij mogelijk belangrijke factoren worden weggelaten of groeps- of ingangsafhankelijke ruis wordt ge\u00efntroduceerd die leidt tot differenti\u00eble prestaties. NIST, Towards a Standard for identifying and managing bias in artificial intelligence representatie bias ontstaat doordat subgroepen niet willekeurig worden geselecteerd in een steekproef, waardoor trends die voor \u00e9\u00e9n populatie worden geschat, niet generaliseerbaar zijn naar gegevens van een nieuwe populatie NIST, Towards a Standard for identifying and managing bias in artificial intelligence"},{"location":"onderwerpen/bias-en-non-discriminatie/#discriminatiegrond","title":"Discriminatiegrond","text":"<p>De discriminatiegrond beschrijft de beschermde persoonskenmerken op basis waarvan het maken van onderscheid tussen personen verboden is. Deze gronden zijn in verschillende bronnen vastgelegd. </p>"},{"location":"onderwerpen/bias-en-non-discriminatie/#de-grondwet","title":"De grondwet","text":"<p>De Grondwet stelt dat discriminatie wegens:</p> <ul> <li>godsdienst </li> <li>levensovertuiging </li> <li>politieke gezindheid </li> <li>ras </li> <li>geslacht </li> <li>handicap</li> <li>seksuele gerichtheid</li> <li>of op welke grond dan ook</li> </ul> <p>niet is toegestaan. </p>"},{"location":"onderwerpen/bias-en-non-discriminatie/#de-algemene-wet-gelijke-behandeling","title":"De Algemene wet gelijke behandeling","text":"<p>De Algemene wet gelijke behandeling legt een verbod onderscheid neer op grond van:</p> <ul> <li>godsdienst</li> <li>levensovertuiging</li> <li>politieke gezindheid</li> <li>ras</li> <li>geslacht</li> <li>nationaliteit</li> <li>hetero- of homoseksuele gerichtheid <sup>2</sup></li> <li>of burgelijke staat. </li> </ul> <p>Het in deze wet neergelegde verbod van onderscheid geldt niet ten aanzien van indirect onderscheid indien dat onderscheid objectief gerechtvaardigd wordt door een legitiem doel en de middelen voor het bereiken van dat doel passend en noodzakelijk zijn.</p>"},{"location":"onderwerpen/bias-en-non-discriminatie/#europees-verdrag-voor-de-rechten-van-de-mens","title":"Europees Verdrag voor de Rechten van de Mens","text":"<p>Het Europees Verdrag voor de Rechten van de Mens, artikel 14 stelt dat het genot van de rechten en vrijheden die in dat verdrag zijn vermeld, moet worden verzekerd zonder enig onderscheid op welke grond dan ook, zoals:</p> <ul> <li>geslacht</li> <li>ras</li> <li>kleur</li> <li>taal</li> <li>godsdienst</li> <li>politieke of andere mening</li> <li>nationale of maatschappelijke afkomst</li> <li>het behoren tot een nationale minderheid</li> <li>vermogen</li> <li>geboorte</li> <li>of andere status. </li> </ul>"},{"location":"onderwerpen/bias-en-non-discriminatie/#handvest-van-de-grondrechten-van-de-europese-unie","title":"Handvest van de grondrechten van de Europese Unie","text":"<p>Het Handvest van de grondrechten van de Europese Unie, artikel 21 stelt dat iedere discriminatie, met name op grond van:</p> <ul> <li>geslacht</li> <li>ras</li> <li>kleur</li> <li>etnische of sociale afkomst</li> <li>genetische kenmerken</li> <li>taal</li> <li>godsdienst</li> <li>politieke of andere denkbeelden</li> <li>het behoren tot een nationale minderheid</li> <li>vermogen</li> <li>geboorte</li> <li>een handicap</li> <li>leeftijd</li> <li>of seksuele gerichtheid</li> </ul> <p>is verboden. Daarnaast wordt expliciet vermeld dat binnen de werkingssfeer van de Verdragen en onverminderd de bijzondere bepalingen ervan, iedere discriminatie op grond van nationaliteit verboden is.</p> <p>Disclaimer</p> <p>Het Algoritmekader is nog volop in ontwikkeling. Op deze plek willen we vooral aan de slag gaan op een open en transparante wijze. Het is dus niet definitief. Dat betekent dat er dingen opstaan die niet af zijn en soms zelfs fout. Mocht er iets niet kloppen, laat het ons weten via GitHub.</p>"},{"location":"onderwerpen/bias-en-non-discriminatie/#mogelijke-hulpmiddelen-en-methoden","title":"Mogelijke hulpmiddelen en methoden","text":"HulpmiddelenThe Fairness HandbookHandreiking non-discriminatie by designDiscriminatie door risicoprofielen - Een mensenrechtelijk toetsingskader <ol> <li> <p>Zie ISO/IEC TR 24027:2021 en <sup>4</sup> \u21a9\u21a9</p> </li> <li> <p>Er is een wetsvoorstel om de term 'hetero- of homoseksuele gerichtheid' in de Algmemene wet gelijke behandeling (Awgb) te wijzigingen in 'seksuele gerichtheid'.  Met deze wijziging sluit de Awgb aan bij een eerdere wijziging van artikel 1 van de Grondwet.\u00a0\u21a9\u21a9\u21a9\u21a9\u21a9</p> </li> <li> <p>Zie NEN-EN-ISO/IEC 22989:2023 en <sup>4</sup> \u21a9</p> </li> <li> <p>Hoewel het gebruik van de NEN-ISO-normen in het Algoritmekader auteursrechtelijk is beschermd, heeft het Nederlands Normalisatie Instituut (NEN) voor het gebruik in het Algoritmekader toestemming verleend. Zie nen.nl voor meer informatie over NEN en het gebruik van hun producten.\u00a0\u21a9\u21a9\u21a9\u21a9\u21a9\u21a9\u21a9\u21a9</p> </li> <li> <p>De term ground truth impliceert niet dat de gelabelde invoergegevens consistent overeenkomen met de werkelijke waarde van de doelvariabelen.\u00a0\u21a9</p> </li> </ol>"},{"location":"onderwerpen/data/","title":"Verantwoord datagebruik","text":"<p>Overheden moeten verantwoord omgaan met de data die hun algoritmes gebruiken. De data moet voldoen aan regels voor bijvoorbeeld privacy. De kwaliteit van de data moet goed zijn. En overheden moeten deze gegevens goed beheren. Anders is het algoritme niet betrouwbaar.  </p>"},{"location":"onderwerpen/data/#wat-is-verantwoord-datagebruik","title":"Wat is verantwoord datagebruik?","text":"<p>Verantwoord datagebruik betekent:</p> <ul> <li>Rechtmatig gebruik van gegevens </li> <li>Goede datakwaliteit</li> <li>Goed databeheer</li> </ul>"},{"location":"onderwerpen/data/#rechtmatig-gebruik-van-data","title":"Rechtmatig gebruik van data","text":"<p>Net als organisaties mogen algoritmes niet zomaar gegevens verzamelen en gebruiken. Dit moet rechtmatig gebeuren: volgens de wettelijke regels. Zo moet je rekening houden met auteursrechten. Ook v\u00f3\u00f3rdat het algoritme in gebruik is, moet je rechtmatig omgaan met data. Dus tijdens het trainen, valideren en testen.</p> <p>Andere belangrijke regels gaan over privacy. Zo mag je algoritme alleen de minimale persoonsgegevens gebruiken die nodig zijn om het doel te bereiken. Technieken om dit te doen zijn:</p> <ul> <li>Anonimiseren: data zoveel mogelijk anoniem maken</li> <li>Pseudonimiseren: data moeilijker herleidbaar maken naar personen</li> <li>Aggregeren: data zoveel mogelijk combineren of samenvoegen tot 1 waarde, zoals een totaal of gemiddelde </li> </ul>"},{"location":"onderwerpen/data/#goede-datakwaliteit","title":"Goede datakwaliteit","text":"<p>Hoe slechter de datakwaliteit, hoe onbetrouwbaarder de uitkomsten van je algoritme. </p> <p>Je bepaalt en controleert zelf de kwaliteit van je dataset. Check bijvoorbeeld of alle gegevens juist, compleet en actueel zijn. En herken bias in je data.</p>"},{"location":"onderwerpen/data/#goed-databeheer-datagovernance-en-datamanagement","title":"Goed databeheer: datagovernance en datamanagement","text":"<p>Goed databeheer betekent dat je organisatie duidelijke afspraken maakt over het:</p> <ul> <li>opslaan en verwerken van data </li> <li>gebruik van data: welke data mag je waarvoor gebruiken? </li> <li>beveiligen van data</li> <li>bewaken van de datakwaliteit, zoals het actueel houden van de gegevens</li> <li>eigenaarschap van data, bijvoorbeeld de partij die het algoritme ontwikkelt</li> <li>documenteren en labelen van data (metadata)</li> </ul> <p>Leg de processen en afspraken hierover vast in de datagovernance van je organisatie. In een datamanagementstrategie beschrijf je hoe je organisatie data verzamelt, ordent en gebruikt. Zo kan je organisatie optimaal gebruikmaken van data. </p> <p>Hoe goed je organisatie data beheert, check je met datavolwassenheidsmodellen uit de Toolbox verantwoord datagebruik van de Interbestuurlijke Datastrategie (IBDS). Of gebruik de beslishulp datavolwassenheid. </p>"},{"location":"onderwerpen/data/#belang-van-verantwoord-datagebruik","title":"Belang van verantwoord datagebruik","text":"<p>Algoritmes kunnen veel schade veroorzaken in de maatschappij als ze de verkeerde gegevens gebruiken.</p> <p>Met verantwoord datagebruik voorkom je:</p> <ul> <li>verkeerde beslissingen doordat je algoritme resultaten baseert op data van slechte kwaliteit</li> <li>discriminerende effecten van algoritmes doordat je data bias bevat</li> <li>lekken van privacygevoelige informatie, zoals persoonsgegevens</li> <li>gebruik van data die niet rechtenvrij zijn, zoals teksten met auteursrechten</li> <li>dat resultaten niet te reproduceren zijn, doordat de data niet goed is opgeslagen</li> </ul>"},{"location":"onderwerpen/data/#hulpmiddelen","title":"Hulpmiddelen","text":"<ul> <li>Toolbox verantwoord datagebruik, Interbestuurlijke Datastrategie (IBDS)</li> <li>Richtlijnen voor \u2018FAIR\u2019 data, GO FAIR Foundation</li> </ul>"},{"location":"onderwerpen/duurzaamheid/","title":"Duurzaam werken met algoritmes","text":"<p>Overheden moeten duurzaam werken met hun ICT, zoals algoritmes. Dit betekent dat je algoritmes inkoopt, ontwikkelt en gebruikt op een manier die vriendelijk is voor mens en milieu. </p>"},{"location":"onderwerpen/duurzaamheid/#wat-is-duurzaam-werken-met-algoritmes","title":"Wat is duurzaam werken met algoritmes?","text":"<p>Je werkt duurzaam met algoritmes als je tijdens de hele levenscyclus keuzes maakt die passen bij de duurzame en sociale doelen van de overheid:</p> <ul> <li>klimaatneutraal werken in 2030</li> <li>50% minder gebruik van grondstoffen direct uit de natuur (zoals olie, gas en lithium) in 2030</li> <li>circulair werken in 2050: zonder afval, met alleen hergebruikte grondstoffen</li> <li>meer banen voor mensen met een arbeidsbeperking</li> <li>geen sociale misstanden in internationale productieketens, zoals slechte arbeidsomstandigheden of schending van mensenrechten</li> </ul> <p>Om bij te dragen aan deze doelen, kies je bijvoorbeeld voor:</p> <ul> <li>energiezuinig programmeren</li> <li>energiezuinig trainen van AI-systemen</li> <li>dataopslag in een duurzaam of \u2018groen\u2019 datacenter</li> </ul>"},{"location":"onderwerpen/duurzaamheid/#belang-van-duurzaam-werken","title":"Belang van duurzaam werken","text":"<p>Algoritmes kunnen veel impact hebben op het milieu. De rekenkracht die algoritmes nodig hebben op computers kost elektriciteit. En de datacenters die nodig zijn voor het opslaan van data, verbruiken veel energie, water en grondstoffen. Vooral complexe AI-systemen zoals Large Language Models (LLM\u2019s) verbruiken veel energie door training en gebruik en door opslag van grote datasets in datacenters. </p>"},{"location":"onderwerpen/duurzaamheid/#help-ons-deze-pagina-te-verbeteren","title":"Help ons deze pagina te verbeteren","text":"<p>Deel je idee, suggestie of opmerking via GitHub of mail ons via algoritmes@minbzk.nl.</p>"},{"location":"onderwerpen/fundamentele-rechten/","title":"Grondrechten beschermen in algoritmes","text":"<p>Als overheid moet je de grondrechten van burgers beschermen. Dit geldt ook als je algoritmes gebruikt voor publieke taken.</p>"},{"location":"onderwerpen/fundamentele-rechten/#wat-is-het-beschermen-van-grondrechten-in-algoritmes","title":"Wat is het beschermen van grondrechten in algoritmes?","text":"<p>Dit betekent dat je tijdens het ontwikkelen en gebruiken van algoritmes rekening houdt met de fundamentele rechten van de mens:</p> <ul> <li>grondrechten uit de Grondwet</li> <li>mensenrechtenverdragen zoals het Europees Verdrag tot bescherming van de rechten van de mens en de fundamentele vrijheden (EVRM).</li> </ul>"},{"location":"onderwerpen/fundamentele-rechten/#belang-van-grondrechten-beschermen","title":"Belang van grondrechten beschermen","text":"<p>Algoritmes kunnen grondrechten schenden. Een bekend probleem is bias in algoritmes. Hierdoor worden resultaten onbetrouwbaar en kun je mensen ongelijk behandelen.</p> <p>Belangrijke grondrechten die vaak worden geraakt door algoritmen zijn bijvoorbeeld:</p> <ul> <li>recht op persoonsgegevensbescherming</li> <li>verbod op ongelijke behandeling</li> <li>recht op eerbiediging van de persoonlijke levenssfeer</li> </ul> <p>Als overheid moet je hier goed op letten. Doe dit zo vroeg mogelijk in de levenscyclus. De maatregelen die we adviseren, beginnen al bij het ontwerpen en trainen van algoritmes.</p>"},{"location":"onderwerpen/fundamentele-rechten/#aanbevolen-maatregelen","title":"Aanbevolen maatregelen","text":"idMaatregelenpba-04Overleg regelmatig met belanghebbendenowp-06Inventariseer welke grondrechten het algoritme kan schenden en maak een belangenafwegingowp-07Maak een lijst van de meest kwetsbare groepen en bescherm hen extra"},{"location":"onderwerpen/fundamentele-rechten/#hulpmiddelen","title":"Hulpmiddelen","text":"HulpmiddelenAssessment List for Trustworthy Artificial Intelligence (ALTAI)De Ethische Data AssistentImpact Assessment Mensenrechten en AlgoritmesThe Fairness HandbookFramework for Meaningful EngagementHandreiking non-discriminatie by designDiscriminatie door risicoprofielen - Een mensenrechtelijk toetsingskader"},{"location":"onderwerpen/fundamentele-rechten/#help-ons-deze-pagina-te-verbeteren","title":"Help ons deze pagina te verbeteren","text":"<p>Deel je idee, suggestie of opmerking via GitHub of mail ons via algoritmes@minbzk.nl.</p>"},{"location":"onderwerpen/governance/","title":"Governance van algoritmes binnen je organisatie","text":"<p>Zorg voor effectieve governance van je algoritmes. Dit is het beleid van je organisatie voor het verantwoordelijk omgaan met algoritmes en AI-systemen. Leg bijvoorbeeld vast wie waarvoor verantwoordelijk is.</p>"},{"location":"onderwerpen/governance/#wat-is-governance-van-algoritmes-binnen-je-organisatie","title":"Wat is governance van algoritmes binnen je organisatie?","text":"<p>Algoritme-governance is de manier waarop je organisatie omgaat met algoritmes en AI-systemen. Je maakt duidelijke afspraken over processen, regels en verantwoordelijkheden. </p> <p>Deze afspraken maak je op 2 niveaus:</p>"},{"location":"onderwerpen/governance/#organisatieniveau","title":"Organisatieniveau","text":"<p>Hoe de organisatie met algoritmes in het algemeen omgaat, bijvoorbeeld:</p> <ul> <li>richtlijnen en gedragscode voor medewerkers</li> <li>strategie en visie</li> <li>werkwijze</li> <li>teamleden en hun verantwoordelijkheden, zoals chief data officers en algoritmefunctionarissen</li> </ul>"},{"location":"onderwerpen/governance/#toepassingsniveau","title":"Toepassingsniveau","text":"<p>Dit zijn afspraken over het beheer van de algoritmes zelf, bijvoorbeeld:</p> <ul> <li>best practices</li> <li>multidisciplinair ontwikkelen</li> <li>AI-levenscyclusmodellen</li> </ul>"},{"location":"onderwerpen/governance/#belang-van-algoritme-governance","title":"Belang van algoritme-governance","text":"<p>Zonder governance verlies je grip op het inkopen, ontwikkelen, gebruiken en uitfaseren van algoritmes en AI. Dit vergroot het risico op overtredingen van wetten en regels zoals de AI-verordening, Grondwet, Algemene Verordening Gegevensbescherming (AVG) en Auteurswet. </p> <p>Goede governance van algoritmes helpt bij het:</p> <ul> <li>correct uitvoeren van wetten en regels</li> <li>toepassen van je eigen strategie, doelstellingen en publieke waarden</li> </ul>"},{"location":"onderwerpen/governance/#aanpak-algoritme-governance","title":"Aanpak algoritme-governance","text":"<p>Algoritme-governance bepaal je zelf als organisatie. </p> <p>Houd in elk geval rekening met:</p> <ul> <li>organisatieverantwoordelijkheden: de minimale voorwaarden om te starten met algoritmes</li> <li>levenscyclus van algoritmes: waar je per fase op moet letten</li> </ul> <p>[!TIP] Zorg dat iemand verantwoordelijk is voor algoritme-governance. En betrek stakeholders.</p>"},{"location":"onderwerpen/governance/#vereisten","title":"Vereisten","text":"idVereistenaia-01Personeel en gebruikers zijn voldoende AI-geletterd.aia-01Verboden AI-systemen mogen niet worden gebruikt.aia-02Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd.aia-03Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteemaia-11Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteemaia-14Hoog-risico-AI-systemen worden pas geleverd of gebruikt na een conformiteitsbeoordelingsprocedureaia-15Hoog-risico-AI-systemen zijn voorzien van een EU-conformiteitsverklaringaia-17Hoog-risico-AI-systemen zijn geregistreerd in de EU-databankaia-20Hoog-risico-AI-systemen worden gebruikt volgens de gebruiksaanwijzingaia-21Menselijke controle van hoog-risico-AI-systemen wordt uitgevoerd door mensen met voldoende kennis en mogelijkhedenaia-25Gebruiksverantwoordelijken controleren de registratie van het hoog-risico AI-systeem in de EU-databankaia-28Mensen over wie besluiten worden genomen door een hoog-risico-AI-systemen, krijgen op verzoek informatie over deze besluitenaia-31Als AI-modellen voor algemene doeleinden met systeemrisico\u2019s ernstige incidenten veroorzaken, wordt dit gedocumenteerd en gerapporteerdaia-32AI-modellen voor algemene doeleinden met systeemrisico\u2019s zijn voldoende beveiligd tegen cyberaanvallenaia-35Ernstige incidenten door hoog-risico-AI-systemen worden gemeld aan de toezichthouderaia-36Klokkenluiders kunnen veilig melden dat een organisatie zich niet houdt aan de AI-verordeningaut-01Auteursrechten zijn beschermdavg-06Organisaties kunnen bewijzen dat zij persoonsgegevens op de juiste manier verwerken"},{"location":"onderwerpen/governance/#aanbevolen-maatregelen","title":"Aanbevolen maatregelen","text":"idMaatregelenorg-01Bepaal of er genoeg experts beschikbaar zijnorg-04Stel beleid op voor een verantwoorde inzet van algoritmes binnen de organisatie.org-03Maak een plan voor het omgaan met risico\u2019sorg-04Zorg voor politiek-bestuurlijk bewustzijn, betrokkenheid, en verantwoordelijkheid.org-05Sluit algoritmegovernance aan op bestaande governancestructuren binnen de organisatie.org-06Gebruik een algoritme volwassenheidsmodel om te weten waar de organisatie staatorg-07Richt een algoritmegovernance in met three lines of defenceorg-08Maak gebruik van beslismomenten  in de algoritmelevenscyclusorg-09Richt algoritmegovernance op basis van de risicoclassificatie van algoritmes.org-10Taken en verantwoordelijkheden zijn toebedeeld in de algoritmegovernanceorg-11Maak afspraken over het beheer van gebruikersorg-12Controleer en verbeter regelmatig de kwaliteit van het algoritmeorg-13Maak afspraken over het beheer van wachtwoordenorg-14Maak afspraken over het wijzigen van de codepba-01Beschrijf het probleem dat het algoritme moet oplossenpba-02Beschrijf het doel van het algoritmepba-03Beschrijf waarom een algoritme het probleem moet oplossenpba-04Overleg regelmatig met belanghebbendenpba-05Beschrijf de wettelijke grondslag voor de inzet van het algoritmeowp-01Beschrijf de rollen en verantwoordelijkheden voor het ontwikkelen en gebruiken van algoritmesowp-05Bepaal het soort algoritme en de risicogroep en vereisten die hierbij horenowp-28Pas vastgestelde interne beleidskaders toe en maak aantoonbaar dat deze zijn nageleefd bij het ontwikkelen, inkopen en gebruiken van algoritmes.org-02Pas vastgestelde beleidskaders toeowk-02Maak een noodplan voor het stoppen van het algoritmever-03Controleer regelmatig of het algoritme voldoet aan alle wetten en regels en het eigen beleidimp-03Richt de juiste menselijke controle in van het algoritmeimp-06Spreek af hoe de organisatie omgaat met privacy-verzoekenimp-05Spreek af hoe medewerkers omgaan met het algoritme.imp-09Richt een proces in zodat burgers of andere belanghebbenden een klacht, bezwaar of beroep kunnen indienen over het gebruik van het algoritme en monitor dit proces.imp-01Maak een openbaar besluit over de inzet van het algoritmemon-03Maak een noodplan voor beveiligingsincidenten"},{"location":"onderwerpen/governance/#aanbevolen-hulpmiddelen","title":"Aanbevolen hulpmiddelen","text":"HulpmiddelenOnderzoekskader algoritmes Auditdienst Rijk 2023Toetsingskader Algoritmes Algemene Rekenkamer"},{"location":"onderwerpen/menselijke-controle/","title":"Menselijke controle over algoritmes","text":"<p>Algoritmes van de overheid moeten onder controle blijven van mensen. Presteert het algoritme niet goed, dan moet een mens dit kunnen aanpassen of stoppen.</p>"},{"location":"onderwerpen/menselijke-controle/#wat-is-menselijke-controle","title":"Wat is menselijke controle?","text":"<p>Menselijke controle over een algoritme of AI-systeem betekent dat mensen invloed hebben op de uitkomsten. Mensen moeten het ontwerp van het algoritme kunnen aanpassen. En mensen moeten het algoritme kunnen stoppen. Zo kun je op tijd ingrijpen als er iets fout gaat.</p>"},{"location":"onderwerpen/menselijke-controle/#belang-van-menselijke-controle","title":"Belang van menselijke controle","text":"<p>Algoritmes kunnen schade veroorzaken in de maatschappij. Gebruik je een algoritme voor een publieke taak, dan moet je dit continu op een of andere manier controleren. </p>"},{"location":"onderwerpen/menselijke-controle/#ontwerp","title":"Ontwerp","text":"<p>Tijdens het ontwerp van een algoritme of AI-systeem controleer je bijvoorbeeld of het algoritme op de juiste manier \u2018getraind\u2019 wordt. Maakt het bijvoorbeeld gebruik van een goede dataset, zonder bias, die representatief is voor de samenleving? En je controleert of het algoritme bepaalde groepen niet benadeelt. </p> <p>Voordat je een algoritme gaat gebruiken, is het belangrijk om het doel te bepalen. </p>"},{"location":"onderwerpen/menselijke-controle/#gebruik","title":"Gebruik","text":"<p>Tijdens het gebruik van een algoritme is menselijke controle belangrijk omdat de werking verandert in de loop der tijd:</p> <ul> <li>Situaties kunnen veranderen. Het algoritme kan daarvan niet op de hoogte zijn. Een routeplanner kent bijvoorbeeld niet alle werkzaamheden of veranderingen aan de wegen.</li> <li>AI-systemen leren soms nog bij. En soms is het niet duidelijk op welke data de uitkomsten gebaseerd zijn. Een beeldherkenningssysteem herkent bijvoorbeeld honden op foto\u2019s op basis van de achtergrond in plaats van de hond zelf.</li> <li>Nieuwe mogelijkheden ontstaan door technologische ontwikkelingen. Zo maken leerlingen en studenten massaal gebruik van large language modellen (LLM\u2019s) zoals ChatGPT.</li> </ul>"},{"location":"onderwerpen/menselijke-controle/#mensen","title":"Mensen","text":"<p>Er is maatschappelijke consensus dat alleen natuurlijke personen in staat zijn om een goede (ethische) afweging te maken over wanneer en welke controle nodig is. Menselijke controle kan je dus niet automatiseren. Mensen mogen zich hierbij wel laten helpen door computers of andere technologie. </p>"},{"location":"onderwerpen/menselijke-controle/#aanpak-menselijke-controle","title":"Aanpak menselijke controle","text":"<p>Je kunt op verschillende manieren controle houden over de prestaties van een algoritme:</p> <ul> <li>Technische controle: Controle uitoefenen op het algoritme zelf. Je bepaalt bijvoorbeeld dat een AI-systeem alleen mag 'bijleren\u2019 wanneer de data voldoet aan bepaalde voorwaarden voor sociale representativiteit.</li> <li>Contextuele controle: Controle van de omgeving van het algoritme. Je verbiedt bijvoorbeeld dat je organisatie het algoritme gebruikt in situaties met een hoog risico op schade.</li> <li>Controle door kennis: Je probeert de werking en risico\u2019s van je algoritmes zo goed mogelijk te begrijpen. Gaat het om een AI-systeem, dan heb je ook voldoende kennis over AI nodig.</li> </ul> <p>Wanneer en hoe je controle uitoefent, hangt af van het soort algoritme en risico, de levenscyclusfase van je project en je expertise. </p> <p>Bepaal in elk geval zo vroeg mogelijk wie in welke levenscyclusfase verantwoordelijk is voor menselijke controle. En beschrijf dit in een RACI-matrix of VERI-matrix. Want menselijke controle is nodig in verschillende fases, door verschillende mensen. Er is nooit 1 persoon verantwoordelijk voor de totale controle. </p> <p>Tijdens het gebruik kun je menselijke controle op de volgende manieren uitoefenen:</p> <ul> <li>Human in the loop: Een mens moet de acties starten van het algoritme. Het werkt niet uit zichzelf.</li> <li>Human on the loop: Mensen kunnen acties stoppen van het algoritme.</li> <li>Human above the loop: Mensen houden overzicht en kunnen ingrijpen bij strategische en ethische beslissingen.</li> <li>Human before the loop: Het algoritme interpreteert morele modellen die mensen vooraf bedenken. Deze oplossing is bedoeld voor volledig autonome algoritmes. Dit zijn algoritmes die zelf beslissingen moeten nemen, bijvoorbeeld door tijdsdruk.</li> </ul>"},{"location":"onderwerpen/menselijke-controle/#feedback","title":"Feedback","text":"<p>Na het bepalen van de manier van controleren, bepaal je de manier waarop je feedback krijgt over het algoritme: Wat voor soort informatie moet bij wie terechtkomen? Aan wie moet een gebruiker bijvoorbeeld rapporteren dat het AI-systeem niet meer goed werkt?</p>"},{"location":"onderwerpen/menselijke-controle/#aanbevolen-maatregelen","title":"Aanbevolen maatregelen","text":"idMaatregelenorg-12Controleer en verbeter regelmatig de kwaliteit van het algoritmepba-03Beschrijf waarom een algoritme het probleem moet oplossenowk-02Maak een noodplan voor het stoppen van het algoritmeimp-01Stel een werkinstructie op voor gebruikers.imp-03Richt de juiste menselijke controle in van het algoritmeimp-05Spreek af hoe medewerkers omgaan met het algoritme."},{"location":"onderwerpen/menselijke-controle/#hulpmiddelen","title":"Hulpmiddelen","text":"HulpmiddelenAssessment List for Trustworthy Artificial Intelligence (ALTAI)Framework for Meaningful Engagement"},{"location":"onderwerpen/menselijke-controle/#help-ons-deze-pagina-te-verbeteren","title":"Help ons deze pagina te verbeteren","text":"<p>Deel je idee, suggestie of opmerking via GitHub of mail ons via algoritmes@minbzk.nl.</p>"},{"location":"onderwerpen/privacy-en-gegevensbescherming/","title":"Privacy en gegevensbescherming","text":"<p>Overheidsinstanties verwerken vaak persoonsgegevens om hun taken uit te voeren en maatschappelijke waarden te cre\u00ebren. Met de opkomst van algoritmes en kunstmatige intelligentie (AI) worden deze gegevens steeds vaker gebruikt om processen te optimaliseren, zoals bij het beoordelen van subsidieaanvragen of het verlenen van vergunningen.  </p> <p>Bij het gebruik van algoritmes is van groot belang om aandacht te besteden aan privacy en gegevensbescherming. Deze technologie\u00ebn vari\u00ebren van eenvoudige rekenregels tot complexe machine learning-modellen en generatieve AI, elk met hun eigen specifieke risico\u2019s.  Bijvoorbeeld, eenvoudige AI kan basisberekeningen uitvoeren, terwijl complexere AI-voorspellingen kan doen of informatie kan genereren. Ongeacht de complexiteit is het identificeren van risico\u2019s en het implementeren van passende beheersmaatregelen essentieel om de privacy van burgers te waarborgen en gevoelige gegevens te beschermen. </p> <p>Bij de inzet van AI in de publieke sector moeten overheidsinstanties rekening houden met de vereisten uit privacywetgeving, zoals de Algemene Verordening Gegevensbescherming (AVG). Dit omvat onder andere het minimaliseren van gegevensgebruik, implementeren van een privacy by design werkwijze waar mogelijk, en het transparant zijn over hoe en waarom (persoons)gegevens worden verwerkt.  Het toewijzen van verantwoordelijkheden en het opstellen van duidelijke richtlijnen voor gegevensverwerking zijn belangrijke stappen in dit proces. </p> <p>Het bouwblok privacy en gegevensbescherming van algoritmes wordt ook ge\u00efntegreerd in de algoritmelevenscyclus.  Dit biedt inzicht in wanneer specifieke vereisten en maatregelen tijdens de ontwikkeling van algoritmes moeten worden toegepast.  Door deze vereisten in de levenscyclus te integreren, kunnen de gebruikers inzichten opdoen wanneer deze maatregelen kunnen worden ge\u00efmplementeerd. </p>"},{"location":"onderwerpen/privacy-en-gegevensbescherming/#hulpmiddelen","title":"Hulpmiddelen","text":"HulpmiddelenAssessment List for Trustworthy Artificial Intelligence (ALTAI)Data Protection Impact Assessment"},{"location":"onderwerpen/publieke-inkoop/","title":"Publieke inkoop","text":"<p>Door middel van publieke inkoop wordt door overheidsinstellingen software ingekocht. Deze software wordt ingekocht om ambtenaren te ondersteunen met hun werkzaamheden om zo maatschappelijk waarden te cre\u00ebren. Het kan bijvoorbeeld gaan om het inkopen van een systeem waarmee een aanvraag voor een subsidie of vergunning kan worden behandeld. Het virtueel vergaderen of het digitaal samenwerken aan documenten zijn hier ook voorbeelden van. </p> <p>Disclaimer</p> <p>Het Algoritmekader is nog volop in ontwikkeling. Op deze plek willen we vooral aan de slag gaan op een open en transparante wijze. Het is dus niet definitief. Dat betekent dat er dingen opstaan die niet af zijn en soms zelfs fout. Mocht er iets niet kloppen, laat het ons weten via GitHub.</p> <p>Software wordt vaak ontwikkeld door gespecialiseerde aanbieders en bevat steeds meer algoritmes. Het komt ook voor dat de overheid deze technologie zelf ontwikkelt. Deze algoritmes kunnen eenvoudig van aard zijn, zoals het maken van een eenvoudige berekening. Zij kunnen complexer van aard zijn, zoals een voorspelling geven of het genereren van informatie. In het laatste geval kan worden gedacht aan ChatGPT, Google Bard of Co-Pilot. Er zijn verschillende type technologie\u00ebn die vallen onder het bereik van algoritmes. In dit kader drukken we deze uit als \u2018rekenregel\u2019, \u2018machine learning\u2019 en \u2018generatieve AI\u2019. Elke technologie heeft eigen bijzondere aandachtspunten. Ook de bijbehorende risico\u2019s kunnen per type verschillen. Het identificeren van deze risico\u2019s en het treffen van beheersmaatregelen is daarbij van belang. Dat geldt in het bijzonder als algoritmes bijdragen aan de totstandkoming van overheidsbesluitvorming en impactvolle beslissingen die burgers en ondernemingen raken. </p> <p>Door bij publieke inkoop van software met algoritmes rekening te houden met vereisten die voorkomen uit wet- en regelgeving, toepassen van publieke waarden, het type algoritme of AI en de potenti\u00eble risico\u2019s die ontstaan bij het gebruiken ervan, kunnen negatieve gevolgen worden voorkomen. Publieke inkoop speelt daarom een belangrijke rol bij de totstandkoming van verantwoord ontwikkelde algoritmes en het gebruik daarvan door ambtenaren.  In dit deel van het Algoritmekader wordt nader ingegaan op deze vereisten. Er worden suggesties gedaan hoe deze vereisten kunnen worden nageleefd en welke rollen daarbij betrokken kunnen zijn. Waar mogelijk worden concrete voorbeelden uit de praktijk gegeven en zal worden aangegeven bij welk type algoritmes dit relevant is.</p> <p>Het publiek inkopen van algoritmes wordt ook gekoppeld aan de algoritme levenscyclus. Dit geeft een beeld van wanneer bepaalde vereisten en maatregelen, bij het ontwikkelen van algoritmes, moeten worden geadresseerd. Door deze vereisten ook te vertalen naar het inkoopproces, zullen de rollen binnen het inkoopproces beter in staat zijn om te duiden wanneer en hoe dit kan worden geadresseerd. Dit moet bijdragen aan een goed samenspel met aanbieders, zodat de kansen van algoritmes worden benut en de negatieve gevolgen worden voorkomen.  </p>"},{"location":"onderwerpen/publieke-inkoop/#algoritme-levenscyclus","title":"Algoritme levenscyclus","text":"<p>Algoritmes kunnen een grote impact hebben op onze maatschappij. Daarom is het van belang dat deze op een verantwoorde manier worden ontwikkeld en gebruikt. Het toepassen van de algoritme levenscyclus is hierover een bruikbare leidraad. De algoritme levenscyclus bestaat uit meerdere fasen. De werkzaamheden die noodzakelijk zijn om een verantwoord algoritme of AI te ontwikkelen, kunnen logisch worden gekoppeld aan deze fasen.  Deze levenscyclus kan worden gebruikt voor alle typen algoritmes. Het verschilt uiteraard wel per type wat moet worden gedaan en dit is mede afhankelijk van de risico classificatie. Bij hoog risico toepassing zal meer moeten worden gedaan om risico\u2019s te mitigeren dan als er sprake is van lage risico toepassingen. De levenscyclus geeft een bruikbaar overzicht voor leveranciers en opdrachtgevers wanneer welke werkzaamheden moeten worden uitgevoerd. Het laat ook zien welke werkzaamheden moeten zijn afgerond als algoritmes in de markt mogen worden gezet en klaar zijn voor gebruik. </p> <p>Bij het publiek inkopen van software met bijbehorende algoritmes zijn de wensen van de behoeftesteller en de doelstellingen van de organisatie van groot belang. Dit kan tot verschillende situaties leiden:</p> <p>\u2022   Een al ontwikkelde kant-en-klare oplossing voldoet direct aan deze wensen en doelstellingen;</p> <p>\u2022   Een al ontwikkelde oplossing moet eerst worden aangepast voordat deze kan worden gebruikt;</p> <p>\u2022   Er moet een nieuwe oplossing worden ontwikkeld om te voldoen aan de wensen. </p> <p>Deze inschatting is dus bepalend wat wel en niet van een product mag worden verwacht. Dit is relevant voor zowel de leverancier als de opdrachtgever. Het is aannemelijk dat als het om risicovolle (nog te ontwikkelen) algoritmes gaat, de opdrachtgever een intensieve bijdrage moet leveren aan de samenwerking om het product te kunnen gebruiken. De opdrachtgever zal bijvoorbeeld moeten aangeven wat de juridische en ethische grenzen zijn van de uiteindelijk werking van het algoritme of AI. Als een kant-en-klare oplossing wordt afgenomen, dan zal de leverancier moeten laten zien dat de ontwikkelde algoritmes voldoen aan alle vereisten en moet dit kunnen aantonen. </p> <p>De inzichten uit de algoritme levenscyclus kunnen ondersteunen bij bijvoorbeeld de behoeftestelling, het maken van make-or-buy beslissingen, de te hanteren aanbestedingsvorm, de totstandkoming van de selectie- en gunningseisen, contractspecificaties en de uitvoering en management van het contract. De algoritme levenscyclus kan worden geraadpleegd via het tabblad boven aan deze pagina. Per fase en per type algoritme of AI kan worden bekeken aan welke vereisten moet worden voldaan en welke beheersmaatregelen kunnen worden getroffen. </p>"},{"location":"onderwerpen/publieke-inkoop/#hulpmiddelen","title":"Hulpmiddelen","text":"<p>Hieronder volgt een overzicht van instrumenten die kunnen worden gebruikt om invulling te geven aan de vereisten en maatregelen.</p> HulpmiddelenInkoopvoorwaarden"},{"location":"onderwerpen/publieke-inkoop/#bruikbare-informatie-en-bronnen","title":"Bruikbare informatie en bronnen","text":"<p>Europese modelcontractbepalingen AI-systemen (hoog risico)</p> <p>Europese modelcontractbepalingen AI-systemen (niet hoog risico)</p> <p>Contractvoorwaarden voor algoritmes gemeente Amsterdam</p> <p>Inkoopproces</p> <p>Community of Practise Digitale Innovatie</p>"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/","title":"Technische robuustheid en veiligheid","text":"<p>Algoritmes van de overheid moeten robuust en veilig zijn. Dit betekent dat je algoritmes in elke situatie goed presteren, ook als er iets onverwachts gebeurt. Gaat er toch iets mis, dan is er een noodplan.</p>"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#wat-is-technisch-robuust-en-veilig","title":"Wat is technisch robuust en veilig?","text":"<p>Een technisch robuust en veilig algoritme presteert onder elke omstandigheid zoals het bedoeld is. </p> <p>Een robuust algoritme is:</p> <ul> <li>Nauwkeurig: Het algoritme geeft de juiste uitkomst voor het gewenste doel, of meldt dat de uitkomst onzeker is.</li> <li>Betrouwbaar: Ook in nieuwe of onverwachte situaties geeft het algoritme de juiste uitkomst.</li> <li>Reproduceerbaar: In dezelfde situaties vertoont het algoritme hetzelfde gedrag.</li> </ul> <p>Een algoritme is veilig onder deze omstandigheden:</p> <ul> <li>Geautoriseerde toegang: Alleen personen en systemen met toestemming kunnen het algoritme gebruiken of beheren.</li> <li>Confidentieel: Het algoritme kan geen vertrouwelijke of gevoelige informatie lekken door aanvallen.</li> <li>Integer: Kwaadwillenden kunnen nergens in de levenscyclus van het algoritme onbedoeld de controle van het model overnemen.</li> <li>Beschikbaar: Je kunt op elk moment het algoritme gebruiken waarvoor het bedoeld is. Gaat dit toch fout, dan ontstaat er geen grote schade.</li> </ul>"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#belang-van-robuuste-veilige-algoritmes","title":"Belang van robuuste, veilige algoritmes","text":"<p>Algoritmes kunnen grote schade veroorzaken aan de maatschappij. Met een technisch robuust en goed beveiligd algoritme voorkom je:</p> <ul> <li>onverwachte schadelijke uitkomsten, zoals verkeerde beslissingen of discriminatie door onvoldoende nauwkeurigheid </li> <li>uitval van het systeem</li> <li>lekken van informatie, zoals persoonsgegevens</li> <li>gebruik van het algoritme voor verkeerde doelen</li> <li>schade door misbruik of aanvallen van buitenaf</li> </ul>"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#gebruik-algoritmes-op-de-juiste-manier","title":"Gebruik algoritmes op de juiste manier","text":"<p>Gebruik een algoritme alleen voor het juiste doel en op de juiste manier. Dit is de manier die is getest en gecontroleerd. Wanneer je het algoritme gebruikt voor een ander doel of in een verkeerde context, zijn de resultaten niet meer betrouwbaar. </p> <p>Voorkom dat medewerkers op de verkeerde manier werken met het algoritme. Zij moeten weten wat het algoritme wel en niet kan. En wat ze moeten doen als het algoritme fouten maakt of niet goed werkt. Denk aan technische en organisatorische ondersteuning:</p> <ul> <li>Leid medewerkers op.</li> <li>Maak duidelijke afspraken over werkprocessen (governance).</li> <li>Stuur gebruikers in het juiste gebruik via interactie en technische verbeteringen in het ontwerp.</li> </ul>"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#controleer-regelmatig","title":"Controleer regelmatig","text":"<p>Begin zo vroeg mogelijk met regelmatige controles van de uitkomst en werking van het algoritme. In de praktijk verandert de omgeving en de situatie waarin het algoritme wordt gebruikt. Controleer daarom regelmatig of het algoritme nog werkt zoals het is bedoeld. </p>"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#voorbeeld","title":"Voorbeeld","text":"<p>Een algoritme leest kentekens tijdens parkeercontroles. Het herkent de juiste letters en cijfers op elk kenteken. Ook als het bord een andere kleur heeft, op een andere plek zit of vies is. Het algoritme is nauwkeurig en dus robuust.</p> <p>Een algoritme berekent het risico op fraude door mensen. Maar bij personen uit dezelfde groep geeft het algoritme de ene keer als uitkomst \u2018hoog risico\u2019 en de andere keer \u2018geen risico\u2019. De uitkomst is niet reproduceerbaar. Hierdoor is het algoritme niet robuust.</p>"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#controles-voorbereiden","title":"Controles voorbereiden","text":"<p>Bereid de controles voor tijdens de levenscyclusfases probleemanalyse, ontwerp en dataverkenning en datapreparatie. Onderzoek de situatie waarin je organisatie het algoritme gaat gebruiken: Wat zijn de risico\u2019s? Welke onderdelen van het algoritme moet je evalueren? Analyseer de kwaliteit en variatie van de data. Bedenk maatregelen waarmee je de risico\u2019s zoveel mogelijk voorkomt. En bedenk met welke methode je de controles gaat evalueren. </p> <p>Ontwikkel je het algoritme zelf, controleer dan tijdens de ontwikkeling al wat er gebeurt in de verschillende situaties die je verwacht. Experimenteer met nieuwe combinaties van de inputdata en gebruik verschillende representatieve test-sets.</p>"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#controles-uitvoeren","title":"Controles uitvoeren","text":"<p>Voer de controles uit tijdens de ontwikkelfase en de verificatie- en validatiefase. Test het algoritme goed. Evalueer hoe robuust en veilig het algoritme is. Verbeter het algoritme waar nodig. En monitor goed welke data het algoritme gebruikt, zodat je veranderingen in die data snel signaleert. Maak een noodplan voor als blijkt dat het algoritme niet meer werkt zoals het bedoeld was.</p> <p>Blijf regelmatig controleren tijdens de fases implementatie en monitoring en beheer. Dit zijn de fases waarin je het algoritme gebruikt. Presteert het algoritme niet goed, los het probleem dan op of stop het gebruik. </p> <p>[!TIP] Houd rekening met concept drift. Dit betekent dat de eigenschappen van je data in de loop van de tijd kunnen veranderen. Hierdoor trekt je algoritme mogelijk verkeerde conclusies. Zo was er v\u00f3\u00f3r 2020 een verband tussen thuiswerken en ziek zijn. Maar sinds de coronacrisis in 2020 is dit verband minder sterk, omdat gezonde mensen vaker thuiswerken. </p>"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#bescherm-algoritmes-tegen-aanvallen-en-bedreigingen","title":"Bescherm algoritmes tegen aanvallen en bedreigingen","text":"<p>Beveilig het ICT-systeem waarin het algoritme wordt gebruikt. Dit zijn bijvoorbeeld maatregelen uit de Baseline Informatiebeveiliging Overheid (BIO) die je standaard neemt voor beveiliging van ICT-systemen tegen cyberaanvallen.</p> <p>Beveilig de algoritmes zelf tegen cybercriminelen. Belangrijke bedreigingen voor algoritmes zijn:</p> <ul> <li>Trainingsdata van een AI-model aanpassen, waardoor het later fouten gaat maken tijdens het gebruik.</li> <li>Input van een algoritme aanpassen om het normale gedrag te omzeilen, of om het algoritme specifieke, ongewenste output te laten geven.</li> <li>Een \u2018achterdeurtje\u2019 inbouwen met toegang tot het algoritme, waardoor aanvallers het algoritme kunnen misbruiken.</li> <li>Intellectueel eigendom of kwetsbaarheden afleiden uit de details van een AI-model.</li> <li>Gevoelige informatie afleiden uit de eigenschappen van trainingsdata.</li> </ul> <p>Lees meer in het TNO-rapport Verkenning van het raakvlak cybersecurity en AI.</p> <p>Aandachtspunten voor het beschermen van algoritmes tegen specifieke dreigingen:</p> <ul> <li>Controleer of de trainingsdata geschikt, correct en betrouwbaar is.</li> <li>Controleer of de inputdata geschikt, correct en betrouwbaar is.</li> <li>Houd bij complexe algoritmes rekening met verborgen en onwenselijke functionaliteiten.</li> <li>Train je algoritme om bestand te zijn tegen aanvallen. </li> <li>Stimuleer veilig gebruik van het algoritme door gebruikers.</li> <li>Maak afspraken met leveranciers en controleer de geleverde algoritmes voor gebruik.</li> <li>Test periodiek of het algoritme weerbaar is tegen bekende aanvallen.</li> </ul> <p>Hiermee voorkom je:</p> <ul> <li>misleiding, doordat het algoritme niet werkt op de bedoelde manier</li> <li>verkeerde implementatie en daardoor een verkeerde werking</li> </ul> <p>Begin zo vroeg mogelijk met beveiligen. Beveilig in elk geval in de fases ontwikkelen, verificatie en validatie, implementatie, monitoring en beheer en uitfaseren.</p>"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#verklein-de-kans-op-schade","title":"Verklein de kans op schade","text":"<p>Veroorzaak zo min mogelijk schade als het toch fout gaat. En maak een noodplan voor incidenten. Het doel van dit plan is ervoor zorgen dat de fout zo min mogelijk gevolgen heeft voor de organisatie en de maatschappij. In het plan staat bijvoorbeeld wie wat moet doen als het systeem uitvalt.</p>"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#aanbevolen-maatregelen","title":"Aanbevolen maatregelen","text":"idMaatregelenorg-11Maak afspraken over het beheer van gebruikersorg-13Maak afspraken over het beheer van wachtwoordenorg-14Maak afspraken over het wijzigen van de codeowp-04Beschrijf welke techniek gebruikt wordt voor de beoogde toepassingowp-10Maak een Project Startarchitectuur (PSA) voor de ontwikkeling of inkoop van algoritmesowp-24Voer een risico-analyse met de aanbieder uit op het gebied van informatiebeveiliging bij een uitbestedingstrajectdat-04Geef data zoals persoonsgegevens een bewaartermijn met een vernietigingsproceduredat-07Gebruik bij machine learning technieken gescheiden train-, test- en validatiedata en houdt rekening met underfitting en overfitting.owk-01Ontwerp en ontwikkel het algoritme volgens de principes van \u2018security by design\u2019owk-04Maak logbestanden waarin staat wie wanneer toegang had tot de data en de codever-01Controleer regelmatig of het algoritme werkt zoals het bedoeld isimp-02Doe aselecte steekproeven om algoritmes met 'risicogestuurde selectie\u2019 te controlerenmon-01Maak back-ups van algoritmesmon-02Beveilig de softwaremon-03Maak een noodplan voor beveiligingsincidentenmon-04Monitor regelmatig op veranderingen in de data. Bij veranderingen evalueer je de prestaties en output van het algoritme."},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#hulpmiddelen","title":"Hulpmiddelen","text":"HulpmiddelenAssessment List for Trustworthy Artificial Intelligence (ALTAI)Baseline Informatiebeveiliging Overheid (BIO)"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#bronnen","title":"Bronnen","text":"<ul> <li>Natalia D\u00edaz-Rodr\u00edguez et al, 2023, Connecting the dots in trustworthy Artificial Intelligence: From AI principles, ethics, and key requirements to responsible AI systems and regulation, Information Fusion 99.</li> <li>Andrea Tocchetti, Lorenzo Corti, Agathe Balayn, Mireia Yurrita, Philip Lippmann, Marco Brambilla, and Jie Yang. 2022. A.I. Robustness: a Human-Centered Perspective on Technological Challenges and Opportunities. In ACM, New York, NY, USA</li> <li>Ronan Hamon, Henrik Junklewitz, Ignacio Sanchez, 2020, Robustness and Explainability of Artificial Intelligence: from technical to policy solutions, JRC Technical Report, EUR 30040 EN</li> <li>Bhanu Chander, Chinju John, Lekha Warrier, Gopalakrishnan Kumaravelan, 2024, Toward Trustworthy AI in the Context of Explainability and Robustness, ACM Computing Surveys</li> <li>Niels Brink, Yori Kamphuis, Yuri Maas, Gwen Jansen-Ferdinandus, Jip van Stijn, Bram Poppink, Puck de Haan, Irina Chiscop, 2023, Adversarial AI in de cyber domain, TNO-2023-R10292-EN</li> </ul>"},{"location":"onderwerpen/technische-robuustheid-en-veiligheid/#help-ons-deze-pagina-te-verbeteren","title":"Help ons deze pagina te verbeteren","text":"<p>Deel je idee, suggestie of opmerking via GitHub of mail ons via algoritmes@minbzk.nl.</p>"},{"location":"onderwerpen/transparantie/","title":"Transparant zijn over algoritmes","text":"<p>Overheden moeten transparant zijn over hun algoritmes. Dit betekent dat je duidelijke informatie geeft over de algoritmes die je ontwikkelt of gebruikt.</p>"},{"location":"onderwerpen/transparantie/#wanneer-ben-je-transparant","title":"Wanneer ben je transparant?","text":"<p>Je draagt bij aan transparantie over algoritmes als je duidelijk uitlegt:</p> <ul> <li>dat je algoritmes ontwikkelt of gebruikt</li> <li>voor welk doel je deze algoritmes ontwikkelt of gebruikt</li> <li>wat voor soort algoritmes dit zijn</li> <li>welke code of programmeertaal je hiervoor gebruikt</li> <li>welke data je hiervoor gebruikt</li> <li>hoe uitkomsten tot stand komen</li> <li>hoe belanghebbenden bezwaar kunnen maken tegen gevolgen van het algoritme</li> </ul>"},{"location":"onderwerpen/transparantie/#belang-van-transparantie","title":"Belang van transparantie","text":"<p>Als je open bent over de algoritmes die je ontwikkelt of gebruikt, kunnen burgers en bedrijven zich beter verdedigen tegen mogelijke nadelige gevolgen. Verkeerd gebruik van algoritmes kan iemands leven namelijk ernstig be\u00efnvloeden. Bijvoorbeeld door discriminatie of een besluit dat niet klopt.</p> <p>Door uit te leggen hoe het algoritme werkt, kun je de beslissingen van het algoritme makkelijker controleren. Je leert sneller waarom het bepaalde keuzes maakt en waar de zwakke plekken zitten.</p> <p>Ook je organisatie is makkelijker te controleren. Omdat je transparant bent over algoritmes, kunnen burgers feedback geven. Journalisten zien wat je doet. En andere overheden kunnen hiervan leren.</p>"},{"location":"onderwerpen/transparantie/#aanpak-transparant-werken","title":"Aanpak transparant werken","text":"<p>Hoe je transparantie organiseert, hangt af van:</p> <ul> <li>het doel van je algoritme</li> <li>het soort algoritme waarmee je werkt</li> <li>wie de gebruikers zijn van het algoritme, bijvoorbeeld medewerkers of burgers</li> <li>de vereisten waar je aan moet voldoen</li> <li>de maatregelen die je neemt</li> <li>de doelgroep die je wil bereiken</li> <li>de levenscyclus-fase van je algoritme</li> </ul> <p>Onderzoek goed welk soort algoritme je gebruikt of wil gebruiken. Hoe groter de impact en het risico, hoe strenger de vereisten.</p> <p>De keuze voor het soort algoritme bepaalt ook hoe transparant je kunt zijn. Van rekenregels kun je namelijk precies uitleggen hoe deze tot een beslissing komen. Maar complexe AI-systemen zijn vaak een black box: niemand weet precies hoe deze systemen beslissingen maken. Volledige transparantie is dan niet mogelijk. In dat geval moet je de werking zo goed mogelijk onderzoeken. Probeer bijvoorbeeld in elk geval ernstige gevolgen zoals discriminatie te voorkomen. </p> <p>Tip</p> <p>Rekenregels zijn makkelijker uit te leggen dan AI-systemen. Als een rekenregel voldoende is voor het bereiken van je doel, dan is het ook makkelijker om transparant te zijn.</p>"},{"location":"onderwerpen/transparantie/#betrokken-partijen","title":"Betrokken partijen","text":"<p>Stem je informatie af op de betrokken partij. Zo moeten gebruikers de uitkomst van het algoritme voldoende begrijpen voor het nemen van onderbouwde beslissingen. En belanghebbenden zoals burgers moeten weten dat zij te maken hebben met een algoritme. Zij moeten snel en makkelijk kunnen vinden wat hun rechten zijn en hoe zij in beroep kunnen gaan. </p> Doelgroep Informeer bijvoorbeeld over Geef de informatie bijvoorbeeld via: Ontwikkelaar de werking, keuzes van het ontwikkelteam technische documentatie Gebruiker hoe uitkomsten tot stand komen, gebruikte data, wat het algoritme wel en niet kan gebruiksinstructies,  trainingen Medewerker contactpersonen, algoritmegebruik binnen de organisatie, afspraken over algoritmemanagement (ook wel: algoritmegovernance) intern algoritmeregister, trainingen Belanghebbende (iemand voor wie het algoritme gevolgen heeft) hoe een besluit tot stand kwam, mogelijkheden om bezwaar te maken, contactmogelijkheden brief over het besluit, webpagina over het algoritme Ge\u00efnteresseerde burger algoritmegebruik binnen de organisatie webpagina over het algoritme, algoritmeregister Auditor werking, ontwikkelproces, keuzes van het ontwikkelteam, hoe uitkomsten tot stand komen algoritmeregister, technische documentatie, programmeercode Onderzoeker of journalist algoritmegebruik binnen de organisatie algoritmeregister, technische documentatie, code"},{"location":"onderwerpen/transparantie/#aanbevolen-maatregelen","title":"Aanbevolen maatregelen","text":"idMaatregelenorg-04Stel beleid op voor een verantwoorde inzet van algoritmes binnen de organisatie.org-04Zorg voor politiek-bestuurlijk bewustzijn, betrokkenheid, en verantwoordelijkheid.pba-01Beschrijf het probleem dat het algoritme moet oplossenpba-02Beschrijf het doel van het algoritmepba-05Beschrijf de wettelijke grondslag voor de inzet van het algoritmeowp-08Bepaal welke documenten voor hoe lang gearchiveerd moeten wordenowp-13Maak vereisten voor algoritmes onderdeel van algemene inkoopvoorwaarden en de contractovereenkomst.owp-20Vul technische documentatie van aanbieder aan met relevante informatie vanuit de gebruiksverantwoordelijke.owp-22Bepaal in een aanbesteding of algoritmes van een aanbieder bepalende invloed hebben in een besluit richting personenpba-04Stel vast welke betrokkenen ge\u00efnformeerd moeten worden en welke informatie zij nodig hebben.owp-07Pas uitlegbaarheidstechnieken toe en evalueer en valideer deze.imp-10Maak gebruik van een algoritme dat bronvermelding kan genereren bij de output.org-02Pas vastgestelde beleidskaders toever-03Controleer regelmatig of het algoritme voldoet aan alle wetten en regels en het eigen beleidimp-01Stel een werkinstructie op voor gebruikers.imp-04Publiceer impactvolle algoritmes en hoog-risico-AI-systemen in het Algoritmeregisterimp-07Vermeld het gebruik van persoonsgegevens in een privacyverklaringimp-08Vermeld het gebruik van persoonsgegevens in het verwerkingsregisterimp-01Maak een openbaar besluit over de inzet van het algoritme"},{"location":"onderwerpen/transparantie/#hulpmiddelen","title":"Hulpmiddelen","text":"HulpmiddelenAssessment List for Trustworthy Artificial Intelligence (ALTAI)Impact Assessment Mensenrechten en AlgoritmesAlgoritmeregisterFramework for Meaningful Engagement"},{"location":"onderwerpen/transparantie/#help-ons-deze-pagina-te-verbeteren","title":"Help ons deze pagina te verbeteren","text":"<p>Deel je idee, suggestie of opmerking via GitHub of mail ons via algoritmes@minbzk.nl.</p>"},{"location":"overhetalgoritmekader/","title":"Basiskennis algoritmes en AI","text":"<ul> <li> <p>Soorten algoritmes</p> <p>Het soort algoritme bepaalt aan welke vereisten je moet voldoen. Werk je met simpele rekenregels of een AI-systeem?</p> </li> <li> <p>Risico van AI-systemen</p> <p>Je AI-systemen valt mogelijk onder een risicogroep uit de AI-verordening.</p> </li> <li> <p>Impact van algoritmes</p> <p>Impactvolle algoritmes moet je registreren in het Algoritmeregister.</p> </li> <li> <p>Woordenlijst</p> <p>Uitleg van begrippen die je vaak tegenkomt op deze website.</p> </li> </ul>"},{"location":"overhetalgoritmekader/CONTRIBUTING/","title":"Bijdragen aan het Algoritmekader","text":"<p>Allereerst, bedankt dat je de tijd hebt genomen om een bijdrage te leveren! \u2764\ufe0f</p> <p>We waarderen alle soorten bijdragen enorm. Zie die Inhoudsopgave voor verschillende manieren waarop je kan bijdragen aan het Algoritmekader. Zorg ervoor dat je de relevante hoofdstukken even leest voordat je een bijdrage levert. Het zal het voor het team van het Algoritmekader een stuk makkelijker maken en de ervaring voor alle betrokkenen soepeler laten verlopen. We kijken uit naar alle bijdragen! \ud83c\udf89</p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#opmerking","title":"Opmerking","text":"<p>Werken in Github is voor het team Algoritmekader nieuw en experimenteel. Dit vraagt voor ons om een aangepaste werkwijze en hier is bepaalde expertise voor nodig.  Het begin is gemaakt en het team Algoritmekader is nog lerende om hier optimaal invulling aan te geven.  Hierdoor kan het iets langer duren voordat er wordt gereageerd op suggesties of toevoegingen.  We werken aan een duidelijk proces om hier goed mee om te gaan (deze guidelines zijn daar een voorbeeld van). Daarnaast werken we niet aan alle bouwblokken tegelijk. Deze worden \u00e9\u00e9n voor \u00e9\u00e9n opgepakt.  Aanbevelingen over onderwerpen die later op de planning staan kunnen daardoor ook iets langer duren om te verwerken, en worden mogelijk pas verwerkt wanneer dit bouwblok wordt uitgewerkt.  </p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#inhoudsopgave","title":"Inhoudsopgave","text":"<ul> <li>Code of Conduct</li> <li>Ik heb een vraag</li> <li>Ik wil iets bijdragen</li> <li>Ik wil een fout of bug melden</li> <li>Hoe we werken op GitHub</li> </ul>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#code-of-conduct","title":"Code of Conduct","text":"<p>Dit project en iedereen die eraan deelneemt, valt onder de Code of Conduct. Door deel te nemen, wordt van je verwacht dat je je aan deze code houdt. Meld onacceptabel gedrag aan algoritmes@minbzk.nl.</p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#ik-heb-een-vraag","title":"Ik heb een vraag","text":""},{"location":"overhetalgoritmekader/CONTRIBUTING/#maak-een-issue-aan","title":"Maak een issue aan","text":"<p>Voordat je een Issues gaat aanmaken, kan je bekijken of jouw vraag al tussen de bestaande Issues staat. Wellicht staat er al een issue tussen die jou vraag kan beantwoorden. </p> <p>Als je jouw vraag nog steeds wilt stellen, kan je een Issue aanmaken. </p> <ol> <li>Gebruik daarvoor de knop new issue.</li> <li>Schrijf je vraag of opmerking is en geef een heldere toelichting.</li> <li>Anderen kunnen nu opmerkingen toevoegen aan jouw issue.</li> <li>Het team van het Algoritmekader zal deze issue labelen als <code>question</code> en pakt jouw issue zo snel mogelijk op. Mogelijk neemt het team van het Algoritmekader contact op voor een verduidelijking of een oplossing.</li> </ol>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#stel-een-vraag-via-mail","title":"Stel een vraag via mail","text":"<p>Je kan je vragen ook altijd stellen door een mail te sturen naar algoritmes@minbzk.nl.</p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#ik-wil-iets-bijdragen","title":"Ik wil iets bijdragen","text":"<p>Er zijn verschillende manieren waarop je kan bijdragen. Zie hieronder de mogelijkheden. </p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#ter-kennisgeving","title":"Ter kennisgeving","text":"<p>Wanneer je bijdraagt aan dit project, moet je ermee akkoord gaan dat je 100% van de inhoud hebt geschreven, dat je de benodigde rechten op de inhoud hebt en dat de inhoud die je bijdraagt mag worden geleverd onder de Code of Conduct.</p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#sluit-je-aan-bij-een-werkgroep","title":"Sluit je aan bij een werkgroep","text":"<p>Voor sommige bouwblokken wordt er gewerkt met werkgroepen, om de informatie verder uit te werken. Deelname aan een werkgroep kost tijd. Werkgroepen komen regelmatig bij elkaar, en tussendoor worden bepaalde zaken uitgewerkt door werkgroepleden. Wil je op \u00e9\u00e9n van de onderwerpen meewerken? Stuur dan een bericht naar algoritmes@minbzk.nl.</p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#neem-deel-aan-een-sprint-review-klankbord-demo","title":"Neem deel aan een sprint review / klankbord / demo","text":"<p>Het team van het algoritmekader werkt in sprints van ongeveer 3 weken. Daarin werken we toe naar de volgende release van het Algoritmekader. Ongeveer eens in de 6 weken vindt er een nieuwe release plaats. Wanneer er een release is, wordt deze altijd toegelicht en gepresenteerd in een open online review / demo. Deze kan je vrijblijvend volgen. Zo blijf je op de hoogte en kun je een bijdrage leveren. Bekijk de agenda op Algoritmes Pleio voor de komende bijeenkomsten. </p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#ik-wil-een-fout-of-bug-melden","title":"Ik wil een fout of bug melden","text":"<p>Heb je een foutje gevonden in het Algoritmekader? Dan kan je deze melden door een Issue aan te maken. </p> <p>Voordat je een Issues gaat aanmaken, kan je bekijken of jouw gevonden fout al tussen de bestaande Issues staat. </p> <p>Als je de gevonden fout nog steeds wilt melden, kan je een Issue aanmaken. </p> <ol> <li>Gebruik daarvoor de knop new issue.</li> <li>Beschrijf de fout duidelijk en geef een heldere toelichting. Voeg waar mogelijk een screenshot toe. </li> <li>Het team van het Algoritmekader zal deze issue labelen als <code>bug</code> en pakt jouw issue zo snel mogelijk op. Mogelijk neemt het team van het Algoritmekader contact op voor een verduidelijking of een oplossing.</li> </ol>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#ik-wil-een-verbetering-voorstellen","title":"Ik wil een verbetering voorstellen","text":"<p>Heb je een suggestie of wil je een verbetering voorstellen? Dat kan gaan om een compleet nieuwe functionaliteit van de site of om kleine verbeteringen. Het volgen van onderstaande instructie helpt het team van het algoritmekader om je suggestie te begrijpen en gerelateerde suggesties te vinden.</p> <p>Je kan een suggestie doen door een Issue aan te maken of door een Pull Request te maken.</p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#voordat-je-een-suggestie-gaat-maken","title":"Voordat je een suggestie gaat maken","text":"<ul> <li>Voordat je een suggestie gaat maken, kan je bekijken of jouw suggestie al tussen de bestaande Issues staat. Wellicht bestaat er al een issue die jouw suggestie beschrijft, en zijn we er al mee bezig.</li> <li>Zoek uit of jouw idee past binnen het doel en de scope van het project. Wat zijn de voordelen van deze functionaliteit of toevoeging? Het is aan jou om het team van het Algoritmekader en de community te overtuigen dat dit een nuttige toevoeging is aan het Algoritmekader. Houd in gedachten dat we functioanliteiten willen die nuttig zijn voor de meerderheid van onze gebruikers en niet slechts voor een kleine groep.</li> </ul>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#een-issue-aanmaken","title":"Een issue aanmaken","text":"<p>Als je jouw suggestie nog steeds wilt doen, kan je een Issue aanmaken. </p> <ol> <li>Gebruik daarvoor de knop new issue.</li> <li>Beschrijf duidelijk jouw suggestie en geef een heldere toelichting en onderbouwing waarom dit een goede toevoeging zal zijn aan het Algoritmekader</li> <li>Het team van het Algoritmekader zal deze issue labelen als <code>enhancement</code> en pakt jouw issue zo snel mogelijk op. Mogelijk neemt het team van het Algoritmekader contact op voor een verduidelijking of een oplossing.</li> </ol> <p>Afhankelijk van de complexiteit en het onderwerp van jouw suggestie kan het even duren voordat deze wordt opgepakt door het team van het Algoritmekader. </p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#een-pull-request-maken","title":"Een pull-request maken","text":"<p>Kun je niet uit de voeten met de issues?  Bijvoorbeeld omdat je verschillende wijzigingsvoorstellen wilt doen? Je kan ook gebruik maken van een Fork en een Pull Request.</p> <p>Het team van Algoritmekader bekijkt daarna jouw aanpassingen en kan bij akkoord jouw aanpassingen mergen. Er zijn ook andere manieren om een pull request te doen. Meer daarover. </p> <p>Afhankelijk van de complexiteit en het onderwerp van jouw suggestie kan het even duren voordat deze wordt opgepakt door het team van het Algoritmekader. </p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#preview-van-een-pull-request","title":"Preview van een pull-request","text":"<p>We maken gebruik van de tool pr-preview-action om automatisch previews te maken van een pull-request.  Dit maakt het mogelijk om de wijzigingen die zijn gedaan in een pull-request al te bekijken in de uiteindelijke omgeving.  Wanneer er een pull-request gedaan wordt via een fork, leidt dit helaas tot een error, zie Issue #79. Dit blokkeert de pull-request niet. </p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#hoe-we-werken-op-github","title":"Hoe we werken op Github","text":"<p>We werken met Markdown bestanden.  Dit is bestandsformaat voor platte tekstbestanden en wordt door veel verschillende tools ondersteund. Dit maakt het eenvoudig om versiebeheer op het Algoritmekader toe te passen. </p> <p>Daarnaast maken gebruik van mkdocs en material for mkdocs om de informatie op een interactieve wijze inzichtelijk te maken op de website van het Algoritmekader. </p>"},{"location":"overhetalgoritmekader/CONTRIBUTING/#wil-je-een-nieuwe-pagina-aanmaken","title":"Wil je een nieuwe pagina aanmaken?","text":"<p>In het mkdocs.yml bestand staan de settings voor deze website.  In principe hoef je hier niets aan aan te passen, maar als je een nieuwe pagina wilt aanmaken kan het nodig zijn om hier een aanpassing in te doen. Onderdeel van deze settings is namelijk de navigatie voor de site (welke pagina's zijn zichtbaar, en welke pagina's vallen daaronder). Dit staat in de nav: sectie.  Indien je een nieuwe pagina wilt toevoegen, is het vaak nodig deze wijziging ook door te voeren in het mkdocs.yml bestand.</p>"},{"location":"overhetalgoritmekader/over-het-algoritmekader/","title":"Over het Algoritmekader","text":"<p>Het Algoritmekader is een hulpmiddel voor overheden die algoritmes, waaronder AI (artifici\u00eble intelligentie), gebruiken. Hierin vind je de wetten en regels, hulpmiddelen en adviezen per situatie. De informatie in het Algoritmekader is nog niet betrouwbaar. Het is een b\u00e8taversie. De definitieve versie verschijnt eind 2024.</p>"},{"location":"overhetalgoritmekader/over-het-algoritmekader/#verantwoord-gebruik-van-algoritmes","title":"Verantwoord gebruik van algoritmes","text":"<p>In het Algoritmekader vind je informatie over verantwoord gebruik van algoritmes. Bijvoorbeeld:</p> <ul> <li>Wie is waarvoor verantwoordelijk?</li> <li>Hoe voorkom je discriminatie (bias) in een algoritme?</li> <li>Hoe verwerk je gegevens op een veilige manier?</li> <li>Hoe voorkom je mensenrechtenschendingen?</li> <li>Welke inkoopvoorwaarden spreek je af voor algoritmes van een externe partij?</li> </ul> <p>De informatie is bedoeld voor medewerkers van de rijksoverheid, provincies, gemeentes en waterschappen.</p>"},{"location":"overhetalgoritmekader/over-het-algoritmekader/#informatie-van-de-overheid","title":"Informatie van de overheid","text":"<p>Het Algoritmekader is een website van het Ministerie van Binnenlandse Zaken en Koninkrijksrelaties. Het team Data, AI en Algoritmes stelt de informatie samen, op basis van:</p> <ul> <li> <p>alle wetten en regels, zoals de AI-verordening en de Algemene wet bestuursrecht</p> </li> <li> <p>belangrijke hulpmiddelen, zoals de IAMA (Impact Assessment Mensenrechten en Algoritmes)</p> </li> <li>adviezen en ervaringen van experts, zoals wetenschappers</li> </ul>"},{"location":"overhetalgoritmekader/over-het-algoritmekader/#versies","title":"Versies","text":"<p>Algoritmekader is de nieuwe naam van het Implementatiekader 'Verantwoorde inzet van algoritmen'. Dit rapport is de eerste versie. Door het verder ontwikkelen van dit rapport ontstond de website Algoritmekader.</p> <p>Sindsdien verschijnt elke maand een nieuwe b\u00e8taversie van het Algoritmekader. Deze b\u00e8taversies zijn nog niet betrouwbaar. De informatie is onvolledig. Er kunnen fouten in staan.</p> <p>Versie 2.0 is de definitieve, betrouwbare versie van het Algoritmekader. Deze versie verschijnt eind 2024.</p>"},{"location":"overhetalgoritmekader/over-het-algoritmekader/#iedereen-mag-meedenken","title":"Iedereen mag meedenken","text":"<p>De informatie in het Algoritmekader komt open source tot stand. Dat betekent dat iedereen kan meekijken en zijn mening mag geven, of een voorstel mag doen:</p> <ul> <li>Geef je vraag of wijziging door.</li> <li>Sluit je aan bij een werkgroep.</li> <li>Doe mee aan een (online) vergadering zoals onze demo na een nieuwe release van het Algoritmekader.</li> </ul>"},{"location":"overhetalgoritmekader/over-het-algoritmekader/#nieuwsbrief","title":"Nieuwsbrief","text":"<p>Via onze maandelijkse Nieuwsbrief Algoritmes blijf je op de hoogte over de ontwikkelingen van het Algoritmekader.</p>"},{"location":"overhetalgoritmekader/soorten-algoritmes/","title":"Soorten algoritmes","text":"<p>Om te voldoen aan de vereisten, moet je weten met welk soort algoritme je werkt. Gaat het om simpele rekenregels of een AI-systeem? En wat voor impact hebben je algoritmes?</p>"},{"location":"overhetalgoritmekader/soorten-algoritmes/#wanneer-is-het-een-algoritme","title":"Wanneer is het een algoritme?","text":"<p>Met een algoritme bedoelen we een set regels en instructies die een computer uitvoert, met 1 of meer van deze doelen:</p> <ul> <li>problemen oplossen</li> <li>vragen beantwoorden</li> <li>taken of processen uitvoeren</li> <li>besluiten nemen</li> </ul>"},{"location":"overhetalgoritmekader/soorten-algoritmes/#rekenregels","title":"Rekenregels","text":"<p>Rekenregels (ook wel: regelgebaseerde algoritmes) zijn de meest eenvoudige algoritmes. Dit zijn door mensen bedachte regels die het computersysteem precies moet opvolgen: als x gebeurt, dan doe je y.</p> <p>Rekenregels:</p> <ul> <li>zijn expliciet geprogrammeerd en bedacht door mensen</li> <li>bestaan uit vaste stappen om een taak uit te voeren</li> </ul> <p>Rekenregels zijn niet kunstmatig intelligent (AI). Rekenregels kunnen wel onderdeel zijn van een AI-systeem. </p>"},{"location":"overhetalgoritmekader/soorten-algoritmes/#voorbeelden","title":"Voorbeelden","text":"<ul> <li>Eenvoudige chatbots die burgers advies geven op basis van door mensen bedachte beslisbomen.</li> <li>Ondersteuning berekening uitkering dat adviseert over uitkeringen, op basis van door mensen bedachte beslisbomen. </li> <li>Prestatiemonitor dat risicoscores berekent van scholen, op basis van door mensen bedachte regels.</li> </ul>"},{"location":"overhetalgoritmekader/soorten-algoritmes/#zelflerende-algoritmes","title":"Zelflerende algoritmes","text":"<p>Zelflerende algoritmes zijn algoritmes die zichzelf trainen. Dit proces heet machinelearning. Hierdoor worden computers intelligent zonder dat mensen dit precies zo programmeren. Dit is een veel voorkomende vorm van AI. </p> <p>Zelflerende technieken zijn in elk geval:</p> <ul> <li>Supervised learning (gecontroleerd leren): Je algoritme leert van gegevens die je labelt met informatie. Je biedt bijvoorbeeld foto\u2019s aan met de labels: dit is wel een kat, dit is geen kat. Voorbeeld: Virtuele assistent Gem.</li> <li>Unsupervised learning (ongecontroleerd leren): Je laat het algoritme zelf patronen en structuren ontdekken in ongestructureerde gegevens zonder labels. Je biedt bijvoorbeeld foto\u2019s aan van dieren die het algoritme zelf moet groeperen. Voorbeeld: Polis voor participatieplatformen.</li> <li>Reinforcement learning (bekrachtiginsleren): Het algoritme leert door straf en beloning. Het doel is zo hoog mogelijk scoren in zo min mogelijk tijd. Je geeft bijvoorbeeld punten als het algoritme foto\u2019s sorteert die op katten lijken. Voorbeeld: I-VRI voor verkeerslichten.</li> <li>Deep learning: Supervised, unsupervised of reinforcement learning gecombineerd met diepe neurale netwerken. Dit zijn kunstmatige neurale netwerken met veel verschillende lagen. Hierdoor kun je nog ingewikkeldere problemen oplossen. Voorbeeld: Geautomatiseerde gezichtsvergelijking bij het RNI-inschrijfproces.</li> </ul>"},{"location":"overhetalgoritmekader/soorten-algoritmes/#ai-systeem","title":"AI-systeem","text":"<p>Met een AI-systeem bedoelen we een systeem dat kunstmatig intelligent is volgens de Europese AI-verordening. Dit zijn in elk geval systemen die gebruik maken van:</p> <ul> <li>supervised learning</li> <li>unsupervised learning</li> <li>reinforcement learning</li> <li>deep learning</li> </ul> <p>Tip</p> <p>Twijfel je of je algoritme onderdeel is van een AI-systeem? Raadpleeg een expert. Of beschouw het systeem voor de zekerheid als een AI-systeem.</p>"},{"location":"overhetalgoritmekader/soorten-algoritmes/#risicogroepen-ai-systemen","title":"Risicogroepen AI-systemen","text":"<p>AI-systemen vallen mogelijk onder een van de risicogroepen uit de AI-verordening:</p> <ul> <li>Risico op misleiding</li> <li>Hoog-risico-AI-systemen</li> <li>Verboden AI-systemen</li> </ul> <p>Het hangt ervan af waarvoor je dit AI-systeem gebruikt.</p>"},{"location":"overhetalgoritmekader/soorten-algoritmes/#impact-van-algoritmes","title":"Impact van algoritmes","text":"<p>Impactvolle algoritmes moet je publiceren in het Algoritmeregister. Dat moet in elk geval in deze situaties:</p> <ul> <li>Je algoritme is onderdeel van een hoog-risico-AI-systeem. </li> <li>Je algoritme heeft invloed op een proces met rechtsgevolgen voor burgers of organisaties. Bijvoorbeeld het wel of niet krijgen van boetes of subsidies.</li> <li>Je algoritme heeft invloed op de manier waarop de overheid burgers of organisaties indeelt, of contact met hen zoekt. Bijvoorbeeld bij het inschatten van risico\u2019s of het signaleren van fraude.</li> <li>Je overheidsorganisatie vindt zelf dat het algoritme impact heeft op de maatschappij. Bijvoorbeeld omdat het algoritme ingewikkeld is, veel data gebruikt, vaak in de media komt of onderzocht wordt door een toezichthouder.</li> </ul> <p>Een impactvol algoritme kan schade veroorzaken aan de maatschappij. Daarom zijn de regels strenger voor impactvolle dan voor niet-impactvolle algoritmes. </p> <p>Tip</p> <p>Twijfel je of je algoritme impactvol is of niet? Beschouw het algoritme dan als impactvol.</p> <p>Meer uitleg en voorbeelden vind je in de Handreiking Algoritmeregister.</p>"},{"location":"rollen/","title":"Rollen","text":"<ul> <li> <p>Beleid en advies</p> <p>Dit is degene die gaat over wat wenselijk is en adviseert bij de ontwikkeling en/of inzet van een algoritme. Hierbij horen rollen zoals de beleidsmedewerker, ethicus, CIO-adviseur, architect.</p> </li> <li> <p>Jurist</p> <p>Hier komt een tekstje.</p> </li> <li> <p>Ontwikkelaar</p> <p>De Ontwikkelaar omvat alle technische expertise.</p> </li> <li> <p>Projectleider</p> <p>De projectleider richt zich op het co\u00f6rdineren en aansturen van alle betrokken partijen en processen bij de ontwikkeling van algoritmes.</p> </li> </ul>"},{"location":"rollen/beleid-en-advies/","title":"Beleid en advies","text":"<p>Dit is degene die gaat over wat wenselijk is en adviseert bij de ontwikkeling en/of inzet van een algoritme. Hierbij horen rollen zoals de beleidsmedewerker, ethicus, CIO-adviseur, architect.</p>"},{"location":"rollen/jurist/","title":"Jurist","text":"<p>(Hier komt nog tekst).</p>"},{"location":"rollen/ontwikkelaar/","title":"Ontwikkelaar","text":"<p>De Ontwikkelaar omvat alle technische expertise. Dit zijn professionals die zich bezighouden met het analyseren, ontwikkelen, en implementeren van algoritmes en modellen. Dit zijn de specialisten die zorgen voor de technische kant van de algoritmeontwikkeling, inclusief programmeren, opschonen van data, data-analyse en het ontwerpen van informatieprocessen.</p>"},{"location":"rollen/ontwikkelaar/#relevantie","title":"Relevantie","text":"<p>Mensen met technische expertise spelen een cruciale rol bij het verantwoord ontwerpen en ontwikkelen van algoritmes. Zij zorgen ervoor dat algoritmes voldoen aan technische en ethische standaarden, en passen methodes toe om de duurzaamheid, eerlijkheid en transparantie van modellen te waarborgen. Technische experts zijn vaak ook verantwoordelijk voor het testen en optimaliseren van de algoritmes, en voor het implementeren van maatregelen om privacy en gegevensbescherming te waarborgen. In het Algoritmekader zijn er tal van vereisten, maatregelen en hulpmiddelen die specifiek relevant zijn voor technische experts.</p>"},{"location":"rollen/ontwikkelaar/#bijbehorende-functies","title":"Bijbehorende functies","text":"<ul> <li>Data-analist</li> <li>Data-scientist</li> <li>Data-engineer</li> <li>Developer</li> <li>Informatieanalist</li> <li>Softwareontwikkelaar</li> </ul>"},{"location":"rollen/projectleider/","title":"Projectleider","text":"<p>De projectleider richt zich op het co\u00f6rdineren en aansturen van alle betrokken partijen en processen bij de ontwikkeling van algoritmes. Projectleiders zorgen ervoor dat projecten door de verschillende fasen van de levenscyclus van algoritmes worden geleid, van probleemanalyse tot monitoring &amp; beheer, of zelfs uitfasering.</p>"},{"location":"rollen/projectleider/#relevantie","title":"Relevantie","text":"<p>Projectmanagement binnen het Algoritmekader betekent het verbinden van benodigde expertises en het waarborgen dat alle stappen van het ontwikkelproces verantwoord en volgens de gestelde kaders worden uitgevoerd. Projectmanagers maken afspraken over de te navolgen vereisten en stellen prioriteiten in uit te voeren maatregelen. Zij houden contact met opdrachtgevers en verantwoordelijken om te zorgen dat de projectdoelen worden behaald en risico\u2019s worden gemitigeerd. Zij spelen een hoofdrol bij het realiseren van een verantwoorde en effectieve inzet van algoritmes binnen een organisatie.</p>"},{"location":"rollen/projectleider/#bijbehorende-functies","title":"Bijbehorende functies","text":"<ul> <li>Projectleider</li> <li>Product owner</li> <li>Proceseigenaar</li> <li>IT-projectmanager</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/","title":"Voldoen aan wetten en regels","text":"<ul> <li> <p>Vereisten voor de overheid</p> <p>Overzicht van de belangrijkste vereisten voor overheden die algoritmes of AI-systemen ontwikkelen of gebruiken.</p> </li> <li> <p>Aanbevolen maatregelen</p> <p>Maatregelen waarmee je kunt voldoen aan de vereisten voor overheden. Deze maatregelen zijn niet verplicht.</p> </li> <li> <p>Aanbevolen hulpmiddelen</p> <p>Hulpmiddelen waarmee je kunt voldoen aan de vereisten voor overheden. Deze hulpmiddelen zijn niet verplicht.</p> </li> <li> <p>AI-verordening in het kort</p> <p>De Europese regels voor het verantwoord ontwikkelen en gebruiken van AI. Inclusief tijdlijn.</p> </li> <li> <p>Beslishulp AI-verordening</p> <p>Geldt de AI-verordening geldt voor jouw AI-product? En aan welke vereisten moet je dan voldoen?</p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/","title":"AI-verordening in het kort","text":"<p>In de AI-verordening staan de Europese regels voor het verantwoord ontwikkelen en gebruiken van AI. Ongewenste AI is verboden vanaf 2 februari 2025. Andere AI-systemen moeten vanaf 2026 of v\u00f3\u00f3r 2030 voldoen aan bepaalde vereisten.</p> <p>Verordening (EU) 2024/1689 (AI-verordening)</p>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#over-de-ai-verordening","title":"Over de AI-verordening","text":"<p>De AI-verordening is de eerste uitgebreide wet over artifici\u00eble intelligentie (AI) ter wereld. De regels gelden voor alle Europese lidstaten. </p> <p>De AI-verordening trad in werking op 1 augustus 2024 en gaat stap voor stap gelden. De eerste regels gaan in op 2 februari 2025. Vanaf 2 augustus 2025 geldt de volgende set regels. Op 2 augustus 2027 gaan de laatste regels in. Dan is de hele AI-verordening van kracht.</p>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#europese-regels-voor-het-ontwikkelen-en-gebruiken-van-ai","title":"Europese regels voor het ontwikkelen en gebruiken van AI","text":"<p>De AI-verordening geldt in deze 3 situaties samen:</p> <ul> <li>Je ontwikkelt of gebruikt AI.</li> <li>Dit doe je namens een overheid, bedrijf of andere organisatie.</li> <li>Je organisatie is gevestigd in een EU-land.</li> </ul> <p>Het maakt niet uit waar je AI-producten ontwikkelt. Ontwikkel je buiten de EU, maar is je organisatie gevestigd in een EU-land? Dan geldt de EU-verordening.  </p>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#verantwoord-gebruik-van-ai","title":"Verantwoord gebruik van AI","text":"<p>Het doel van de AI-verordening is om verantwoord gebruik van AI te stimuleren in de hele EU. Daarom gelden in alle EU-landen dezelfde regels voor het:</p> <ul> <li>Verkleinen van risico\u2019s voor de gezondheid, veiligheid en grondrechten van mensen</li> <li>Beschermen van de democratie, de rechtsstaat en het milieu</li> </ul> <p>Het gaat dan om nieuwe risico\u2019s, zoals misleiding en discriminatie door AI-systemen. Bestaande regels zoals de Algemene verordening gegevensbescherming (AVG) en de Algemene wet bestuursrecht (Awb) beschermen voor een deel tegen de risico\u2019s van AI. De AI-verordening vult deze regels aan.</p>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#definitie-van-een-ai-systeem","title":"Definitie van een AI-systeem","text":"<p>De AI-verordening geldt voor AI-systemen. Volgens de verordening is dit: </p> <p>'(\u2026) een op een machine gebaseerd systeem dat is ontworpen om met verschillende niveaus van autonomie te werken en dat na de uitrol aanpassingsvermogen kan vertonen, en dat, voor expliciete of impliciete doelstellingen, uit de ontvangen input afleidt hoe output te genereren zoals voorspellingen, inhoud, aanbevelingen of beslissingen.'</p> <p>Hieronder vallen systemen die kunstmatig intelligent zijn door zelflerende technieken zoals:</p> <ul> <li>supervised learning</li> <li>unsupervised learning</li> <li>reinforcement learning (bekrachtiginsleren)</li> <li>deep learning</li> </ul> <p>Onder AI-systemen vallen ook systemen die gebruik maken van op logica en kennis gebaseerde benaderingen (knowledge and logic-based approaches) die leren, redeneren of modelleren mogelijk maken.</p> <p>Symbolische AI is meestal ook een AI-systeem. </p>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#uitzondering","title":"Uitzondering","text":"<p>Onder AI-systemen vallen geen systemen die gebaseerd zijn op door mensen gemaakte regels om automatisch handelingen uit te voeren.</p>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#risicogroepen","title":"Risicogroepen","text":"<p>De AI-verordening deelt AI op in risicogroepen. Hoe groter het risico van AI voor de samenleving, hoe strenger de regels uit de AI-verordening. Het hangt ervan af waarvoor je dit AI-systeem gebruikt.</p>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#risico-op-misleiding","title":"Risico op misleiding","text":"<p>Dit zijn AI-systemen die je gebruikt voor:</p> <ul> <li>interactie met mensen, zoals AI-chatbots</li> <li>genereren van content, zoals afbeeldingen laten maken door Dall-E en of audio en tekst</li> </ul> <p>Over deze systemen moet je transparant zijn. Gebruikers mogen niet denken dat zij te maken hebben met echte mensen of originele content.</p> <p>Zie AI-verordening, hoofdstuk IV.</p>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#hoog-risico-ai-systemen","title":"Hoog-risico-AI-systemen","text":"<p>Dit zijn AI-systemen die je gebruikt als veiligheidsonderdeel van bepaalde producten of AI-systemen die je gebruikt voor bepaalde diensten of processen.</p> <p>'Gebruiken als veiligheidsonderdeel' betekent dat je AI-systeem een belangrijke rol speelt in de veiligheid van een product. En dit product valt onder de harmonisatiewetgeving van de EU, zoals:</p> <ul> <li>machines</li> <li>speelgoed</li> <li>liften</li> <li>uitrusting en beveiligingssystemen voor plaatsen met ontploffingsgevaar</li> <li>radioapparatuur</li> <li>drukapparatuur</li> <li>pleziervaartuigen</li> <li>kabelbaaninstallaties</li> <li>gastoestellen</li> <li>medische hulpmiddelen</li> <li>hulpmiddelen voor het testen van menselijk materiaal (in-vitrodiagnostiek)</li> <li>auto-industrie</li> <li>luchtvaartindustrie</li> </ul> <p>Zie AI-verordening, bijlage I.</p> <p>'Gebruik voor bepaalde diensten of processen' zijn:</p> <ul> <li>Biometrie, zoals het herkennen of indelen van mensen op basis van hun vingerafdruk, gezicht of andere lichamelijke kenmerken.</li> <li>Kritieke infrastructuur, zoals het veilig houden van digitale netwerken en verkeersnetwerken en het leveren van elektriciteit, water, gas en warmte.</li> <li>Onderwijs en beroepsopleiding, zoals het bepalen welke studenten je toelaat en het beoordelen van hun prestaties of gedrag.</li> <li>Werkgelegenheid, personeelsbeheer en toegang tot zelfstandige arbeid, zoals het werven en selecteren van mensen, besluiten nemen die invloed hebben op hun contract en het beoordelen van hun prestaties of gedrag.</li> <li>Essenti\u00eble particuliere en openbare diensten, zoals bepalen wie recht heeft op uitkeringen, gezondheidszorg en andere belangrijke diensten en wie noodhulp krijgt van politie, brandweer en ambulance, het beoordelen van iemands financi\u00eble situatie, fraude opsporen en het bepalen van risico\u2019s en prijzen voor levensverzekeringen en ziektekostenverzekeringen.</li> <li>Rechtshandhaving, zoals iemands kans inschatten om slachtoffer of dader te worden, het gebruik van een leugendetector, het beoordelen van bewijsmateriaal en het opsporen van verdachten.</li> <li>Migratie, asiel en grenzen, zoals inschatten wat de kans is dat iemand gevaarlijk of illegaal is, het behandelen van aanvragen en klachten en het herkennen of opsporen van mensen.</li> <li>Rechtsbedeling en democratische processen, zoals het uitleggen van de wet aan een rechtbank, gerechtshof of de Hoge Raad, advies geven bij een geschil of het be\u00efnvloeden van de uitslag van een verkiezing.</li> </ul> <p>Zie AI-verordening, bijlage III.</p>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#verboden-ai-systemen","title":"Verboden AI-systemen","text":"<p>Dit zijn AI-systemen die:</p> <ul> <li>misleiden</li> <li>misbruik maken van kwetsbaarheden of gevoelige situaties, zoals het overhalen van mensen met schulden om iets te kopen</li> <li>sociale scores bijhouden voor gedrag van mensen en hen hiervoor straffen</li> <li>beoordelen hoe groot het risico is dat iemand een strafbaar feit pleegt</li> <li>afbeeldingen van gezichten \u2018scrapen\u2019 (verzamelen) via internet of bewakingscamera\u2019s en deze opslaan in een databank</li> <li>emoties herkennen van mensen op hun werkplek of op school</li> <li>biometrisch categoriseren: mensen indelen in gevoelige categorie\u00ebn zoals ras en geloof, op basis van lichamelijke kenmerken zoals huidskleur</li> <li>biometrisch identificeren op afstand voor rechtshandhaving, zoals gezichten herkennen via camera\u2019s op een openbaar plein (hiervoor gelden uitzonderingen in ernstige situaties zoals ontvoeringen en terrorisme)</li> </ul> <p>Zie AI-verordening, artikel 5.</p>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#2-februari-2025-stoppen-met-verboden-ai","title":"2 februari 2025: stoppen met verboden AI","text":"<p>Organisaties die verboden AI ontwikkelen of gebruiken, moeten deze producten v\u00f3\u00f3r 2 februari 2025 uitfaseren.</p>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#2-augustus-2026-ai-ontwikkelen-volgens-vereisten","title":"2 augustus 2026: AI ontwikkelen volgens vereisten","text":"<p>Organisaties die AI-systemen ontwikkelen, moeten ervoor zorgen dat deze producten v\u00f3\u00f3r 2026 voldoen aan bepaalde vereisten, zoals:</p> <ul> <li>Personen die toezicht houden op het systeem beschikken over de juiste kennis, kunde en autoriteit.</li> <li>Inputdata is voldoende relevant en representatief, voor zover dat mogelijk is.</li> <li>Als een gebruiksverantwoordelijke aanneemt dat het systeem niet meer voldoet aan de eisen uit de AI-verordening, stelt deze de aanbieder op de hoogte en onderbreekt het gebruik.</li> <li>Organisaties die beslissingen nemen over mensen met behulp van een hoog-risico-AI-systeem, informeren deze mensen hierover.</li> <li>Organisaties die AI gebruiken voor emotieherkenning of biometrische categorisatie van mensen, informeren deze mensen hierover. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#toezicht","title":"Toezicht","text":"<ul> <li>Nationale toezichthouders: controleren organisaties en kunnen straffen opleggen zoals een product uit de handel nemen</li> <li>AI-board: Europese raad voor artifici\u00eble intelligentie (nog in oprichting)</li> <li>AI-bureau: stelt richtlijnen op voor de AI-board</li> <li>Wetenschappelijk panel: advies van wetenschappers</li> <li>Adviesforum: advies van belanghebbenden</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#beslishulp-ai-verordening","title":"Beslishulp AI-verordening","text":"<p>Met de beslishulp AI-verordening bepaal je snel en gemakkelijk of jouw AI-product onder de AI-verordening valt. En wat je dan moet doen.</p>"},{"location":"voldoen-aan-wetten-en-regels/ai-verordening/#help-ons-deze-pagina-te-verbeteren","title":"Help ons deze pagina te verbeteren","text":"<p>Deel je idee, suggestie of opmerking via GitHub of mail ons via algoritmes@minbzk.nl.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/","title":"Hulpmiddelen","text":"<p>Overzicht van aanbevolen hulpmiddelen voor het verantwoord ontwikkelen, gebruiken, beoordelen en monitoren van algoritmes en AI-systemen.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/#richtlijnen-en-andere-hulpmiddelen","title":"Richtlijnen en andere hulpmiddelen","text":"<p>Met hulpmiddelen bedoelen we hulpmiddelen voor verantwoord en effectief gebruik van algoritmes en AI-systemen, zoals:</p> <ul> <li>richtlijnen</li> <li>standaarden</li> <li>leidraden</li> <li>handboeken</li> </ul> <p>Deze hulpmiddelen helpen je bij het op een rij zetten, beoordelen en verbeteren van de kenmerken, prestaties, effecten en risico\u2019s van algoritmes en AI.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/#hoe-we-hulpmiddelen-selecteren","title":"Hoe we hulpmiddelen selecteren","text":"<p>Hulpmiddelen die we aanbevelen, zijn:</p> <ul> <li>relatief bekend onder ambtenaren</li> <li>in gebruik door overheid, wetenschap of industrie </li> <li>positief beoordeeld door gebruikers</li> <li>geschikt voor algoritmes of AI-systemen van overheden</li> </ul> <p>Staat een instrument niet in onze selectie, dan kan het nog steeds een goed instrument zijn voor jouw organisatie. Er zijn dus meer hulpmiddelen mogelijk. We maken een selectie om 2 redenen:</p> <ul> <li>Een selectie is duidelijker. Als we alle hulpmiddelen aanbieden, is het voor gebruikers moeilijker te bepalen welk instrument of welke combinatie het meest geschikt is. Daarvoor lijken de hulpmiddelen te veel op elkaar.</li> <li>Een selectie kunnen we controleren op kwaliteit. We kunnen niet alle hulpmiddelen controleren.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/#sommige-hulpmiddelen-zijn-verplicht","title":"Sommige hulpmiddelen zijn verplicht","text":"<p>Als een instrument verplicht is, staat dit er duidelijk bij. Een verplicht hulpmiddel is bijvoorbeeld de Data protection impact assessment (DPIA).</p> <p>De meeste hulpmiddelen zijn niet verplicht. Bepaal zelf of je er gebruik van maakt. </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/#overzicht-hulpmiddelen","title":"Overzicht hulpmiddelen","text":"HulpmiddelenAssessment List for Trustworthy Artificial Intelligence (ALTAI)Baseline Informatiebeveiliging Overheid (BIO)De Ethische Data AssistentData Protection Impact AssessmentImpact Assessment Mensenrechten en AlgoritmesAlgoritmeregisterThe Fairness HandbookFramework for Meaningful EngagementHandreiking non-discriminatie by designInkoopvoorwaardenDiscriminatie door risicoprofielen - Een mensenrechtelijk toetsingskaderOnderzoekskader algoritmes Auditdienst Rijk 2023Toetsingskader Algoritmes Algemene Rekenkamer"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/#help-ons-deze-pagina-te-verbeteren","title":"Help ons deze pagina te verbeteren","text":"<p>Deel je idee, suggestie of opmerking via GitHub of mail ons via algoritmes@minbzk.nl.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/ALTAI/","title":"Assessment List for Trustworthy Artificial Intelligence (ALTAI)","text":"<p>OntwerpOntwikkelenJuristOntwikkelaarProjectleiderBeleid en adviesPrivacy en gegevensbeschermingDuurzaamheidFundamentele rechtenTechnische robuustheid en veiligheidTransparantieMenselijke controleData</p> <p>Direct naar de ALTAI</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/ALTAI/#hulpmiddel","title":"Hulpmiddel","text":"<p>In 2019 publiceerde de High-Level Expert Group on Artificial Intelligence (AI HLEG), opgericht door de Europese Commissie, de Ethics Guidelines for Trustworthy Artificial Intelligence. De ALTAI is een hulpmiddel dat ontwikkelaars en organisaties helpt hun AI-systemen te beoordelen, gebaseerd op deze Ethics Guidelines for Trustworthy Artificial Intelligence. Het helpt te bepalen of het AI-systeem dat wordt ontwikkeld, ingezet, aangeschaft of gebruikt, voldoet aan zeven vereisten van betrouwbare AI:</p> <ul> <li>Menselijke tussenkomst en toezicht;</li> <li>Technische robuustheid en veiligheid;</li> <li>Privacy en gegevensbeheer;</li> <li>Transparantie;</li> <li>Diversiteit, non-discriminatie en eerlijkheid;</li> <li>Maatschappelijk en ecologisch welzijn;</li> <li>Verantwoordelijkheid</li> </ul> <p>De ALTAI is bedoeld voor zelfevaluatie. Het hulpmiddel is verankerd in de bescherming van de fundamentele rechten van mensen, de term die in de Europese Unie wordt gebruikt om te verwijzen naar de mensenrechten die zijn vastgelegd in de EU-verdragen, het Handvest van de Grondrechten, en het internationale mensenrechtenrecht. </p> <p>De ALTAI is bedoeld voor flexibele inzet: organisaties kunnen gebruikmaken van de relevante onderdelen van dit hulpmiddel voor een specifiek AI-systeem of er elementen aan toevoegen die zij passend achten, rekening houdend met de sector waarin zij opereren. Het helpt organisaties te begrijpen wat betrouwbare AI inhoudt, in het bijzonder welke risico's een AI-systeem zou kunnen meebrengen en hoe deze risico's kunnen worden geminimaliseerd terwijl de kansen van AI worden gemaximaliseerd. Organisaties halen het meeste waarde uit de ALTAI door de gestelde vragen uitgebreid te beantwoorden, die zijn bedoeld om zorgvuldige reflectie te stimuleren en passende vervolgacties aan te formuleren, en een organisatiecultuur te bevorderen die zich inzet voor de ontwikkeling van betrouwbare AI-systemen. Het vergroot het bewustzijn van de mogelijke impact van AI op de samenleving, het milieu, consumenten, werknemers en burgers (in het bijzonder kinderen en mensen die tot gemarginaliseerde groepen behoren). </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/ALTAI/#relevantie","title":"Relevantie","text":"<p>De ALTAI biedt houvast bij het evalueren van in hoeverre een betreffend AI-systeem voldoet aan de zeven vereisten van betrouwbare AI, zoals geformuleerd door de EU. Deze zeven vereisten en de ALTAI hebben samen de basis gevormd voor de AI-verordening. </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/ALTAI/#auteur","title":"Auteur","text":"<p>De ALTAI is ontwikkeld door de High-Level Expert Group on Artificial Intelligence van de Europese Commissie. </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/ALTAI/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"Maatregelpba-03 - Beschrijf waarom een algoritme het probleem moet oplossenowp-06 - Inventariseer welke grondrechten het algoritme kan schenden en maak een belangenafwegingimp-03 - Richt de juiste menselijke controle in van het algoritme6-imp-06-proces-privacyrechtenmon-02 - Beveilig de softwarepba-05 - Beschrijf de wettelijke grondslag voor de inzet van het algoritmeowp-03 - Beschrijf voor welk doel het algoritme persoonsgegevens gebruikt en waarom dit mag3-dat-03-persoonsgegevens-beschrijvendat-04 - Geef data zoals persoonsgegevens een bewaartermijn met een vernietigingsprocedureowp-07 - Maak een lijst van de meest kwetsbare groepen en bescherm hen extraimp-04 - Publiceer impactvolle algoritmes en hoog-risico-AI-systemen in het Algoritmeregisterver-01 - Toets het algoritme op biasver-01 - Controleer regelmatig of het algoritme werkt zoals het bedoeld isowk-03 - Analyseer de privacy-risico\u2019s en neem maatregelen om deze risico\u2019s laag te houdenowk-01 - Ontwerp en ontwikkel het algoritme volgens de principes van \u2018security by design\u2019"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/BIO/","title":"Baseline Informatiebeveiliging Overheid (BIO)","text":"<p>OntwerpImplementatieMonitoring en beheerJuristOntwikkelaarProjectleiderTechnische robuustheid en veiligheid</p> <p>Direct naar de BIO</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/BIO/#hulpmiddel","title":"Hulpmiddel","text":"<p>De BIO is het basisnormenkader voor informatiebeveiliging voor alle overheidslagen, waardoor een gezamenlijke norm voor informatiebeveiliging is ontstaan. Het gebruik van 1 normenkader voor de gehele overheid biedt een aantal voordelen:</p> <ul> <li>Het versterken van de informatieveiligheid door betere afstemming binnen ketens van overheden en andere partijen;</li> <li>Administratieve lastenverlichting bij overheid en bedrijven, zowel afnemers als leveranciers, door uniforme beveiligingsnormen bij de overheid;</li> <li>Aansluiting bij internationale regelgeving en standaarden;</li> <li>Vermindering van onderhoudskosten.</li> </ul> <p>Op dit moment wordt er gewerkt aan de BIO2.0. Omdat de BIO2.0 pas eind 2024 van kracht zal worden, is op 1 juni 2023 de handreiking BIO2.0-opmaat opgeleverd. In deze handreiking is de indeling van de controls, doelstellingen en overheidsmaatregelen in deel 2 van de BIO in lijn gebracht met de 2022-versie van de ISO-27002. Naast tekstuele wijzigingen, zijn ook een aantal overheidsmaatregelen geactualiseerd, vanwege nieuwe dreigingen, zoals ransomware. Naast de verhoging van de feitelijke veiligheid, wordt ook geanticipeerd op aanpassingen die in de BIO2.0 zullen worden doorgevoerd. Overheidsorganisaties doen er goed aan deze actualisatie in hun beveiliging door te voeren.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/BIO/#relevantie","title":"Relevantie","text":"<p>Iedere overheidsorganisatie is verplicht de BIO in te voeren. De BIO is in december 2018 vastgesteld door de ministerraad voor de Rijksoverheid. Daarvoor was door de gemeenten, waterschappen en provincie reeds besloten tot invoering van de BIO. De overheidslagen zijn per 1 januari 2019 gestart met de implementatie van de BIO. Iedere overheidslaag heeft daarvoor zelf een implementatiepad opgesteld. De minister van BZK heeft bepaald dat in het digitale verkeer met het Rijk de BIO wordt gehanteerd.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/BIO/#auteur","title":"Auteur","text":"<p>De interbestuurlijke werkgroep-BIO draagt zorg voor het onderhoud op de BIO. Onder het voorzitterschap van BZK zijn in de werkgroep de 4 overheidskoepels vertegenwoordigd: CIO Rijk, Vereniging Nederlandse Gemeenten, InterProvinciaal Overleg en Unie van Waterschappen. Verder bestaat de werkgroep uit een aantal grote uitvoeringsorganisaties, het Forum Standaardisatie, het Nationaal Cybersecurity Centrum en het Centrum voor Informatiebeveiliging &amp; Privacybescherming. Besluitvorming over de BIO vindt plaats in het kern-IBO, waarin onder voorzitterschap van BZK vertegenwoordigers van de 4 overheidskoepels zitting hebben.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/BIO/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"MaatregelNone"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/DEDA/","title":"De Ethische Data Assistent","text":"<p>ProbleemanalyseOntwerpBeleid en adviesJuristOntwikkelaarProjectleiderDataFundamentele rechten</p> <p>Direct naar DEDA</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/DEDA/#hulpmiddel","title":"Hulpmiddel","text":"<p>DEDA is ontwikkeld door de Data School van de Universiteit Utrecht en bestaat uit een toolkit die helpt bij het in kaart brengen van ethische kwesties bij dataprojecten, bij het documenteren van het beraadslagingsproces en bij de bevordering van de verantwoording aan de diverse stakeholders en het publiek.</p> <p>DEDA bestaat uit een poster voor brainstormsessies, een interactieve vragenlijst en een handleiding. Alle tools zijn gepubliceerd door de Data School van de Universiteit Utrecht.</p> <p>DEDA bevordert verantwoordingsplicht, onderwijst gebruikers, communiceert problemen en ondersteunt projectmanagement.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/DEDA/#relevantie","title":"Relevantie","text":"<p>DEDA is een belangrijk hulpmiddel omdat het helpt bij de vroege identificatie en bespreking van ethische kwesties in dataprojecten. Net als de IAMA, biedt DEDA een gestructureerde aanpak om de implicaties van datagebruik en algoritmische besluitvorming te beoordelen. Het ondersteunt overheden bij het naleven van het zorgvuldigheidsbeginsel en maakt ethische afwegingen inzichtelijk als onderdeel van de besluitvorming. Door een interactieve vragenlijst en documentatie bevordert DEDA verantwoordingsplicht en transparantie.</p> <p>DEDA stimuleert interdisciplinaire samenwerking en helpt beleidsmakers, juristen en ontwikkelaars de ethische dimensies van data-analyse beter te begrijpen. Dit draagt bij aan zorgvuldige en rechtvaardige datagedreven oplossingen binnen de publieke sector. DEDA draagt bij aan transparantie en uitlegbaarheid van datagebruik, essentieel voor publiek vertrouwen.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/DEDA/#auteur","title":"Auteur","text":"<p>DEDA is ontwikkeld door de Data School van de Universiteit Utrecht. DEDA is in nauwe samenwerking met data-analisten ontwikkeld. Inmiddels is DEDA een wijdverspreid instrument, waar de Utrecht Data School ook trainingen en begeleiding bij geeft. Via deze link is meer informatie te vinden. </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/DEDA/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"Maatregelpba-03 - Beschrijf waarom een algoritme het probleem moet oplossen2-owp-02-gebruikte-data"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/DPIA/","title":"Data Protection Impact Assessment","text":"<p>ProbleemanalyseOntwerpDataverkenning en datapreparatieBeleid en adviesJuristProjectleiderPrivacy en gegevensbescherming</p> <p>Direct naar de DPIA</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/DPIA/#hulpmiddel","title":"Hulpmiddel","text":"<p>Is je organisatie van plan persoonsgegevens te verwerken, maar levert dat waarschijnlijk een hoog privacyrisico op?  Dan is je organisatie verplicht eerst een 'data protection impact assessment' (DPIA) uit te voeren.  Als organisatie moet je zelf bepalen of de gegevensverwerking een hoog privacyrisico oplevert.  En je dus een DPIA moet uitvoeren.  De volgende criteria kunnen hierbij helpen:</p> <ul> <li>Wat er in de Algemene verordening gegevensbescherming (AVG) staat over wanneer je een DPIA moet uitvoeren.</li> <li>De lijst van de Autoriteit Persoonsgegevens (AP) met soorten verwerkingen waarvoor je een DPIA moet uitvoeren.</li> <li>De 9 criteria voor een DPIA van de Europese privacytoezichthouders.</li> </ul> <p>De AVG geeft aan dat je in ieder geval een DPIA moet uitvoeren als je als organisatie:</p> <ul> <li>Systematisch en uitgebreid persoonlijke aspecten van mensen beoordeelt en dit gebeurt op basis van geautomatiseerde verwerking van persoonsgegevens, waaronder profiling. En hierop besluiten baseert die gevolgen hebben voor mensen. Bijvoorbeeld dat zij geen lening kunnen afsluiten. Een voorbeeld hiervan is creditscoring.</li> <li>Op grote schaal bijzondere persoonsgegevens verwerkt.</li> <li>Strafrechtelijke gegevens verwerkt.</li> <li>Op grote schaal en systematisch mensen volgt in een publiek toegankelijk gebied. Bijvoorbeeld met cameratoezicht.</li> </ul> <p>Een DPIA moet in een vroeg stadium van de beleids- of projectontwikkeling worden uitgevoerd.  Op dat moment kan namelijk nog zonder vooroordelen worden nagedacht over de gevolgen en kan het voorstel nog makkelijker worden herzien.  Dit voorkomt ook latere, kostbare aanpassingen in processen, herontwerp van systemen of zelfs stopzetten van een project.  Behalve aan het begin van een project kan een DPIA ook op andere momenten en meermaals worden uitgevoerd en geactualiseerd.  Als het voorstel wijzigt, wordt een DPIA opnieuw uitgevoerd.  Als de gegevensverwerkingen of de gevolgen ervan veranderen, moet de DPIA worden geactualiseerd.  Volgens de European Data Protection Board (EDPB) moet een DPIA iedere drie jaar worden ge\u00ebvalueerd.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/DPIA/#relevantie","title":"Relevantie","text":"<p>Een organisatie is bij wet verplicht een DPIA uit te voeren wanneer de verwerking van persoonsgegevens een hoog privacyrisico oplevert. Wanneer hier sprake van is binnen jouw organisatie, dan is de DPIA per definitie relevant voor jou. </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/DPIA/#auteur","title":"Auteur","text":"<p>De DPIA is ontwikkeld door de Europese Unie in het kader van de AVG. </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/DPIA/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"Maatregelowk-03 - Analyseer de privacy-risico\u2019s en neem maatregelen om deze risico\u2019s laag te houden"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/IAMA/","title":"Impact Assessment Mensenrechten en Algoritmes","text":"<p>ProbleemanalyseOntwerpVerificatie en validatieMonitoring en beheerProjectleiderOntwikkelaarJuristBeleid en adviesFundamentele rechtenTransparantie</p> <p>Direct naar het IAMA</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/IAMA/#hulpmiddel","title":"Hulpmiddel","text":"<p>Het Impact Assessment voor Mensenrechten bij de inzet van Algoritmes (IAMA) is een instrument voor overheidsorganen om een interdisciplinaire dialoog en besluitvorming te faciliteren bij de ontwikkeling en inzet van algoritmische systemen.  Het IAMA stelt een reeks vragen die moeten worden besproken en beantwoord om een zorgvuldige afweging van de inzet van algoritmen te waarborgen.  Dit proces is onderverdeeld in drie fasen: voorbereiding, input en throughput, en output en toezicht, waarbij steeds aandacht wordt besteed aan het vierde onderdeel van het IAMA: de impact op mensenrechten.  Het IAMA fungeert als naslagwerk voor de besluitvorming en is gekoppeld aan andere relevante richtlijnen en instrumenten, zoals de gegevensbeschermingseffectbeoordeling (ook wel DPIA).  Hierdoor biedt het een overkoepelend kader dat helpt om algoritmen verantwoord te implementeren en mogelijke risico\u2019s, zoals inbreuken op grondrechten, te identificeren en te mitigeren.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/IAMA/#relevantie","title":"Relevantie","text":"<p>Het IAMA kan op dit moment op veel politieke en internationale belangstelling rekenen.  In zowel de Eerste als Tweede Kamer zijn hierover moties ingediend en vragen gesteld.  Daarbij is het IAMA een van de weinige instrumenten in de EU die een interdisciplinaire discussie rondom (de ontwikkeling, inzet en monitoring van) algoritmes, AI en grondrechten initieert en bevordert. </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/IAMA/#auteur","title":"Auteur","text":"<p>Het IAMA is ontwikkeld door de Utrecht Data School. De auteurs van het IAMA zijn prof. mr. Janneke Gerards, dr. Mirko Tobias Sch\u00e4fer, Arthur Vankan en Iris Muis, allen werkzaam aan de Universiteit Utrecht. Opdrachtgever voor de ontwikkeling is het Ministerie van Binnenlandse Zaken.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/IAMA/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"<p>Geen maatregelen beschikbaar voor dit hulpmiddel.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/IAMA/#bronnen","title":"Bronnen","text":"<p>Impact Assessment Mensenrechten en Algoritmes</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/IAMA/#voorbeeld","title":"Voorbeeld","text":"<p>Benieuwd naar ervaringen in de praktijk? Bekijk het rapport IAMA in Actie voor de lessons learned van 15 IAMA-trajecten bij Nederlandse overheidsorganisaties. </p> <p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/algoritmeregister/","title":"Algoritmeregister","text":"<p>Monitoring en beheerProjectleiderOntwikkelaarTransparantie</p> <p>Direct naar het Algoritmeregister</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/algoritmeregister/#hulpmiddel","title":"Hulpmiddel","text":"<p>De regering wil dat de overheid algoritmes verantwoord gebruikt.  Mensen moeten erop kunnen vertrouwen dat algoritmes voldoen aan de waarden en normen van de samenleving.  En er moet uitleg zijn over hoe algoritmes werken.  Het Algoritmeregister helpt hierbij.  Wanneer overheidsorganisaties open zijn over algoritmes en hun toepassing, kunnen burgers, organisaties en media de overheid kritisch volgen.</p> <p>Je kunt hier meer lezen over de doelen van het Algoritmeregister.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/algoritmeregister/#relevantie","title":"Relevantie","text":"<p>In de Handreiking Algoritmeregister staan bruikbare handvatten voor overheidsorganisaties om met publicatie van hun algoritmes aan de slag te gaan.  Hierin wordt bijvoorbeeld duidelijkheid gegeven over welke doelen we ermee bereiken, welke algoritmes erin thuishoren en welke organisaties erin kunnen publiceren.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/algoritmeregister/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"Maatregelimp-04 - Publiceer impactvolle algoritmes en hoog-risico-AI-systemen in het Algoritmeregister"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/algoritmeregister/#bronnen","title":"Bronnen","text":"<p>Algoritmeregister</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/algoritmeregister/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/fairness-handbook/","title":"The Fairness Handbook","text":"<p>ProbleemanalyseOntwerpProjectleiderBias en non discriminatieFundamentele rechten</p> <p>Direct naar het Fairness Handbook</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/fairness-handbook/#hulpmiddel","title":"Hulpmiddel","text":"<p>Het Fairness Handbook biedt overheidsorganisaties een gedetailleerde richtlijn om eerlijkheid in algoritmen te waarborgen en schadelijke vooroordelen binnen AI-systemen te verminderen. Het handboek, dat origineel is ontwikkeld voor de Gemeente Amsterdam, richt zich op het voorkomen en mitigeren van vooroordelen en oneerlijke uitkomsten (bias) door middel van een gestructureerde Fairness Pipeline. Deze pipeline behandelt alle fasen van het ontwikkelproces, van het formuleren van het probleem tot de uiteindelijke implementatie en monitoring. Dit hulpmiddel biedt inzicht in de soorten schadelijke effecten van AI (zoals representatiebias en denigratieschade) en introduceert specifieke technieken, zoals het uitvoeren van een bias-analyse en het gebruik van contra-feitelijke scenario's (counterfactual fairness), om te controleren of de algoritmen rechtvaardige resultaten opleveren.</p> <p>Naast praktische technieken voor het meten en mitigeren van vooroordelen, definieert het Fairness Handbook verschillende eerlijkheidsprincipes en bijbehorende statistische metrics. Deze metrics helpen ontwikkelaars en beleidsmakers om de prestaties van modellen te analyseren en verschillen in modelprestaties tussen verschillende groepen te detecteren. Door de nadruk te leggen op transparantie, zowel in de keuze van datasets als in de manier waarop het model beslissingen neemt, helpt het handboek om het vertrouwen in AI-systemen te vergroten en discriminerend gedrag in algoritmen te verminderen.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/fairness-handbook/#relevantie","title":"Relevantie","text":"<p>Het Fairness Handbook biedt ondersteuning voor overheden die streven naar verantwoorde, niet-discriminerende algoritmische besluitvorming. Het handboek ondersteunt overheidsinstanties bij het identificeren en corrigeren van vooroordelen in datasets en algoritmes, waardoor het risico op schadelijke effecten, zoals ongelijke verdeling van kansen of kwaliteit van dienstverlening, wordt geminimaliseerd. Het hulpmiddel sluit nauw aan bij andere hulpmiddelen, zoals de IAMA, door richtlijnen te geven voor het beoordelen van specifieke eerlijkheidsaspecten in de context van datagebruik en algoritmeontwikkeling.</p> <p>Door de combinatie van technische en niet-technische benaderingen bevordert het Fairness Handbook een holistische benadering van algoritmische eerlijkheid. Er wordt rekening gehouden met zowel de technische als de sociale en ethische dimensies. Dit maakt het een bruikbaar hulpmiddel voor diverse overheidsprojecten, waaronder de ontwikkeling van AI-toepassingen in het sociaal domein en besluitvormingsprocessen waarbij kansengelijkheid van groot belang is.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/fairness-handbook/#auteurs-en-ontwikkeling","title":"Auteurs en Ontwikkeling","text":"<p>Het Fairness Handbook is ontwikkeld in 2022 door de Gemeente Amsterdam, met als doel de eerlijkheid en transparantie van haar AI-systemen te verbeteren. Het project is tot stand gekomen in samenwerking met diverse stakeholders, waaronder datawetenschappers, ethici en beleidsmakers, om ervoor te zorgen dat het handboek aansluit bij de bredere maatschappelijke behoeften en regelgeving. Door deze samenwerking biedt het Fairness Handbook een gebalanceerd perspectief, met aandacht voor zowel technische oplossingen als ethische en juridische overwegingen die nodig zijn voor verantwoorde AI-toepassingen.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/fairness-handbook/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"Maatregeldat-01 - Controleer de datakwaliteitver-01 - Toets het algoritme op biasimp-02 - Doe aselecte steekproeven om algoritmes met 'risicogestuurde selectie\u2019 te controleren"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/fairness-handbook/#bronnen","title":"Bronnen","text":"<p>The Fairness Handbook</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/fairness-handbook/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld van het gebruik van het Fairness Handbook op het gebied van algoritmen? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/framework-meaningful-engagement/","title":"Framework for Meaningful Engagement","text":"<p>ProbleemanalyseOntwerpProjectleiderBeleid en adviesMenselijke controleTransparantieFundamentele rechten</p> <p>Direct naar het Framework for Meaningful Engagement</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/framework-meaningful-engagement/#hulpmiddel","title":"Hulpmiddel","text":"<p>Het Framework for Meaningful Engagement biedt organisaties een praktische aanpak om verschillende stakeholders effectief te betrekken in processen rondom AI en algoritmes. Het beschrijft stapsgewijs hoe men betrokkenheid kan ontwerpen en uitvoeren, met de nadruk op drie pijlers:</p> <ol> <li>een gedeelde doelstelling</li> <li>een betrouwbaar proces</li> <li>een zichtbare impact</li> </ol> <p>Het framework helpt organisaties om input van belanghebbenden daadwerkelijk te integreren, wat leidt tot duurzamere, inclusievere besluitvorming.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/framework-meaningful-engagement/#relevantie-voor-het-algoritmekader","title":"Relevantie voor het Algoritmekader","text":"<p>Betekenisvolle betrokkenheid van stakeholders is cruciaal voor verantwoord algoritmegebruik. Voor overheden biedt dit framework handvatten om transparanter te zijn over de ontwikkeling en impact van algoritmes en om een goed proces in te richten bij het gebruik van een algoritme. Dit sluit aan bij eisen rond menselijke controle.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/framework-meaningful-engagement/#auteurs-en-ontwikkeling","title":"Auteurs en ontwikkeling","text":"<p>Het framework is ontwikkeld door de European Center for Not-for-Profit Law Stichting (ECNL) en SocietyInside, als onderdeel van de Deense Tech for Democracy Initiative. De totstandkoming vond plaats via een consultatieproces met bijdragen van meer dan 150 individuen en organisaties wereldwijd, waaronder belanghebbenden uit het maatschappelijk middenveld, bedrijfsleven en overheden. Het framework bouwt voort op de VN-richtlijnen voor bedrijfs- en mensenrechten.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/framework-meaningful-engagement/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"Maatregelimp-03 - Richt de juiste menselijke controle in van het algoritmever-03 - Controleer regelmatig of het algoritme voldoet aan alle wetten en regels en het eigen beleidver-01 - Controleer regelmatig of het algoritme werkt zoals het bedoeld isowp-06 - Inventariseer welke grondrechten het algoritme kan schenden en maak een belangenafwegingowp-07 - Maak een lijst van de meest kwetsbare groepen en bescherm hen extrapba-01 - Beschrijf het probleem dat het algoritme moet oplossenpba-02 - Beschrijf het doel van het algoritmepba-03 - Beschrijf waarom een algoritme het probleem moet oplossenpba-04 - Overleg regelmatig met belanghebbendenorg-01 - Bepaal of er genoeg experts beschikbaar zijn"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/framework-meaningful-engagement/#bronnen","title":"Bronnen","text":"<ul> <li>ECNL - Framework for Meaningful Engagement</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/","title":"Handreiking non-discriminatie by design","text":"<p>OntwikkelenImplementatieProjectleiderOntwikkelaarBias en non discriminatieFundamentele rechten</p> <p>Direct naar de Handreiking non-discriminatie by design</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/#hulpmiddel","title":"Hulpmiddel","text":"<p>Deze handreiking legt uit welke vragen en principes leidend zijn bij het ontwikkelen en implementeren van een AI-systeem met het oog op het discriminatieverbod, vanuit zowel juridisch, technisch, als organisatorisch perspectief. De handreiking is een praktisch toepasbaar ontwerpkader dat ontwikkelaars helpt om al in de ontwikkelfase van een AI-systeem discriminerende patronen zoveel mogelijk te identificeren, te voorkomen en te bestrijden.</p> <p>Er zijn 4 uitgangspunten die leidend zijn in de handreiking:</p> <ol> <li>Diversiteit</li> <li>Context</li> <li>Controleerbaarheid</li> <li>Evaluatie.</li> </ol>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/#relevantie","title":"Relevantie","text":"<p>Stuk over relevantie voor het AK volgt nog. Net als bij het IAMA, is dit document een manier om een multidisciplinaire discussie te faciliteren en stimuleren. Hierbij kunnen verschillende rollen betrokken worden door de projectleider: data-scientists, juristen, de functionaris gegevensbescherming (FG), aangevuld met domeinspecialisten.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/#wanneer-toepassen","title":"Wanneer toepassen?","text":"<p>De handreiking is primair geschreven voor teams die zelf AI-systemen bouwen. Het gaat in op verschillende fases van ontwikkeling: probleemanalyse, dataverkenning en datapreparatie, ontwikkeling, implementatie en evaluatie. Daarnaast kan deze handreiking dienen voor opdrachtgevers van AI-systemen, ofwel om vooraf offrerende partijen te vragen aan te geven hoe zij rekening zullen houden met de diverse punten uit de handreiking, ofwel om tijdens het proces mee te kijken en op relevante punten aanwijzingen te geven, ofwel om achteraf te controleren of een opgeleverd product aan alle relevante voorwaarden voldoet. </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/#relatie-tot-iama","title":"Relatie tot IAMA","text":"<p>Gebruikers van zowel de Handreiking non-discriminatie by design als het IAMA geven enkele verschillen tussen de twee instrumenten. Deze bevindingen zijn te vinden in het rapport 'Bekendheid, toepasbaarheid en toegevoegde waarde handreiking \u201cnon-discriminatie by design\"' van de Auditdienst Rijk.</p> <p>Zij geven aan dat het IAMA wordt gezien als instrument voor het nagaan van de impact van grondrechten in algemenere zin, waar de Handreiking zich specifiek richt op discriminatie. De handreiking bevat dan weer meer praktische voorbeelden die kunnen helpen bij begrip en afwegingen, waar de IAMA wat abstracter is.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/#relatie-tot-het-fairness-handbook","title":"Relatie tot het Fairness Handbook","text":"<p>Over het Fairness Handbook werd in het rapport aangegeven dat het een technischere uitwerking bevat dan de Handreiking. Het Handbook biedt wellicht meer houvast voor iemand die analyses maakt om inzicht te geven in de prestaties van het algoritme met het oog op \u2018fairness\u2019 en \u2018bias\u2019. Dit komt doordat het Handbook meer details geeft over de technische stappen die nodig zijn om te komen tot bepaalde analyses.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/#relatie-tot-toetsingskader-risicoprofielen-van-college-voor-de-rechten-van-de-mens","title":"Relatie tot Toetsingskader Risicoprofielen van College voor de Rechten van de Mens","text":"<p>Ook het toetsingskader voor discriminatie door risicoprofielen van het College voor de Rechten van de Mens kan worden gebruikt om te bepalen of er discriminatie plaatsvindt. Dit kader is afkomstig uit 2021 en er wordt gewerkt aan een nieuwe versie, die waarschijnlijk eind 2024 zal verschijnen. De verschillende stappen die daarin gebruikt worden om te bepalen of een risicoprofiel tot discriminatie leidt op grond van ras of nationaliteit, zijn zeer relevant. Daarvoor hebben zij een beslisboom ontwikkeld.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"Maatregeldat-01 - Controleer de datakwaliteitver-01 - Toets het algoritme op biasimp-02 - Doe aselecte steekproeven om algoritmes met 'risicogestuurde selectie\u2019 te controleren"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/#bronnen","title":"Bronnen","text":"<ul> <li>Handreiking non-discriminatie by design</li> <li>Onderzoeksrapport Bekendheid, toepasbaarheid en toegevoegde waarde handreiking 'non-discriminatie by design'</li> <li>Toetsingskader voor discriminatie door risicoprofielen van het College voor de Rechten van de Mens (2021)</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld van het gebruik van de Handreiking non-discriminatie by design op het gebied van algoritmen? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/inkoopvoorwaarden/","title":"Inkoopvoorwaarden","text":"<p>ProbleemanalyseOntwerpJuristProjectleiderBeleid en adviesPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/inkoopvoorwaarden/#hulpmiddel","title":"Hulpmiddel","text":"<p>Voorbeelden of templates van inkoopvoorwaarden kunnen helpen om een contract op te stellen dat een organisatie in staat stelt veilige en verantwoorde algoritmen of AI-systemen in te kopen. Deze worden ook wel eens modelcontractbepalingen genoemd. Deze voorwaarden of bepalingen kunnen opgenomen worden wanneer er een contract wordt afgesloten met een leverancier van een algoritme of algoritmisch systeem.  Er kunnen dan bijvoorbeeld beperkingen gelden om onaanvaardbare risico's van AI te vermijden, of bepaalde voorwaarden gesteld worden waaraan een algoritme juist moet voldoen.  Ook kunnen bepaalde voorwaarden worden opgenomen op basis van de vereisten in het Algoritmekader.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/inkoopvoorwaarden/#europese-commissie","title":"Europese Commissie","text":"<p>De Europese contractvoorwaarden voor AI bieden aanbestedende organisaties de mogelijkheid om specifieke clausules op te nemen in de overeenkomst. Op deze manier worden afspraken gemaakt over onderwerpen die in lijn zijn met de aankomende AI-Act. Er zijn 2 versies van de AI-inkoopvoorwaarden opgesteld: een set voorwaarden voor AI-toepassingen met een hoog-risicoprofiel en een set voorwaarden voor AI-toepassingen met een laag-risicoprofiel.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/inkoopvoorwaarden/#gemeente-amsterdam","title":"Gemeente Amsterdam","text":"<p>De Europese contractvoorwaarden voor AI zijn gebaseerd op onder andere de modelbepalingen die de Gemeente Amsterdam al eerder opstelde. Deze dienen als voorbeeld voor andere gemeenten die algoritmische toepassingen willen inkopen.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/inkoopvoorwaarden/#ai-module-bij-arbit-2022","title":"AI-module bij ARBIT-2022","text":"<p>De AI-module bij de ARBIT is gebaseerd op het gepubliceerd model van de Europese Commissie dat hierboven beschreven wordt. Via een verwijzing in de gebruikte modelovereenkomst kan de AI-module onderdeel gaan uitmaken van een onder de ARBIT te sluiten overeenkomst.</p> <p>De ARBIT zijn de Algemene Rijksinkoopvoorwaarden bij IT\u2011overeenkomsten (ARBIT) en zijn bedoeld voor kleine en middelgrote IT-inkopen door de overheid. Lees meer hierover op de website van PIANOo.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/inkoopvoorwaarden/#relevantie","title":"Relevantie","text":"<p>Steeds meer organisaties kopen algoritmische toepassingen in die veel impact hebben op gebruikers of beslissingen. Het is daarom van belang dat aanbestedende overheidsorganisaties afspraken maken met leveranciers, zodat de werking van de algoritmische toepassing transparant is en op een veilige en verantwoorde manier gebruikt wordt. Verschillende organisaties hebben daarom (voorbeeld-)contractvoorwaarden voor het inkopen van AI-systemen beschikbaar gesteld. Denk aan de Europese Commissie en de Gemeente Amsterdam.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/inkoopvoorwaarden/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"Maatregeldat-08 - Zorg dat je controle of eigenaarschap hebt over de dataowp-16 - Laat aanbieder(s) bewijs leveren dat de door hen ontwikkelde algoritmes geen inbreuk maken op de auteursrechten van derden met de trainingsdata en de output.owp-15 - Maak het leveren van bewijs voor het voldoen aan de vereisten voor algoritmes onderdeel van de beoordeling van een inschrijving.owp-13 - Maak vereisten voor algoritmes onderdeel van algemene inkoopvoorwaarden en de contractovereenkomst.owp-23 - Laat de aanbieder aangeven welke mate van opleiding en ondersteuning bij de implementatie nodig is om de beoogde algoritmes verantwoord te gebruiken.2-owp-11-data-beschikbaarheid"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/inkoopvoorwaarden/#bronnen","title":"Bronnen","text":"<ul> <li>Modelbepalingen voor gemeenten voor verantwoord gebruik van Algoritmische toepassingen</li> <li>Contractvoorwaarden voor het inkopen van artifici\u00eble intelligentie (AI)</li> <li>AI-module bij de modelovereenkomst ARBIT-2022</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/inkoopvoorwaarden/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld van het gebruik van modelbepalingen of contractvoorwaarden op het gebied van algoritmen? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/mensenrechtelijktoetsingskader/","title":"Discriminatie door risicoprofielen - Een mensenrechtelijk toetsingskader","text":"<p>ProbleemanalyseOntwerpBeleid en adviesJuristBias en non discriminatieFundamentele rechten</p> <p>Direct naar het Mensenrechtelijk Toetsingskader</p> <p>Let op!</p> <p>Dit toetsingskader wordt momenteel vernieuwd. Een nieuwe versie wordt hier gepubliceerd zodra beschikbaar. </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/mensenrechtelijktoetsingskader/#hulpmiddel","title":"Hulpmiddel","text":"<p>Dit toetsingskader helpt overheidsfunctionarissen om te bepalen wanneer risicoprofielen leiden tot discriminatie op grond van ras of nationaliteit. Het presenteert de (denk)stappen die doorlopen moeten worden om te toetsen of een risicoprofiel binnen de grenzen van het discriminatieverbod blijft. Het is belangrijk om te benadrukken dat het hierbij gaat om de juridische ondergrens van het discriminatieverbod, zoals geformuleerd door internationale en nationale rechters. Aan de regels uit dit toetsingskader moet de overheid zich dus ten minste houden. Dit laat onverlet dat de overheid kan beslissen om strengere regels te hanteren.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/mensenrechtelijktoetsingskader/#noot-voor-de-lezer","title":"Noot voor de lezer","text":"<p>Dit toetsingskader is gebaseerd op geldende verdragen, wetten en jurisprudentie tot aan november 2021. De normen en jurisprudentie op dit terrein zijn echter continu in ontwikkeling. Zo heeft het gerechtshof Den Haag in 2023 in een belangrijke uitspraak vastgesteld dat het gebruik van etnische kenmerken als een van de selectiecriteria voor controle, zoals dat plaatsvond binnen het \u2018Mobiel Toezicht Veiligheid\u2019 door de Koninklijke Marechaussee, in strijd is met het discriminatieverbod.</p> <p>Ook op Europees niveau is er nieuwe relevante jurisprudentie verschenen. Dit alles biedt een verdere aanscherping en concretisering van de geldende normen. Het College werkt daarom op dit moment aan een aangepast en doorontwikkeld toetsingskader waarin alle nieuwe ontwikkelingen worden verwerkt. </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/mensenrechtelijktoetsingskader/#relevantie","title":"Relevantie","text":"<p>Het spreekt voor zich dat overheidsinstanties zich bij het uitvoeren van hun taken moeten onthouden van discriminatie. Recente voorbeelden zoals de Kinderopvangtoeslagaffaire laten echter zien dat het in de praktijk toch mis kan gaan. Duidelijk is dat discriminerende elementen toch in risicoprofielen voorkomen. Dat heeft er mede mee te maken dat het voor medewerkers van uitvoeringsinstanties niet altijd duidelijk is wat in welke context wel en niet mag.</p> <p>Er komt daarbij veel kijken bij de beoordeling of een risicoprofiel binnen de grenzen van het discriminatieverbod blijft, zeker wanneer afkomst-gerelateerde kenmerken als selectiecriteria binnen dit risicoprofiel een rol spelen. In alle gevallen zal nauwkeurig afgewogen moeten worden welke kenmerken voor welke doeleinden worden gebruikt en hoe zich dat verhoudt tot het toepasselijke wettelijke kader. Dit toetsings- kader biedt handvatten voor het maken van deze afweging. </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/mensenrechtelijktoetsingskader/#auteur","title":"Auteur","text":"<p>Het Mensenrechtelijk Toetsingskader is ontwikkeld door het College voor de Rechten van de Mens.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/mensenrechtelijktoetsingskader/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"Maatregelver-01 - Toets het algoritme op bias"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/onderzoekskader-adr/","title":"Onderzoekskader algoritmes Auditdienst Rijk 2023","text":"<p>OntwerpImplementatieMonitoring en beheerProjectleiderBeleid en adviesGovernance</p> <p>Direct naar het Onderzoekskader Algoritmes</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/onderzoekskader-adr/#hulpmiddel","title":"Hulpmiddel","text":"<p>Dit onderzoekskader is een instrument om de beheersing van algoritmes in kaart te brengen. Het geeft inzicht in de risico\u2019s die algoritmes met zich meebrengen en met welke maatregelen deze risico\u2019s beheerst (kunnen) worden. </p> <p>Het onderzoekskader is in eerste instantie bedoeld als instrument voor auditors om de beheersing en werking van algoritmes binnen overheidsorganisaties te onderzoeken, maar is ook bruikbaar voor andere partijen om inzicht te krijgen in de huidige en/of gewenste beheersing van algoritme(s).</p> <p>Het kader richt zich op algoritmes die binnen overheidsorganisaties gebruikt worden. Het is ingericht op algoritmes die zelf van voorbeelden leren, zoals machine learning, maar is ook toepasbaar op regelgebaseerde algoritmes. Het kader is ook bruikbaar voor andere organisaties en kan bij verschillende fases van de levenscyclus van een algoritme worden ingezet. Mogelijk zijn niet alle thema\u2019s relevant gezien de context van het algoritme. De opdrachtgever en auditor(s) dienen daarom voorafgaand aan een onderzoek te analyseren en te bepalen welke thema\u2019s en onderwerpen worden onderzocht. Het onderzoekskader is ingedeeld in 4 thema\u2019s: </p> <ul> <li>Sturing en Verantwoording</li> <li>Privacy</li> <li>Data en Model</li> <li>Informatiebeveiliging</li> </ul> <p>Ethiek raakt alle thema\u2019s en komt daarom bij elk thema in het kader terug. Elk thema bevat deelgebieden en de risico\u2019s en beheersmaatregelen die daarbij horen (inclusief de bron). Ook deze kunnen weer gerelateerd zijn aan een ander thema. Een apart werkbestand voor auditors is opgesteld wat kan worden gebruikt bij het uitvoeren van een onderzoek. Dit bestand heeft dezelfde opbouw, maar bevat ook invulvelden om als auditor het risico (kans x impact) in te schatten en de bevindingen op te nemen. Daarnaast zijn toelichtingen en voorbeelden van checks en evidence opgenomen per beheersmaatregel.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/onderzoekskader-adr/#relevantie","title":"Relevantie","text":"<p>Het onderzoekskader is ontwikkeld met behulp van nationale en internationale richtlijnen en kaders, rapporten en instrumenten, zoals de Ethics guidelines for trustworthy AI van de Europese Commissie (EC), Impact Assessment voor Mensenrechten bij de inzet van Algoritmes (IAMA), de richtlijnen van het ministerie van JenV, het DPIA model Rijksoverheid (gebaseerd op o.a. AVG) en de Guiding Principles Trustworthy AI Investigations van NOREA (beroepsvereniging IT-auditors Nederland). De bron van de betreffende risico\u2019s en beheersmaatregelen is tevens opgenomen.</p> <p>Dit onderzoekskader is erg overkoepelend (net als het toetsingskader van de Algemene Rekenkamer). Er zijn dan ook veel maatregelen in het Algoritmekader gebaseerd op maatregelen die in het kader van de ADR staan. Bekijk alle maatregelen van het Algoritmekader hier.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/onderzoekskader-adr/#auteur","title":"Auteur","text":"<p>Het Onderzoekskader Algoritmes is ontwikkeld door de Auditdienst Rijk  </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/onderzoekskader-adr/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"<p>Geen maatregelen beschikbaar voor dit hulpmiddel.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/toetsingskader-algemene-rekenkamer/","title":"Toetsingskader Algoritmes Algemene Rekenkamer","text":"<p>Monitoring en beheerVerificatie en validatieProjectleiderBeleid en adviesJuristGovernance</p> <p>Direct naar het Toetsingskader</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/toetsingskader-algemene-rekenkamer/#hulpmiddel","title":"Hulpmiddel","text":"<p>Het toetsingskader omvat 5 perspectieven op algoritmes, elk met hun belangrijkste risico's geformuleerd. Het gaat om Sturing en Verantwoordelijkheid, Model en Data, Privacy, IT-beheer en Ethiek. Voor elk risico is er een specifieke onderzoeksvraag opgesteld. Door deze vragen te beantwoorden en een score toe te kennen, krijgt de gebruiker inzicht in hoe goed het gekozen algoritme de risico's beheerst.</p> <p>De mate van risico voor een specifiek algoritme wordt bepaald door twee factoren: de gebruikte geavanceerde technieken en de impact van het algoritme op de burger.</p> <p>Het toetsingskader is in eerste instantie bedoeld als toetsinstrument voor auditors (controleurs en toezichthouders). Zij kunnen dit kader gebruiken om de risico's van het beoordeelde algoritme in beeld te krijgen.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/toetsingskader-algemene-rekenkamer/#relevantie","title":"Relevantie","text":"<p>Het digitale toetsingskader 'Aandacht voor algoritmes' is ontwikkeld vanwege de toenemende maatschappelijke aandacht voor algoritmes en de behoefte aan een integraal instrument voor toetsing en analyse. Het is gebaseerd op bestaande informatie en raamwerken, zowel binnen het Rijk als door externe partijen zoals NOREA en grote accountantskantoren.</p> <p>Dit onderzoekskader is erg overkoepelend (net als het onderzoekskader van de ADR). Er zijn dan ook veel maatregelen in het Algoritmekader gebaseerd op maatregelen die in het kader van de Algemene Rekenkamer staan. Bekijk alle maatregelen van het Algoritmekader hier.</p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/toetsingskader-algemene-rekenkamer/#auteur","title":"Auteur","text":"<p>Het Toetsingskader Algoritmes is ontwikkeld door de Algemene Rekenkamer </p>"},{"location":"voldoen-aan-wetten-en-regels/hulpmiddelen/toetsingskader-algemene-rekenkamer/#bijbehorende-maatregelen","title":"Bijbehorende maatregelen","text":"<p>Geen maatregelen beschikbaar voor dit hulpmiddel.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/","title":"Maatregelen","text":"<p>Overzicht van aanbevolen maatregelen voor verantwoord gebruik van algoritmes en AI-systemen. Het zijn adviezen om te voldoen aan de vereisten voor overheden. Andere maatregelen zijn ook mogelijk.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/#alle-maatregelen-zijn-adviezen","title":"Alle maatregelen zijn adviezen","text":"<p>De maatregelen zijn niet verplicht. Het zijn adviezen uit:</p> <ul> <li>Toetsingskader Algoritmes, Algemene Rekenkamer</li> <li>Onderzoekskader algoritmes, Auditdienst Rijk</li> <li>nationale en internationale standaarden (NEN, JTC21 en ISO)</li> <li>onze werkgroepen</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/#voorbeeld","title":"Voorbeeld","text":"<p>Onderzoek het ontwikkelde algoritme op onbewuste vooringenomenheid (discriminatie) door middel van een bias-analyse.</p> <p>Deze maatregel helpt om te voldoen aan de vereiste om niet te discrimineren. Maar deze maatregel is niet verplicht. Je organisatie mag ook eigen maatregelen nemen. Zolang je uiteindelijk maar voldoet aan de vereiste.</p> <p>Tip</p> <p>Aantal maatregelen verschilt per situatie</p> <p>Welke maatregelen handig zijn in jouw situatie, hangt af van:</p> <ul> <li>de fase in de levenscyclus van je project</li> <li>de vereisten waar jouw organisatie aan moet voldoen</li> <li>jouw rol in de organisatie</li> </ul> <p>Tip</p> <p>Met \u00e9\u00e9n maatregel voldoe je soms aan meerdere vereisten.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/#help-ons-deze-pagina-te-verbeteren","title":"Help ons deze pagina te verbeteren","text":"<p>Deel je idee, suggestie of opmerking via GitHub of mail ons via algoritmes@minbzk.nl.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-01-benodigde-expertise-en-capaciteit/","title":"Bepaal of er genoeg experts beschikbaar zijn","text":"<p>org-01OrganisatieverantwoordelijkhedenProjectleiderBeleid en adviesGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-01-benodigde-expertise-en-capaciteit/#maatregel","title":"Maatregel","text":"<p>Bepaal welke expertise en capaciteit noodzakelijk is voor het ontwikkelen, inkopen en gebruiken van algoritmes en stel vast of er voldoende expertise en capaciteit beschikbaar is.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-01-benodigde-expertise-en-capaciteit/#toelichting","title":"Toelichting","text":"<ul> <li>Bepaal welke expertise en capaciteit binnen de organisatie noodzakelijk is voor het ontwikkelen, inkopen en gebruiken van algoritmes.</li> <li>Dit is sterk afhankelijk van de specifieke toepassing en de inzichten die voortkomen uit risicoanalyses. Hoe complexer en risicovoller de toepassing, des te meer expertise en capaciteit noodzakelijk is. </li> <li>Interne en externe actoren die betrokken zijn bij het ontwikkelen, inkopen en gebruik moeten over voldoende expertise en capaciteit beschikken om hun taken naar behoren uit te voeren.</li> <li>Stel vast of er afhankelijkheden van externe aanbieders ontstaan.  </li> <li>Bepaal voorafgaand aan het (laten) ontwikkelen of inkopen van algoritmes of voldoende expertise en capaciteit beschikbaar is om tot een verantwoorde inzet ervan te komen.</li> <li>Leg vast of er voldoende expertise en capaciteit beschikbaar is en onderbouw dit in projectdocumentatie.</li> <li>Om menselijke controle te kunnen uitoefenen in verschillende fases van de ontwikkeling (of inkoop) van algortimes moet de mens bepaalde kennis, tijd en vaardigheden hebben. Alleen met de juiste kennis, tijd en vaardigheden kunnen risico\u2019s op tijd ge\u00efdentificeerd en afgedekt worden. Deze kennis en expertise kan ook buiten de organisatie liggen, maar dan is het belangrijk om verantwoordelijkheden goed vast te leggen.     </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-01-benodigde-expertise-en-capaciteit/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.12 </li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 1.04</li> <li>Competencies and governance practices for AI in the public sector. Zie hoofdstuk 4</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-01-benodigde-expertise-en-capaciteit/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-02-beleid_opstellen_inzet_algoritmes/","title":"Stel beleid op voor een verantwoorde inzet van algoritmes binnen de organisatie.","text":"<p>org-04OrganisatieverantwoordelijkhedenBeleid en adviesGovernanceTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-02-beleid_opstellen_inzet_algoritmes/#maatregel","title":"Maatregel","text":"<p>Stel beleid op voor een verantwoorde inzet van algoritmes binnen de organisatie. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-02-beleid_opstellen_inzet_algoritmes/#toelichting","title":"Toelichting","text":"<p>Een duidelijk beleid over de inzet van algoritmes helpt organisaties te voldoen aan de vereisten voor het verantwoord gebruik ervan. Hierin worden zaken beschreven als:</p> <ul> <li> <p>Hoe de inzet van algoritmes gaat bijdragen aan het realiseren van de organisatiedoelstellingen. </p> </li> <li> <p>Het beschrijven van de stappen die moeten worden gezet om algoritmes op een verantwoorde wijze in te gaan zetten. Dit is afhankelijk en verschilt per type algoritme en de bijbehorende risicoclassificatie.</p> </li> <li> <p>Het beschrijven van welke hulpmiddelen in welke gevallen moeten worden ingezet om te voldoen aan de vereisten die gelden voor algoritmes. Hierbij kan worden gedacht aan:</p> <ul> <li>Een Impact Assessment Mensenrechten en Algoritmes.</li> <li>Een Data Protection Impact Assessment.</li> <li>Het hanteren van inkoopvoorwaarden.</li> </ul> </li> <li> <p>Hoe burgers worden ge\u00efnformeerd over de inzet van algoritmes door de organisatie (communicatiestrategie) en welke kanalen hiervoor kunnen worden gebruikt. Hierbij kan worden gedacht aan:</p> <ul> <li>Het Algoritmeregister voor het publiceren van hoog risico AI-systemen of impactvolle algoritmes. </li> <li>Een algemene pagina op de website met informatie over de inzet van algoritmes.</li> <li>Het verwerkingsregister.</li> <li>Een intern registratiesysteem, bijvoorbeeld voor het registreren van laag risico of niet-impactvolle algoritmes zodat deze informatie voor medewerkers beschikbaar is.</li> <li>In welke gevallen een (openbaar) besluit wordt genomen door het bestuur over de inzet van een algoritme. </li> </ul> </li> <li> <p>Er is beschreven welke informatie over welke typen algoritmes wordt gecommuniceerd met betrokkenen bij de ontwikkeling of gebruik ervan door de organisatie. </p> </li> <li> <p>Er is beschreven welke stappen worden gezetten in het geval dat er incidenten ontstaan rondom de inzet van algoritmes, denk hierbij aan een discriminatieprotocol.</p> </li> <li> <p>Dit beleidsdocument is beschikbaar en toegankelijk voor ge\u00efnteresseerden. </p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-02-beleid_opstellen_inzet_algoritmes/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-02-beleid_opstellen_inzet_algoritmes/#risico","title":"Risico","text":"<p>Zonder duidelijk beleid over de inzet van algoritmes kan het gebeuren dat algoritmes worden ontwikkeld of gebruikt die niet passend zijn binnen de organisatie. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-02-beleid_opstellen_inzet_algoritmes/#voorbeelden","title":"Voorbeelden","text":"<ul> <li>Controle op algoritmes</li> <li>ISO/IEC 42001: Artificial intelligence (AI) Management System</li> <li>Webpagina van gemeente Amsterdam over algoritmes.</li> </ul> <p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-03-toepassen_risicobeheer/","title":"Maak een plan voor het omgaan met risico\u2019s","text":"<p>org-03OrganisatieverantwoordelijkhedenProjectleiderBeleid en adviesGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-03-toepassen_risicobeheer/#maatregel","title":"Maatregel","text":"<p>Pas risicobeheer gestructureerd toe voorafgaand en gedurende de ontwikkeling en gebruik van algoritmes.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-03-toepassen_risicobeheer/#toelichting","title":"Toelichting","text":"<ul> <li>Bepaal tijdig, bijvoorbeeld in de probleemanalyse- of ontwikkelfase, om wat voor toepassing het gaat (algoritme of AI-systeem) en bepaal welke risicoclassificatie hierbij hoort.</li> <li>Bepaal op basis van de toepassing en de risicoclassificatie, welke aspecten van risicobeheer moeten worden toegepast.</li> <li>Inventariseer tijdig, bijvoorbeeld in de probleemanalayse- of ontwikkelfase, bij betrokken experts welke beleidskaders en hulpmiddelen binnen de organisatie moeten worden ingezet om risicobeheer toe te passen.</li> <li>Bepaal op basis van de levenscyclus van een algoritme of AI-systeem wanneer welke aspecten van risicobeheer moeten worden toegepast. </li> <li>Maak inzichtelijk op welke niveaus risicobeheer kan en moet worden belegd bij het ontwikkelen en gebruiken van algoritmes.</li> <li>Daarbij gaat het om het identificeren, analyseren, evalueren (afhankelijk van de risicobereidheid), behandelen (risicoreactie, o.a. maatregelen), monitoren &amp; beoordelen en communiceren &amp; rapporteren van risico's.</li> <li>Gedurende de levenscyclus van een algoritme of AI-systemen kunnen nieuwe risico's ontstaan waar mogelijk nieuwe maatregelen voor moeten worden getroffen. Het is van belang dat iteratief wordt gewerkt aan mitigerende maatregelen en dat risicobeheer periodiek wordt toegepast.</li> </ul> <p>Let op! Sommige maatregelen in het Algoritmekader gaan dieper in op het uitvoeren van risicoanalyses. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-03-toepassen_risicobeheer/#risico","title":"Risico","text":"<p>Risico's worden niet (tijdig) vastgesteld en adequaat geadresseerd en behandeld.  </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-03-toepassen_risicobeheer/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.13 </li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 1.03</li> <li>Algoritmekader</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-03-toepassen_risicobeheer/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-04-politiek-bestuurlijke-verantwoordelijkheid/","title":"Zorg voor politiek-bestuurlijk bewustzijn, betrokkenheid, en verantwoordelijkheid.","text":"<p>org-04OrganisatieverantwoordelijkhedenProjectleiderBeleid en adviesGovernanceTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-04-politiek-bestuurlijke-verantwoordelijkheid/#maatregel","title":"Maatregel","text":"<p>Zorg voor politiek-bestuurlijk bewustzijn, betrokkenheid, en verantwoordelijkheid. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-04-politiek-bestuurlijke-verantwoordelijkheid/#toelichting","title":"Toelichting","text":"<ul> <li>Voor een passende algoritmegovernance is politiek-bestuurlijk bewustzijn, betrokkenheid en verantwoordelijkheid essentieel. </li> <li>De kernvraag voor publieke organisaties bij de inzet van algoritmen is altijd: Hoe wegen we (als publieke organisatie of samenleving) de voordelen en nadelen van de inzet van algoritmen? </li> <li>Dit is per definitie een kwalitatieve en politieke vraag.</li> <li>Dit gaat niet alleen over direct opbrengsten maar ook over lange termijn en indirecte effecten, de mate waarin de inzet van technologie bijdraagt aan de legitimiteit van publieke organisatie en hoe burgers met deze technologie worden bejegend. </li> <li>Om te zorgen voor politiek-bestuurlijke betrokkenheid kan het helpen om een meerjarige visie/strategie rondom verantwoorde inzet te formuleren waar een communicatiestrategie richting burgers onderdeel van is.</li> <li>Zorg ervoor dat bestuurders bewust zijn van de voor- en nadelen van de inzet van algoritmes en daarnaar kunnen handelen.</li> <li>Dit ondersteunt teams bij het maken van de juiste overwegingen bij de ontwikkeling en gebruik van algoritmes. Het geeft ook inzicht wanneer de politiek of bestuurlijk verantwoordelijke(n) moeten worden betrokken bij het project om beslissingen te nemen, bijvoorbeeld of de mate van onbewuste vooringenomenheid (bias) binnen acceptabele grenzen ligt. </li> <li>Het doorlopen van een concrete casus voor de ontwikkeling en gebruik van een algoritme, inclusief het uitvoeren van een IAMA, kan waardevolle informatiegeven om een meerjarige visie of strategie op te stellen. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-04-politiek-bestuurlijke-verantwoordelijkheid/#bronnen","title":"Bronnen","text":"<p>Kleur bekennen - vervolgonderzoek algoritmes</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-04-politiek-bestuurlijke-verantwoordelijkheid/#risico","title":"Risico","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-04-politiek-bestuurlijke-verantwoordelijkheid/#voorbeelden","title":"Voorbeelden","text":"<p>Voorbeeld gemeente Rotterdam</p> <p>\u00c9\u00e9n van de belangrijkste hoofdconclusies van het rapport Kleur Bekennen van de gemeente Rotterdam, opgesteld door de Algemene Rekenkamer, onderstreept het belang van actief bestuur binnen algoritme- en AI-governance: </p> <p>\"Het ontbreekt aan een politiek-bestuurlijk kader dat duidelijk maakt welke normen en principes leidend zijn bij de ontwikkeling en het gebruik van algoritmes. Dit heeft als effect dat belangrijke besluit over bijvoorbeeld wenselijkheid, haalbaarheid, transparantie en bias bij de ambtelijke organisatie komen te liggen. Deze besluiten vragen om een politieke afweging\".</p> <p>De algoritmegovernance van de Gemeente Rotterdam bestaat uit de volgende onderdelen: </p> <ol> <li>een visie op de inzet van algoritmes;</li> <li>instrumentarium voor risicobeheersing dat onder andere bestaat uit een risico-assessment en een mensenrechtenassessment; </li> <li>een uiteenzetting van rollen en verantwoordelijkheden en; </li> <li>een omschrijving van de verantwoordelijkheden voor controle en advies.</li> </ol> <p>Deze stappen volgen kan helpen bij het inrichten van een algoritmegovernance.</p> <p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-05-bestaande-governance/","title":"Sluit algoritmegovernance aan op bestaande governancestructuren binnen de organisatie.","text":"<p>org-05OrganisatieverantwoordelijkhedenProjectleiderBeleid en adviesGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-05-bestaande-governance/#maatregel","title":"Maatregel","text":"<p>Sluit algoritmegovernance aan op bestaande governancestructuren binnen de organisatie.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-05-bestaande-governance/#toelichting","title":"Toelichting","text":"<p>Bij de vormgeving van een algoritmegovernance van een organisatie is het van belang om aansluiting en samenwerking te bewerkstelligen met huidige governancestructuren binnen de organisatie, zoals:</p> <ul> <li> <p>IT governance</p> </li> <li> <p>datagovernance</p> </li> <li> <p>informatiebeveiliging zoals governance rondom de NIS2 richtlijn</p> </li> <li> <p>privacygovernance</p> </li> </ul> <p>Deze governancestructuren kunnen waardevolle aanknopingspunten bieden voor algoritmegovernance, omdat hierin vaak al duidelijke afspraken zijn gemaakt en processen zijn geschreven om bijvoorbeeld risico's zo goed mogelijk te managen. In veel organisaties werken bijvoorbeeld privacy- en informatiebeveiliging en informatiebeheerders nauw samen van strategisch organisatieniveau tot operationeel, omdat deze onderwerpen raken aan beide domeinen.  Voor een verantwoorde inzet van algoritmes zullen deze expertise moeten gaan samengewerkt met andere expertise, zoals die van data science en ethiek. Het is van belang dat deze expertises tijdig en voldoende ruimte krijgen om samen te werken, zodat de functionele en niet functionele requirements kunnen worden gedefinieerd voor een verantwoorde inzet van algoritmes. Stel vast waar deze expertise elkaar nodig hebben en waar deze zelfstandige taken en verantwoordelijkheden hebben.  Voorgaande geeft inzichten om te bepalen in hoeverre algoritmegovernance, naast de bestaande governancestructuren, moet worden ingericht.</p> <p>De volgende vragen kunnen bedragen om bovenstaande inzichtelijk te krijgen: - Welke lessen zijn geleerd met de implementatie van de AVG of de toepassing van de BIO? - Is er iemand intern verantwoordelijk gemaakt voor (toezicht op) algoritmes? - Hoe werken experts vanuit verschillende onderwerpen zoals privacy, informatiebeheer, informatiebeveiliging en data op dit moment samen als het gaat om de inzet van algoritmes?</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-05-bestaande-governance/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-05-bestaande-governance/#risico","title":"Risico","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-05-bestaande-governance/#voorbeelden","title":"Voorbeelden","text":"<p>Een concreet voorbeeld van samen optrekken is deze handreiking om de IAMA en DPIA gezamelijk uit te voeren.</p> <p>Voorbeeld: Ervaringen Kadaster</p> <ol> <li>Bij inwerkingtreding van de AVG ging men snel aan de slag met DPIA\u2019s, vinkenlijstjes. Let op voor een schijndossier: Begrijp wat er toegepast moet worden, voordat je aan de slag gaat; niet uitvoeren om maar te laten zien dat je eraan voldoet.</li> <li>Nadenken over governance. De FG is bij de wet geregeld, maar er is meer nodig. Welke profielen heeft de ondersteuning voor de uitvoering; (centrale) privacy officers en is hier ruimte voor?</li> <li>Zorg dat interpretaties over wet- en regelgeving gelijk zijn binnen de organisatie en de collega\u2019s die binnen de governance structuur samenwerken.</li> <li>Er is beleid gemaakt, maar in de praktijk is te weinig capaciteit om dit uit te voeren. Stel een realistisch beleidsplan op om de gestelde doelen daadwerkelijk te kunnen realiseren. </li> </ol> <p>Centrale privacy officer Kadaster</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/","title":"Gebruik een algoritme volwassenheidsmodel om te weten waar de organisatie staat","text":"<p>org-06OrganisatieverantwoordelijkhedenProjectleiderBeleid en adviesGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/#maatregel","title":"Maatregel","text":"<p>Breng de volwassenheid van je organisatie op het gebied van algoritmes in kaart.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/#toelichting","title":"Toelichting","text":"<ul> <li>Om tot een passende algoritmegovernance voor een organisatie te komen, moet eerst worden vastgesteld wat op dit moment al is ingericht binnen een organisatie op het gebied van algoritmes.</li> <li>Hiervoor kan een volwassenheidsmodel worden toegepast.</li> <li>Op basis hiervan kunnen vervolgstappen worden gedefinieerd, zodat je een handelingsperspectief hebt om je organisatie te organiseren. Ook kunnen deze uitkomsten helpen bewustzijn over de uitdagingen te vergroten.</li> <li>Het is denkbaar dat het realiseren van algoritmegovernance vraagt om een organisatieverandering. De noodzaak voor implementatie van de AI-Verordening kan hier een katalysator voor zijn. Pas daarom verandermanagementtechnieken toe.</li> <li>Deel deze informatie met het bestuur en zorg dat hier bewustzijn ontstaat. Bepaal vervolgens hoe algoritmegovernance moet worden ingericht.</li> <li>Het is aan te raden om verantwoordelijkheden te beleggen voor het realiseren van algoritmegovernance.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/#risico","title":"Risico","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/#voorbeelden-van-volwassenheidsmodellen","title":"Voorbeelden van volwassenheidsmodellen","text":"<p>Er zijn verschillende modellen om het volwassenheidsniveau te bepalen. Deze modellen richten zich niet altijd specifiek op het beheer van algoritmes, maar kijken breder naar algoritmes in de organisatie of naar ethische vraagstukken. Governance is altijd een onderdeel van deze modellen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/#ai-ethics-maturity-model-van-krijger-thuis-de-ruiter-ligthart-broekman-2023","title":"AI ethics maturity model van Krijger, Thuis, de Ruiter, Ligthart &amp; Broekman (2023)","text":"<p>Het AI ethics maturity model van Krijger, Thuis, de Ruiter, Ligthart &amp; Broekman (2023) brengt de volwassenheid op verschillende niveau's in kaart op basis van zes categorie\u00ebn:</p> <ul> <li>awareness &amp; culture</li> <li>policy</li> <li>governance</li> <li>communication &amp; training</li> <li>pevelopment proces</li> <li>tooling</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/#het-datavolwassenheidsmodel-van-de-ibds","title":"Het Datavolwassenheidsmodel van de IBDS","text":"<p>Het datavolwassenheidmodel van de Interbestuurlijke Datastrategie (IBDS) kijkt naar hoe goed organisaties omgaan met data. Dit model is ook belangrijk voor kunstmatige intelligentie (AI), omdat data daar een grote rol speelt. Het model heeft een beslishulp datavolwassenheid waarmee bepaald kan worden hoe volwassen een organisatie is met data. IBDS biedt ook een gids met verschillende manieren om de datavolwassenheid in kaart te brengen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/#innovatie-en-volwassenheid","title":"Innovatie en volwassenheid","text":"<p>Het gebruik van algoritmes wordt vaak gezien als een vorm van innovatie. Hoe kan AI helpen bij het ondersteunen van nieuwe idee\u00ebn en het vinden van nieuwe toepassingen? Een voorbeeld van een volwassenheidsmodel over innovatie is de Innovatie Maturity Scan van Innoveren met Impact.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/#mitre-ai-maturity-model-en-organizational-assessment-tool","title":"MITRE AI Maturity Model en Organizational Assessment Tool","text":"<p>Het AI Maturity Model en de bijbehorende Organizational Assessment Tool zijn ontwikkeld door de Amerikaanse organisatie MITRE. MITRE is een non-profitorganisatie en enigzins vergelijkbaar met het Nederlandse TNO. Dit volwassenheidsmodel onderscheidt een zestal pijlers in de AI volwassenheid van een organisatie en daarbij een vijftal volwassenheidsniveaus. Het volwassenheidsmodel en assessment zijn goed gedocumenteerd.</p> <p></p> <p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes\\@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-07-intern-toezicht/","title":"Richt een algoritmegovernance in met three lines of defence","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-07-intern-toezicht/#maatregel","title":"Maatregel","text":"<p>Richt een algoritmegovernance in met three lines of defence.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-07-intern-toezicht/#toelichting","title":"Toelichting","text":"<p>Een inrichting van algoritmegovernance die vaak wordt toegepast is het three lines of defence model:</p> <ul> <li>De eerste linie gaat over eigenaarschap, ontwikkeling, gebruik en risicobeheersing van algoritmes.</li> <li>De tweede linie identificeert, beoordeelt en rapporteert over risico\u2019s en het uitgevoerde gebruik algoritmes.</li> <li>De derde verdedigingslinie controleert de werking van de governance en betreft interne advisering en toetsing. </li> </ul> <p>Schuett (2022) presenteert het three lines of defence model als volgt:</p> <p></p> <p>Het toepassen van een 'three lines of defence' is slechts \u00e9\u00e9n aspect van het toepassen van algoritmegoverance. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-07-intern-toezicht/#voorbeelden","title":"Voorbeelden","text":"<p>Onder andere de UWV en de Gemeente Rotterdam hanteren dit model met drie linies. Bij de gemeente Rotterdam zijn bijvoorbeeld de drie lijnen ingevuld via de volgende rollen en verantwoordelijkheden: \u201cDe eerste lijn bestaat uit de proceseigenaren en de operationeel verantwoordelijken. Proceseigenaren zijn verantwoordelijk voor de gehele algoritmetoepassing en de operationeel verantwoordelijken voor de ontwikkeling. De tweede lijn is de algoritme expert, die een onafhankelijke toezicht- en adviestaak heeft. De derde lijn wordt volgens de stukken die gaan over de algoritme governance vervuld door Financial audit.\u201d (Rekenkamer Rotterdam, 2024) </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-08-beslismoment-levenscyclus/","title":"Maak gebruik van beslismomenten  in de algoritmelevenscyclus","text":"<p>org-08OrganisatieverantwoordelijkhedenProjectleiderBeleid en adviesGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-08-beslismoment-levenscyclus/#maatregel","title":"Maatregel","text":"<p>Maak gebruik van beslismomenten in de levenscyclus van een algoritme.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-08-beslismoment-levenscyclus/#toelichting","title":"Toelichting","text":"<ul> <li>Algoritmegovernance kan op de levenscyclus aansluiten door 'gates' of controlepunten in te voeren. Deze gates bevatten belangrijke mijlpalen om te beoordelen of de juiste taken zijn uitgevoerd, of ethische afwegingen zijn geamaakt, of documentatie heeft plaatsgevonden en of akkoord is ingewonnen (go/no-go moment) bij de verantwoordelijke(n) om naar de volgende fase te mogen. </li> <li>Het is belangrijk om te weten dat toepassing van deze \u2018gates\u2019 niet altijd hetzelfde is. Dit kan namelijk verschillen afhankelijk van het type algoritme. </li> <li>Een hoog-risico-AI-systeem moet aan meer vereisten voldoen dan een niet impactvol algoritme. Een hoog-risico AI-systeem moet daarom binnen de gates worden getoetst op meer onderdelen dan een niet impactvol algoritme.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-08-beslismoment-levenscyclus/#bronnen","title":"Bronnen","text":"<ul> <li>Hulpmiddel handelingsruimte waardevolle AI in de zorg ([presentatie](https://nlaic.com/wp-content/uploads/2022/06/04a.</li> <li>Hulpmiddel-Handelingsruimte-Waardevolle-AI-voor-gezondheid-en-zorg.pdf))(samenvatting) is beschikbaar via de NL AI Coalitie en Data voor gezondheid</li> <li>UWV Beleidsdocument model risico management, Modellevenscyclus (blz 21), 29 september 2021</li> <li>Lifecyclemanagement in het toetsingskader van de Algemene Rekenkamer nr (1.07) .</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-08-beslismoment-levenscyclus/#risico","title":"Risico","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-08-beslismoment-levenscyclus/#voorbeelden","title":"Voorbeelden","text":"<p>Hieronder volgen twee voorbeelden van hoe governance effectief kan worden ge\u00efntegreerd in de levenscyclus van algoritmen en AI-modellen:</p> <p>Ministerie VWS In de levenscyclus</p> <p>In het hulpmiddel handelingsruimte waardevolle AI in de zorg is tussen elke fase in de levenscyclus een \u2018gate\u2019 geplaatst. Tussen de afronding van een fase en de start van de daaropvolgende fase wordt een formele poort geplaatst. Om door deze poort te gaan, moet de voorgaande fase volledig zijn afgerond: vraagstukken dienen beantwoord te zijn, activiteiten uitgevoerd en aan interne en externe vereisten dient te zijn voldaan. Deze zaken kunnen in de vorm van documentatie aan de organisatie worden opgeleverd, waarna een gesprek of review kan plaatsvinden.</p> <p>Het vormgeven van deze overgangen geeft verantwoordelijke stakeholders binnen de organisatie een structuur om de ontwikkeling en inzet van algoritmen in elke fase te beoordelen en bij te sturen. De gezamenlijke kernvraag voor alle betrokkenen in de gates is: Geloven we dat de voordelen van de inzet (en ontwikkeling) van dit algoritme opwegen tegen eventueel te verwachten nadelen? En hoe gaan we om met deze dilemma's? Daarbij kunnen opvolgende fasen in de levenscyclus een eigen accentvraag kennen, zoals \u201cIs het beoogde algoritme wenselijk?\u201d in de probleemanalyse fase tot \u201cLevert het algoritme nog de waarde op die we beogen?\u201d tijdens de monitoring- en beheerfase.</p> <p></p> <p>Voorbeeld: Het UWV</p> <p>In haar modellevenscyclus [^3] maakt het UWV gebruik van een gelaagdheid in de \u201cgates\u201d door gebruik te maken van een zachte en harde knip tussen de opvolgende fasen. Enerzijds is er een zachte knip voorzien door aan het eind van elke fase de mogelijkheid te laten om een stap terug te zetten in de levenscyclus. Mocht het onduidelijk zijn wat de beoogde voordelen zijn ten opzichte van de nadelen, of er onvoldoende invulling gegeven is aan de vereisten/activiteiten, dan kan het algoritme of AI-model ontwikkelproces bij een zachte knip een stap terugnemen in de levenscyclus. Anderzijds zijn er 4 harde grenzen in de levenscyclus aangebracht waarin formele vereisten aan het ontwikkeltraject worden opgelegd.</p> <p></p> <p>Voorbeeld: BD (Analytische en Cognitieve Technologie - CoE Cognitieve Oplossingen)</p> <p>Enkele ervaringen m.b.t. levencyclus: Plot sleutelmomenten en mijlpaal momenen in die nodig zijn om het proces te kunnen laten werken en bepaal de requirements die daarmee samenhangen. Richt als eerste een basis (b.v. voor low risk) de AI-governance in op operationeel niveau, implementeer deze basis en stel gaandeweg/ondertussen op basis van o.a. best practices de requirements op naar de \"wereld\" er om heen (tactisch en strategisch niveau). </p> <p></p> <p>Voorbeeld: Algoritmeprocesmodel Ministerie van Defensie</p> <p>Het Ministerie van Defensie heeft een \"algoritmeprocesmodel\" ontwikkeld. Op level 1 is het een levenscyclus zoals ook in het Algoritmekader. Op level 2  wordt ingegaan op de rollen en verantwoordelijkheden. Op level 3 zijn ook formulieren om op specifieke momenten in de AI-levenscyclus de juiste documentatie op te leveren. N.B.: Defensie heeft dit ingericht in Sharepoint, waardoor verantwoordelijken te koppelen zijn aan activiteiten in de levenscyclus.</p> <p></p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-09-governance-per-risicocategorie/","title":"Richt algoritmegovernance op basis van de risicoclassificatie van algoritmes.","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-09-governance-per-risicocategorie/#maatregel","title":"Maatregel","text":"<p>Richt algoritmegovernance in op basis van de risicoclassificatie van algoritmes.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-09-governance-per-risicocategorie/#toelichting","title":"Toelichting","text":"<ul> <li>Er is een verschil in de vereisten die van toepassing zijn op type algoritmes. Dit is mede afhankelijk van de risioclassificatie en de impact van het algoritme op betrokkenen.</li> <li>Zo zullen op basis van de AI-verordening meer vereisten moeten worden nageleefd bij hoog-risico AI-systemen, dan voor een AI-systeem met een beperkt risico. </li> <li> <p>Dit betekent dat algoritmegovernance uitgebreider moet zijn voor de risicovollere, complexere toepassingen dan voor de eenvoudige, niet-risicovolle toepassingen.</p> </li> <li> <p>Stel daarom tijdig vast om welk type algoritme het gaat en welke vereisten hiervoor gelden. Dat draagt eraan bij dan alleen wordt gefocust op het realiseren van de vereisten waar daadwerkelijk aan moet worden voldaan. Dit zorgt ervoor dat projecten sneller kunnen worden gerealiseerd.</p> </li> <li>Let op dat niet enkel naar de AI-verordening wordt gekeken. Ook op impactvolle algoritmes die niet vallen onder het bereik van de AI-Verordening zijn ook vereisten van toepassing, en moet algoritmegovernance op worden toegepast.</li> <li>Is algoritmegovernance nieuw bij jouw organisatie, dan kan het helpen om een use-case met beperkt risico grondig te doorlopen om hiervan te leren.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-09-governance-per-risicocategorie/#bronnen","title":"Bronnen","text":"Bekijk alle vereisten <p>Geen vereisten beschikbaar voor deze maatregel.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-09-governance-per-risicocategorie/#risico","title":"Risico","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-09-governance-per-risicocategorie/#voorbeelden","title":"Voorbeelden","text":"<p>De gemeente Rotterdam kiest ervoor om de algoritmegovernance alleen in te zetten bij hoog-risico AI-toepassingen.  Deze risicoclassificatie volgt de AI-Verordening. Voor laag-risico toepassingen geldt de standaard governance van de gemeente: de informatiebeveiligings- en privacy governance (Kleur Bekennen, Rekenkamer Rotterdam, 2024, p.71). Tabel 1 geeft inzicht in verschillende typen algoritmen en AI-toepassingen. De afbeelding uit hetzelfde rapport geeft een flowchart van hoe de governance anders is afhankelijk van de risico-categorie. </p> <p></p> <p>In dit voorbeeld is ook het principe gehanteerd dat naast hoog-risico volgens de AI-verordening, bij ieder algoritme aan de hand van een drietal vragen moet worden besloten of een uitgebreidere algoritmegovernance nodig is. * Is de werking van het algoritme niet volledig \u00e9n beknopt uit te leggen aan een gemiddelde Rotterdammer? * Ontbreekt er een menselijke beoordeling voordat de uitkomst van het algoritme in de praktijk wordt gebracht door middel van een concrete handeling van de gemeente? * Is het voorstelbaar dat de algoritmetoepassing uitmondt in een onrechtvaardige handeling van de gemeente tegen burgers of bedrijven</p> <p>Kijk zelf goed wat passend is voor jouw organisatie. </p> <p>Voorbeeld BD (Analytische en Cognitieve Technologie | CoE Cognitieve Oplossingen): * Richt als eerste een basis (b.v. voor low risk) algoritmegovernance in op operationeel niveau, implementeer deze basis en stel gaandeweg/ondertussen op basis van o.a. best practices de requirements op naar de \"wereld\" er om heen (tactisch en strategisch niveau). </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-10-inrichten-taken-en-verantwoordelijkheden-algoritmegovernance/","title":"Taken en verantwoordelijkheden zijn toebedeeld in de algoritmegovernance","text":"<p>org-10OrganisatieverantwoordelijkhedenProjectleiderBeleid en adviesGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-10-inrichten-taken-en-verantwoordelijkheden-algoritmegovernance/#maatregel","title":"Maatregel","text":"<p>Taken en verantwoordelijkheden zijn toebedeeld in de algoritmegovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-10-inrichten-taken-en-verantwoordelijkheden-algoritmegovernance/#toelichting","title":"Toelichting","text":"<ul> <li>Bij het vormgeven van een doeltreffende algoritmegovernance is het beleggen van expliciete taken en verantwoordelijkheden cruciaal.</li> <li>Het beleggen van deze taken en verantwoordelijkheden zorgt voor een actiegerichte structuur waarin duidelijkheid bestaat over wie wanneer aan zet is.</li> <li>Denk hierbij aan het opstellen van een RACI-matrix en pas dit binnen de organisatie toe per risicoclassificatie voor algoritmes. </li> <li>Rollen en verantwoordelijkheden kunnen worden gekoppeld aan de vereisten en maatregelen die moeten worden gerealiseerd in de verschillende fasen van de levenscyclus van een algoritme.</li> <li>Organisaties zullen zelf moeten beoordelen welke taken en verantwoordelijkheden ze willen koppelen aan de beschikbare (of nieuwe) rollen binnen hun organisaties.  </li> <li>Zie hieronder een mogelijk voorbeeld van hoe dit eruit kan zien. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-10-inrichten-taken-en-verantwoordelijkheden-algoritmegovernance/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-10-inrichten-taken-en-verantwoordelijkheden-algoritmegovernance/#risico","title":"Risico","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-10-inrichten-taken-en-verantwoordelijkheden-algoritmegovernance/#voorbeelden","title":"Voorbeelden","text":"<p>Three lines of defence - diverse organisaties</p> <p>Het three lines of defence model dat zowel de gemeente Rotterdam als het UWV hanteert biedt hiervoor handvatten. De essentie van dit model is het scheiden van drie niveau\u2019s in verantwoordelijkheden om effectieve governance mogelijk te maken. Daarnaast wordt in veel governance structuren een RACI model opgesteld om rollen en verantwoordelijkheden expliciet te maken. </p> <p>RACI matrix - diverse organisaties</p> <p>RACI is de afkorting voor Responsible (Verantwoordelijk \u2013 uitvoerder van de taak), Accountable (Aanspreekbaar \u2013 eigenaar van de taak), Consulted (Geconsulteerd) en Informed (Ge\u00efnformeerd). De gemeente Rotterdam heeft de interactie tussen rollen/verantwoordelijkheden van algoritme/AI governance en de volledige datamanagement structuur in een RACI model vormgegeven (Bron: Kleur bekennen rekenkamer Rotterdam). Wees bewust dat iedere organisatie anders is, en waarschijnlijk op een andere RACI-matrix uitkomt. </p> <p></p> <p>Niet alles town down vast te leggen - CoE Belastingdienst</p> <p>Het te regide vastleggen van functies en bijbehorende taken en verantwoordelijkheden kan nadelen hebben. Een team bij de belastingdienst (Analytische en Cognitieve Technologie | CoE Cognitieve Oplossingen) heeft ervaren dat het definieren van werkpakketten in plaats van uitwerkte functies beter werkt. Alles dient belegd te zijn, maar alles op microniveau vastleggen is vaak niet te doen zonder in de praktijk te staan, en kan avenrechts werken. Wees als algoritmegovernance nog nieuw is zeker in het begin bewust dat inrichting altijd beter kan; ga grondig maar ook flexibel te werk.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-11-gebruikersbeheer/","title":"Maak afspraken over het beheer van gebruikers","text":"<p>org-11OrganisatieverantwoordelijkhedenProjectleiderBeleid en adviesTechnische robuustheid en veiligheidGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-11-gebruikersbeheer/#maatregel","title":"Maatregel","text":"<p>Richt gebruikersbeheer in, waarmee bepaald wordt wie toegang heeft tot wat, en wat er bijvoorbeeld gebeurt bij indiensttreding, functiewijziging en uitdiensttreding.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-11-gebruikersbeheer/#toelichting","title":"Toelichting","text":"<p>Gebruikersbeheer zorgt ervoor dat accounts en autorisaties beheerst worden aangevraagd, geautoriseerd, gewijzigd en ingetrokken bij indiensttreding, functiewijziging en uitdiensttreding. Ook wordt functievermenging voorkomen bij toegang en gebruik van het algoritme, de data of de uitkomsten van een algoritme.</p> <p>Bij het inrichten van gebruikersbeheer moeten aan de volgende elementen worden gedacht:</p> <ul> <li>Gebruikers en beheerders krijgen slechts toegang tot functionaliteit die zij uit hoofde van hun functie nodig hebben (need to know, need to use). Daartoe is een beschrijving beschikbaar welke rollen en rechten per applicatie bij een functie horen (BIO 6.1.2, 9.2.2 en 9.4).</li> <li>Het verlenen en muteren van accounts en toegangsrechten vindt plaats na goedkeuring door een bevoegde functionaris. Dit aan de hand van een actueel mandaatregister waaruit blijkt welke personen beslissende bevoegdheden hebben voor het verlenen van een bepaald type (niveau) toegangsrechten danwel functieprofielen (BIO 9.2.1.2, 9.2.2.1, 9.4).</li> <li>Er bestaat functiescheiding tussen het aanvragen, autoriseren en doorvoeren van wijzigingen in gebruikersaccounts en toegangsrechten (BIO 9.2.1.2, 9.2.2.1, 9.2.3).</li> <li>Functiewijzigingen en uitdiensttredingen worden bewaakt voor aanpassen van de toegangsrechten en voor intrekken van de identiteits- en authenticatiemiddelen (BIO 9.2.2, 9.2.6).</li> <li>Het aantal accounts met verhoogde rechten is beperkt en verklaard, en staat in logische verhouding tot de beheerders en of ICT-afdeling (BIO 9.1.2.(1), 9.2.3, 9.2.4).</li> <li>Gebruikersaccounts en beheeraccounts dienen altijd persoonsgebonden en verklaard te zijn, zodat handelingen altijd te herleiden zijn naar \u00e9\u00e9n verantwoordelijke (BIO 9.1, 9.4.2).</li> <li>Eindgebruikers hebben geen directe toegang tot de onderliggende componenten (zoals de database) (BIO 9.2.3, 13.1.3).</li> <li>Toegangsrechten op onderliggende componenten dienen periodiek, minimaal jaarlijks, ge\u00ebvalueerd te worden. Dit interval dient te zijn beschreven in het toegangsbeleid en zijn bepaald op basis van het risiconiveau. De uitkomsten van de evaluatie en de opvolging daarvan worden vastgelegd (BIO 9.2.5).</li> </ul> <p>Voor deze maatregelen is het van belang om aandacht te hebben voor de volgende zaken:</p> <ul> <li>Autorisatiematrix en beschrijving rollen/rechten per systeem(laag)</li> <li>Lijst met wijzigingen rollen en bijbehorende goedkeuringen</li> <li>Overzicht aantallen en rechten per (systeem)laag</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-11-gebruikersbeheer/#risico","title":"Risico","text":"<p>Er bestaan meerdere risico's wanneer er geen gebruikersbeheer is: - Toegangsrechten kunnen niet meer up-to-date zijn, bijvoorbeeld wanneer er geen rekening wordt gehouden met het IDU-proces (). Er bestaat dan het risico dat gebruikers toegang tot de omgeving van het algoritme, de data of de uitkomsten van het algoritme hebben die zij niet zouden mogen hebben. - Wanneer functievermenging niet wordt voorkomen bij toegang en gebruik van het algoritme, bestaat het risico dat er ongeautoriseerde wijzigingen worden doorgevoerd aan het algoritme, de data of de uitkomsten van het algoritme. - Wanneer gebruik wordt gemaakt van generieke-, groeps- of onpersoonlijke accounts, bestaat het risico dat handelingen niet te herleiden zijn naar een verantwoordelijke persoon.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-11-gebruikersbeheer/#bronnen","title":"Bronnen","text":"<ul> <li>Baseline Informatiebeveiliging Overheid</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, IB.10 t/m IB.17</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 4.01, 4.02, 4.04, 4.05</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-11-gebruikersbeheer/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/","title":"Controleer en verbeter regelmatig de kwaliteit van het algoritme","text":"<p>org-12OrganisatieverantwoordelijkhedenMonitoring en beheerProjectleiderBeleid en adviesGovernanceMenselijke controle</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/#maatregel","title":"Maatregel","text":"<p>Richt een proces in voor een periodieke evaluatie van de kwaliteit van het algoritme.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/#toelichting","title":"Toelichting","text":"<ul> <li>Het is van belang dat een proces wordt ingericht waarmee periodiek de kwaliteit van algoritmes wordt ge\u00ebvalueerd.</li> <li>Bij kwaliteit van een algoritme kan worden gedacht aan doeltreffenheid, doelmatigheid, betrouwbaarheid en accuraatheid (geschiktheid), non-discriminatie en menselijke controle.</li> <li>Hieronder vallen het analyseren en evalueren van ingediende klachten en incidenten.</li> <li>Hieronder vallen ook het analyseren evalueren van besluiten door of aan de hand van het algoritmen.</li> <li>Na verloop van tijd kan de accuraatheid van machine learning modellen bijvoorbeeld wijzigen of kan het gebeuren dat bepaalde groepen (indien van toepassing) anders worden behandeld.</li> <li>Het is van belang dat monitoringsactiviteiten worden ingericht om deze kwaliteitsaspecten tijdig te beoordelen.</li> <li>Als er ongewenste wijzigingen plaatsvinden met betrekking tot de kwaliteit, moeten die worden ge\u00ebvalueerd en zullen maatregelen moeten worden getroffen om deze te herstellen.</li> <li>Het proces moet er voor zorgen dat de juiste experts of stakeholders worden betrokken bij het proces van evaluatie en het treffen van passende maatregelen.</li> </ul> <p>Let op! Sommige maatregelen in het Algoritmekader gaan dieper in op het uitvoeren van risicoanalyses. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/#risico","title":"Risico","text":"<p>Zonder evaluatie van de kwaliteit van het algoritme is er geen goede sturing, beheersing en verantwoording mogelijk als er ongewenste wijzigingen plaatsvinden in het algoritme of AI-systeem. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.15, SV.16, SV.17 </li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 1.08</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-13-wachtwoordbeheer/","title":"Maak afspraken over het beheer van wachtwoorden","text":"<p>org-13OrganisatieverantwoordelijkhedenProjectleiderOntwikkelaarTechnische robuustheid en veiligheidGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-13-wachtwoordbeheer/#maatregel","title":"Maatregel","text":"<p>Richt wachtwoordbeheer in, waarmee bepaald wordt hoe wachtwoorden worden opgeslagen, wanneer wijzigingen moeten plaatsvinden en waaraan wachtwoorden moeten voldoen. Hiermee wordt de toegang tot bijvoorbeeld ontwikkelomgevingen geregeld op een veilige manier.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-13-wachtwoordbeheer/#toelichting","title":"Toelichting","text":"<p>Bij het inrichten van wachtwoordbeheer moeten de volgende zaken worden toegepast:</p> <ul> <li>Alle wachtwoorden van gebruikers en beheerders dienen periodiek te worden gewijzigd, met een maximum van 1 jaar (BIO 9.4.3). Initi\u00eble wachtwoorden en wachtwoorden die gereset zijn, hebben een maximale geldigheidsduur van 24 uur en moeten bij het eerste gebruik worden gewijzigd.</li> <li>Voor toegang vanuit een onvertrouwde omgeving dient twee-factor authenticatie te worden gebruikt (BIO 9.4.2.1). Als er geen gebruik wordt gemaakt van two-factor authenticatie, is de wachtwoordlengte minimaal 8 posities en complex van samenstelling. In situaties waar geen two-factor authenticatie mogelijk is, wordt minimaal halfjaarlijks het wachtwoord vernieuwd.</li> <li>Na een periode van maximaal 15 minuten inactiviteit dient de toegang tot de applicatie te worden vergrendeld en na 10 foutieve inlogpogingen dient het account geblokkeerd te worden (BIO 11.2.9, BIO 9.4.3). De tijdsduur dat een account wordt geblokkeerd na overschrijding van het aantal keer foutief inloggen is vastgelegd.</li> <li>Wachtwoorden mogen niet in originele vorm (plaintext) worden opgeslagen, maar dienen versleuteld te worden. (NIST 5.1.1.2)</li> <li>De eisen aan wachtwoorden moeten geautomatiseerd worden afgedwongen.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-13-wachtwoordbeheer/#risico","title":"Risico","text":"<p>Als het wachtwoordbeheer van onvoldoende kwaliteit is, kan oneigenlijke toegang plaatsvinden tot het algoritme of uitkomsten van het algoritme, bijvoorbeeld doordat het wachtwoord te eenvoudig is.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-13-wachtwoordbeheer/#bronnen","title":"Bronnen","text":"<ul> <li>Baseline Informatiebeveiliging Overheid</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, IB.6 t/m IB.9</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 4.03</li> <li>NIST 5.1.1.2</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-13-wachtwoordbeheer/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-14-wijzigingenproces/","title":"Maak afspraken over het wijzigen van de code","text":"<p>org-14OrganisatieverantwoordelijkhedenProjectleiderOntwikkelaarTechnische robuustheid en veiligheidGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-14-wijzigingenproces/#maatregel","title":"Maatregel","text":"<p>Richt een wijzigingenproces in, waarmee bepaald wordt hoe codewijzigingen plaatsvinden.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-14-wijzigingenproces/#toelichting","title":"Toelichting","text":"<p>Bij het inrichten van een proces om wijzigingen aan de code te mogen aanbrengen, kunnen aan de volgende elementen worden gedacht:</p> <ul> <li>Wijzigingen dienen van te voren te worden geautoriseerd door de systeemeigenaar of product owner. (BIO 12.1.2)</li> <li>Wijzigingen worden getest in een andere omgeving dan de productieomgeving. (BIO 12.1.4, 14.2.3, 14.2.9, 14.3.1)</li> <li>Wijzigingen worden door de systeemeigenaar of product owner goedgekeurd op basis van gedocumenteerde testresultaten en pas daarna doorgevoerd in de productieomgeving. (BIO 12.1.2, 14.2.2, 14.2.9)</li> <li>Er dient functiescheiding te zijn ingericht tussen het aanvragen, goedkeuren en doorvoeren van wijzigingen om onbevoegde en onbedoelde wijzigingen te beperken. (BIO 6.1.2, 14.2.2)</li> <li>Er dient periodiek controle plaats te vinden op wijzigingen aan het systeem, zodanig dat oneigenlijke wijzigingen worden gesignaleerd. (BIO 9.4.4, 12.4.1)</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-14-wijzigingenproces/#risico","title":"Risico","text":"<p>Als een formeel wijzigingenproces ontbreekt bestaat het risico van ongeautoriseerde toegang, wijziging of beschadiging van de code van het algoritme, of de uitkomsten van het algoritme.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-14-wijzigingenproces/#bronnen","title":"Bronnen","text":"<ul> <li>Baseline Informatiebeveiliging Overheid</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, IB.1 t/m IB.5</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 4.07 </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-14-wijzigingenproces/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/","title":"Stel een protocol vast voor de situatie dat er (een vermoeden van) discriminatie door een algoritme is geconstateerd en pas dit wanneer nodig toe.","text":"<p>imp-10OrganisatieverantwoordelijkhedenImplementatieProjectleiderBeleid en adviesBias en non discriminatie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/#maatregel","title":"Maatregel","text":"<p>Stel een protocol vast voor de situatie dat er (een vermoeden van) discriminatie door een algoritme is geconstateerd en pas dit wanneer nodig toe.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/#toelichting","title":"Toelichting","text":"<p>De inzet van algoritme kan onbedoeld leiden tot discriminerende effecten.  Het is van belang om als organisatie een protocol te hebben vastgesteld waarin is uitgewerkt hoe wordt omgegaan met situaties waarin (een vermoeden van) discriminatie door een algoritme is geconstateerd. In een dergelijk protocol kunnen de handelingen worden beschreven die moeten worden uitgevoerd om deze situatie te gaan herstellen. Het vaststellen van een dergelijk protocol geeft ontwikkelaar en gebruikers (vooraf) duidelijkheid wat van hen wordt verwacht en wat zij kunnen doen om discriminatie door algoritmes te voorkomen. Een voorbeeld hiervan is het analyseren van de data op datakwaliteit en bias in de data en toets regelmatig je algoritmisch systeem op bias. </p> <p>Het Ministerie van Binnenlandse Zaken en Koninkrijksrelaties heeft een discriminatieprotocol opgesteld wat organisaties handvatten biedt.</p> <p>Een discriminatieprotocol kan de volgende stappen bevatten:</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/#stap-1-vermoeden-van-onrechtmatigheid","title":"Stap 1: Vermoeden van onrechtmatigheid","text":"<p>Een vermoeden van bevooroordeeldheid of discriminatie kan vanuit verschillende partijen gemeld worden.  Signalen hiervoor kunnen worden ontvangen vanuit de interne organisatie, bijvoorbeeld door de betrokken ontwikkelaars, gebruikers of beheerders, of door externe partijen, zoals belanghebbenden, toezichthouder, journalisten. </p> <ul> <li>Zorg dat signalen tijdig bij de goede medewerkers terecht komen. </li> <li>Indien er sprake is van zo'n vermoeden, zorg je dat bijvoorbeeld de uitvoerend directeur, de interne toezichthouder en/of de CIO en CDO hierover worden ge\u00efnformeerd. </li> <li>Maak met de verantwoordelijken een afweging of het betreffende systeem in werking kan blijven of dat bijvoorbeeld het noodplan voor het stopzetten van het algoritme (tijdelijk) in gang moet worden gezet. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/#stap-2-inzicht-en-overzicht","title":"Stap 2: Inzicht en overzicht","text":"<p>Het is van belang om inzicht en overzicht te krijgen over de oorzaak en de gevolgen van eventuele discriminerende effecten van het algoritme.  Daarvoor kan worden gedacht aan het uitvoeren van een bias analyse.</p> <ul> <li>Bepaal wie er verantwoordelijk is voor het uitvoeren van het onderzoek.</li> <li>Bepaal of je een onafhankelijk onderzoek wilt doen naar het algoritme.</li> <li>Breng in kaart wat de omvang van het probleem is. Hoe lang doet het probleem zich al voort, en hoeveel mensen betreft het?</li> <li>Ga snel met (vertegenwoordigers van) gedupeerden in gesprek over de gevolgen en de mogelijke schade</li> <li>Trek een conclusie of er sprake is van discriminatie, of een sterk vermoeden van discriminatie. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/#stap-3-beperken-schade","title":"Stap 3: Beperken schade","text":"<p>Bepaal welke mitigerende maatregelen er genomen moeten worden. Als er in het onderzoek is vastgesteld dat er sprake is van discriminatie, dan moet het betreffende systeem worden stopgezet. Hierbij kan je denken aan:</p> <ul> <li>Het in werking stellen van het het noodplan voor het stopzetten van het algoritme, indien dat in stap 1 nog niet gebeurd is. </li> <li>Aanpassingen in het algoritme, de werkinstructies of de bijbehorende processen.</li> <li>Indien het algoritme essentieel is in de uitvoer kan er sprake zijn van een een proportionaliteitsvraagstuk. In dat geval moet er worden bezien wat de alternatieven zijn, en of er delen van het systeem kunnen worden uitgeschakeld.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/#stap-4-melden-en-informeren","title":"Stap 4: Melden en informeren","text":"<p>De conclusies van de eerdere stappen moeten, indien nodig, worden gemeld bij de betreffende instanties. De eventuele gedupeerde burgers dienen te worden ge\u00efnformeerd over de gevolgen.</p> <ul> <li>Als er sprake is van een hoog-risico-AI-systeem moeten ernstige incidenten worden gemeld bij de markttoezichtautoriteiten. Zie artikel 73 van de AI-verordening en artikel 3 (49.c) van de AI-verordening.</li> <li>Voor alle algoritmes geldt: Informeer de interne toezichthouder, de externe toezichthouder en de politiek, afhankelijk van hoeveel mensen geraakt en gedupeerd zijn en de impact. </li> <li> <p>Informeer de betrokken burgers over de sitatie. Maak indien nodig excuses en geef de mensen die (mogelijk) geraakt zijn uitleg zodat zij:</p> <ul> <li>begrijpen wat er is gebeurd</li> <li>weten wat de waarschijnlijke gevolgen zijn</li> <li>welke mitigerende maatregelen zijn genomen</li> <li>waar mensen terecht kunnen met vragen</li> <li>op de hoogte zijn van het proces rondom de afhandeling van de schade.</li> </ul> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/#stap-5-registratie-en-afhandeling","title":"Stap 5: Registratie en afhandeling","text":"<ul> <li>Registreer het algoritme in het algoritmeregister, indien dat nog niet gebeurd is.</li> <li>Zorg voor goede klachtenafhandeling en herstelprocedures. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/#bronnen","title":"Bronnen","text":"<ul> <li>Discriminatieprotcol van het Ministerie van Binnenlandse Zaken en Koninkrijksrelaties</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-01-formuleren-probleemdefinitie/","title":"Beschrijf het probleem dat het algoritme moet oplossen","text":"<p>pba-01ProbleemanalyseProjectleiderGovernanceTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-01-formuleren-probleemdefinitie/#maatregel","title":"Maatregel","text":"<p>Formuleer en documenteer wat de aanleiding is om een algoritme in te willen zetten.  Formuleer duidelijk de probleemdefinitie en probleemafbakening waarvoor het algoritme een oplossing zou moeten vormen. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-01-formuleren-probleemdefinitie/#toelichting","title":"Toelichting","text":"<p>Formuleer de probleemdefinitie en probleemafbakening zo concreet en precies mogelijk. Maak dit waar mogelijk kwantificeerbaar. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-01-formuleren-probleemdefinitie/#risico","title":"Risico","text":"<p>Het algoritme dient niet het onderliggende probleem.  Zonder eenduidigheid over het op te lossen probleem is geen sturing op en verantwoording over het algoritme mogelijk. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-01-formuleren-probleemdefinitie/#bronnen","title":"Bronnen","text":"<ul> <li>Impact Assessment Mensenrechten en Algoritmes, 1.01</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.1</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-01-formuleren-probleemdefinitie/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-02-formuleren-doelstelling/","title":"Beschrijf het doel van het algoritme","text":"<p>pba-02ProbleemanalyseProjectleiderGovernanceTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-02-formuleren-doelstelling/#maatregel","title":"Maatregel","text":"<p>Het doel en de eventuele subdoelen van het algoritme moeten zo specifiek mogelijk zijn geformuleerd, en waar mogelijk gekwantificeerd.  Maak de consequenties van het algoritme specifiek en zorg dat het doel van het algoritme formeel is vastgesteld en vastgelegd. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-02-formuleren-doelstelling/#toelichting","title":"Toelichting","text":"<ul> <li> <p>Het doel van de inzet van een algoritme dient zo concreet en specifiek mogelijk gedefinieerd te worden.  Indien er meerdere doelen zijn, is het belangrijk om een zekere rangorde te maken: wat zijn de belangrijkste doelen? En waarom? Welke doelen zijn subdoelen, waarvoor het minder belangrijk is om deze te realiseren?</p> </li> <li> <p>Indien mogelijk, dienen de doelstellingen gekwantificeerd te worden (SMART). </p> </li> <li> <p>Om te zorgen voor voldoende draagvlak voor de beoogde doelen, is het noodzaak om voldoende belanghebbenden te betrekken.  Hierbij kan het ook helpen om burgers te betrekken bij de totstandkoming van de doelstellingen, bijvoorbeeld door middel van een burgerpanel of het betrekken van belangengroepen. </p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-02-formuleren-doelstelling/#risico","title":"Risico","text":"<p>Het algoritme dient niet het beoogde doel en onderliggend probleem.  Zonder eenduidigheid over het doel is geen sturing op en verantwoording over het algoritme mogelijk.  Er is dan een groter risico op fouten en/of verschillen in interpretatie. </p> <p>Wanneer doelstellingen niet meetbaar zijn gemaakt, is het onmogelijk om achteraf te kwantificeren of de doelstellingen zijn behaald.  Doelstellingen zijn in dat geval moeilijk bespreekbaar.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-02-formuleren-doelstelling/#bronnen","title":"Bronnen","text":"<ul> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 1.01, 1.02</li> <li>Impact Assessment Mensenrechten en Algoritmes, 1.2</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.3</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-02-formuleren-doelstelling/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-03-onderbouwen-gebruik-algoritme/","title":"Beschrijf waarom een algoritme het probleem moet oplossen","text":"<p>pba-03ProbleemanalyseProjectleiderGovernanceMenselijke controle</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-03-onderbouwen-gebruik-algoritme/#maatregel","title":"Maatregel","text":"<p>Bepaal en documenteer waarom het gewenst of nodig is om een algoritme in te zetten om het probleem te kunnen aanpakken. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-03-onderbouwen-gebruik-algoritme/#toelichting","title":"Toelichting","text":"<ul> <li> <p>Bepaal waarom het gewenst of nodig is om een algoritme in te zetten, en of er ook alternatieven zijn om het probleem op te lossen.  Documenteer de onderbouwing waarom een algoritme een betere oplossing zou bieden dan een niet-geautomatiseerd of niet-digitaal proces. </p> </li> <li> <p>Maak een bewuste afweging of een algoritme het juiste middel is om het probleem op doelmatige en doeltreffende wijze op te lossen, en documenteer deze afweging.</p> </li> <li> <p>Beoordeel of de gewenste oplossing is toegestaan op grond van de AI-Verordening. </p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-03-onderbouwen-gebruik-algoritme/#risico","title":"Risico","text":"<p>Het algoritme is niet het juiste middel om het probleem op te lossen. Het risico daarbij bestaat dat het probleem niet wordt opgelost. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-03-onderbouwen-gebruik-algoritme/#bronnen","title":"Bronnen","text":"<ul> <li>Impact Assessment Mensenrechten en Algoritmes, 1.01</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.2</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-03-onderbouwen-gebruik-algoritme/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-04-betrek-belanghebbenden/","title":"Overleg regelmatig met belanghebbenden","text":"<p>pba-04ProbleemanalyseOntwerpImplementatieProjectleiderGovernanceFundamentele rechten</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-04-betrek-belanghebbenden/#maatregel","title":"Maatregel","text":"<p>Breng in kaart welke belanghebbenden er zijn en betrek hen op verschillende momenten in de levenscyclus.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-04-betrek-belanghebbenden/#toelichting","title":"Toelichting","text":"<p>Het betrekken van belanghebbenden is van belang in bijna alle fasen van de levenscyclus. Belanghebbenden zijn onder meer eindgebruikers, mensen en rechtspersonen die door het algoritme geraakt kunnen worden en vertegenwoordigende organisaties.</p> <p>In de fase van de probleemanalyse is het allereerst van belang in kaart te brengen welke stakeholders er zijn. Wie gaan bijvoorbeeld werken met het algoritme (eindgebruikers)? En welke demografie\u00ebn worden geraakt door een algoritme? Bij wie liggen de voordelen en bij wie liggen de nadelen? Ga in gesprek met deze belanghebbenden - al dan niet vertegenwoordigd door belangenorganisaties zoals burgerrechtenorganisaties - over het te ontwerpen algoritme en de context waarin het gebruikt wordt. Zij kunnen waardevolle inzichten en wensen delen, wat kan bijdragen aan een betere werking van het algoritme. </p> <p>Enkele voorbeelden hierbij zijn: - Het betrekken van burgers bij het ontwerpen van een algoritme in de ontwerpfase.  - Het bespreken welke definitie en metriek van fairness past bij de context met de proceseigenaar en een ethicus. - Het betrekken van domeinexperts in de fase van dataverkenning en datapreparatie, om zo in kaart te brengen wat de data features betekenen en waar zij vandaan komen. - Het betrekken van eindgebruikers bij het ontwikkelen en het implementeren van het algoritme. - Het betrekken van belanghebbenden bij het monitoren en evalueren van het algoritme. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-04-betrek-belanghebbenden/#bronnen","title":"Bronnen","text":"<ul> <li>Toetsingskader Algemene Rekenkamer 2.12</li> <li>Ethics Guidelines for Trustworthy AI</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.10 </li> <li>Framework for Meaningful Engagement</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-04-betrek-belanghebbenden/#risico","title":"Risico","text":"<p>Het niet betrekken van belanghebbenden bij de ontwikkeling en het gebruik van algoritmes, kan ertoe leiden dat belangrijke inzichten of perspectieven niet worden verwerkt en het algoritme onjuist gaat functioneren. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-04-betrek-belanghebbenden/#voorbeeld","title":"Voorbeeld","text":"<p>Er zijn veel verschillende methoden om belanghebbenden te betrekken. Zo kan je bijvoorbeeld werken met persona\u2019s of \u2018empathy maps\u2019 maken. Ook kan je focusgroepen houden. Denk dan bijvoorbeeld aan een burgerpanel.</p> <p>Andere methoden zijn: Methodologie van Waag, Civic AI lab, Stakeholder escalation ladder.</p> <p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-05-wettelijke-grondslag/","title":"Beschrijf de wettelijke grondslag voor de inzet van het algoritme","text":"<p>pba-05ProbleemanalyseJuristGovernanceTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-05-wettelijke-grondslag/#maatregel","title":"Maatregel","text":"<p>Beschrijf de wettelijke grondslag voor de inzet van het algoritme en de beoogde besluiten die genomen zullen worden op basis van het algoritme.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-05-wettelijke-grondslag/#toelichting","title":"Toelichting","text":"<ul> <li>Analyseer of er een concrete wettelijke grondslag is die de inzet van het algoritme mogelijk maakt en deze inzet voldoende voorzienbaar maakt. </li> <li>Als de verwachting is dat een algoritme tot gevolg heeft dat wordt ingegrepen in het leven of de vrijheid van mensen, en zeker als de verwachting is dat er grondrechten worden geraakt, moet er een wettelijke grondslag bestaan voor de inzet van het algoritme.</li> <li>Voor het verwerken van persoonsgegevens is een wettelijke grondslag noodzakelijk. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-05-wettelijke-grondslag/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Auditdienst Rijk, SV.7, PRI.6</li> <li>Impact Assessment Mensenrechten en Algoritmes, 1.4</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-05-wettelijke-grondslag/#risico","title":"Risico","text":"<p>Het algoritme en beoogde besluiten voldoen niet aan wet- en regelgeving en intern beleid en kaders.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/1-pba-05-wettelijke-grondslag/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/","title":"Beschrijf de rollen en verantwoordelijkheden voor het ontwikkelen en gebruiken van algoritmes","text":"<p>owp-01OntwerpImplementatieMonitoring en beheerProjectleiderGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/#maatregel","title":"Maatregel","text":"<p>Beschrijf de rollen en verantwoordelijkheden voor het ontwikkelen en gebruiken van algoritmes. De rollen en verantwoordelijkheden worden vastgesteld door de verantwoordelijke(n).</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/#toelichting","title":"Toelichting","text":"<p>Een re\u00ebel risico is dat bepaalde groepen en belanghebbenden over het hoofd worden gezien tijdens het ontwikkelproces van een algoritme. Daarom is het noodzakelijk om al vroeg in kaart te brengen welke groepen allemaal een mening over het beoogde algoritme kunnen hebben.</p> <p>Duidelijkheid en borging van rollen en verantwoordelijkheden zorgen voor een effectief en verantwoord verloop van het proces rondom de ontwikkeling, inkoop en gebruik van een algoritme.  Zeker wanneer ongewenste effecten optreden en maatregelen nodig zijn, is duidelijkheid over rollen, verantwoordelijkheden en bijbehorende besluitvormingsstructuren van belang.</p> <p>Om deze reden kan het handig zijn om een matrix van belanghebbenden op te stellen. Deze matrix kan in verdere fases helpen wanneer belanghebbenden betrokken moeten worden. In deze matrix kunnen de volgende onderdelen staan: </p> <ul> <li>Per belanghebbende een beschrijving van wie deze groep is </li> <li>Mate van invloed van belanghebbende op het algoritme: wie, wanneer in de levenscyclus zorgt voor passende menselijke controle</li> <li>Impact van algoritme op de belanghebbende </li> <li>Risico\u2019s voor belanghebbende (wat zal de belanghebbende merken als het algoritme eventueel niet naar behoren functioneert).  </li> </ul> <p>Een RACI-matrix/VERI-matrix is een passend middel om de verantwoordelijkheden (Responsible/Verantwoordelijk, Accountable/Eindverantwoordelijk, Consulted/Geraadpleegd, Informed/Ge\u00efnfomeerd) te bepalen. Werk specifieke, gevoelige activiteiten nader uit te in concrete taken en verantwoordelijkheden, bijvoorbeeld welke stappen moeten worden gezet om data veilig te leveren ten behoeve van een onderzoek naar onbwuste vooringenomenheid.  </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/#vaststellen-van-rollen-en-verantwoordelijkheden","title":"Vaststellen van rollen en verantwoordelijkheden","text":"<ul> <li>Laat de rollen en verantwoordelijkheden vaststellen door de verantwoordelijke(n). Het doel van vaststelling is dat de verantwoordelijke(n) de verantwoordelijkheid neemt en actief een keuze maakt om het algoritme te (laten) ontwikkelen of gebruiken op de beoogde wijze en met de bijbehorende verantwoordelijkheden. Met het vaststellen worden afspraken geformaliseerd. </li> <li>Vaststelling van de verantwoordelijkheden kan plaatsvinden door beleidsdocumenten, werkinstructies, verwerkersovereenkomst of een PIA/DPIA, mits de verantwoordelijkheden voldoende duidelijk zijn beschreven.</li> <li>Gedurende de levenscyclus kan het voorkomen dat rollen en verantwoordelijkheden opnieuw moet worden beschreven en vastgesteld.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/#verwerking-van-persoonsgegevens","title":"Verwerking van persoonsgegevens","text":"<ul> <li>Bij het verwerken van persoonsgegevens moet worden vastgelegd wie de (gezamelijke) verwerkingsverantwoordelijken zijn en wie de verwerkers. Uit deze vaststelling van de rolverdeling volgen onder de AVG verschillende rechten en plichten.</li> <li>Bij de ontwikkeling en gebruiken van algoritmes is het denkbaar dat de noodzaak voor het verwerken van persoonsgegevens wijzigt en dat meer of andere verwerkingen moeten plaatsvinden. Het is van belang dat wederom wordt beoordeeld wat dit betekent voor de bijbehorende verantwoordelijkheden. Als er sprake is van een wezenlijke wijziging ten opzichte van de al vastgestelde situatie, bijvoorbeeld doordat er meer persoonsgegevens worden verwerkt door een andere partij, dan zal de verwerkingsverantwoordelijke opnieuw tot vaststelling moeten overgaan om de afspraken te formaliseren.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/#voorbeelden","title":"Voorbeelden","text":"<ul> <li>Rapport Kleur Bekennen, Algemene Rekenkamer, p. 114, figuur 5-4</li> <li>De proceseigenaar wordt vaak verantwoordelijk gehouden voor eventuele gevolgen van het gebruik van het algoritme. Deze maatregel zorgt ervoor dat de proceseigenaar niet alle verantwoordelijkheid draagt, omdat dit vaak niet realistisch is. Met deze maatregel kunnen er heldere afspraken over de verschillende verantwoordlijkheden worden gemaakt. Hierdoor wordt het draagvlak groter, zonder ten koste te gaan van de duidelijkheid over rollen en verantwoordelijkheden. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/#risico","title":"Risico","text":"<p>De sturing en verantwoording is ontoereikend of niet geborgd, waardoor er onvoldoende betrokkenheid of capaciteit is van verantwoordelijken. Ook kan er dan onvoldoende deskundigheid in de organisatie zijn, wat de kans vergroot op fouten en ongewenste effecten. Zonder het vaststellen van rollen en verantwoordelijkheden, kan er geen effectieve sturing plaatsvinden op partijen die betrokken zijn bij het ontwikkelen of gebruiken van algoritmes.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/#bronnen","title":"Bronnen","text":"<ul> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 1.06, 3.02</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.9, SV.19, PRI.1</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-02-data-beschikbaarheid/","title":"Voer voorafgaand aan een project een data beschikbaarheid, kwaliteit- en toegankelijkheidsanalayse uit.","text":"<p>owp-11OntwerpProjectleiderBeleid en adviesPublieke inkoopData</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-02-data-beschikbaarheid/#maatregel","title":"Maatregel","text":"<p>Voer voorafgaand aan een project een data beschikbaarheids- en datakwaliteitsanalayse uit.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-02-data-beschikbaarheid/#toelichting","title":"Toelichting","text":"<ul> <li>Het is van belang om voorafgaand aan een project vast te stellen of de data die noodzakelijk is om een algoritme te ontwikkelen of te kunnen gebruiken beschikbaar is, gaat worden en of de data van voldoende kwaliteit is.</li> <li>Er moet worden onderzocht of en hoe data vanuit de eigen organisatie, die van een eventuele externe aanbieder of elders beschikbaar kan worden gesteld, kan worden opgeslagen en of goedkeuring kan worden gegeven voor het verwerken van de data.</li> <li>De infrastructuur van de eigen organisatie en/of die van een eventuele externe aanbieder moet van voldoende niveau zijn om de beoogde verwerkingen uit te kunnen voeren.</li> <li>Een dergelijke analyse levert inzichten op welke problemen er eventueel op dit vlak kunnen ontstaan en geeft input voor de verdere ontwikkeling of (in geval van inkoop) de behoeftestelling.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-02-data-beschikbaarheid/#bronnen","title":"Bronnen","text":"<p>Towards a Systematic Understanding on the Challenges of Procuring Artificial Intelligence in the Public Sector</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-02-data-beschikbaarheid/#risico","title":"Risico","text":"<p>Het zou kunnen voorkomen dat de data niet beschikbaar is en ook niet gaat worden. Dit betekent dat een algoritme ook niet goed gemaakt of gebruikt kan worden. Ook is het belangrijk om te checken of de data beschikbaar blijft als dat nodig is voor het functioneren van het algoritme (bijv. voor het bijleren). Ook bestaat er een risico dat als de data van onvoldoende kwaliteit is, het algoritme niet goed gaat werken. Wanneer niet vooraf bepaald is of de data beschikbaar is en van voldoende kwaliteit kan het gebeuren dat er wel een algoritme gemaakt wordt door een derde partij, maar deze vervolgens niet gebruikt kan worden binnen de organisatie. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-03-doel-verwerken-persoonsgegevens/","title":"Beschrijf voor welk doel het algoritme persoonsgegevens gebruikt en waarom dit mag","text":"<p>owp-03OntwerpDataverkenning en datapreparatieOntwikkelenVerificatie en validatieImplementatieProjectleiderJuristPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-03-doel-verwerken-persoonsgegevens/#maatregel","title":"Maatregel","text":"<p>Het doel voor het verwerken van persoonsgegevens met een algoritme is welbepaald en omschreven.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-03-doel-verwerken-persoonsgegevens/#toelichting","title":"Toelichting","text":"<p>Persoonsgegevens mogen alleen worden verwerkt voor een \u2018welbepaald, uitdrukkelijk omschreven en gerechtvaardigd\u2019 doel. De wettelijke grondslag voor de verwerking van de persoonsgegevens moet zijn beschreven.</p> <p>De verwerking van persoonsgevens voor het ontwikkelen en gebruiken van een algoritme moet verenigbaar met het oorspronkelijke verwerkingsdoel (doelbinding). Eventuele verdere (subsidiaire) verwerkingen, zoals het verwerken van persoonsgegevens voor een onderzoek naar onbewuste vooringenomenheid, moeten uitdrukkelijk worden omschreven.</p> <p>Stel een overzicht op waarin is beschreven welke persoonsgegevens mogen worden verwerkt. Bij de persoonsgegevens is aangegeven om wat voor categorie persoonsgegevens het gaat. Per kenmerk is toegelicht waarom deze noodzakelijk is om te verwerken voor het ontwikkelen en gebruiken van het algoritme. Het principe van dataminimalisatie is toegepast, wat betekent dat een keuze is gemaakt of een persoonsgegevens al dan niet strikt noodzakelijk is om het doel te bereiken of dat verwerking ervan achterwege kan blijven.</p> <p>Voor het beschermen van deze persoonsgegevens wordt per kenmerk aangegeven op welke manier deze kan worden beschermd. Denk hierbij aan het anonimiseren, pseudonomiseren, aggregeren van de persoonsgegevens. </p> <p>Gebruik een DPIA om bovenstaande zaken te beschrijven.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-03-doel-verwerken-persoonsgegevens/#risico","title":"Risico","text":"<p>Als het doel voor het verwerken van persoonsgegevens onvoldoende is omschreven en onderbouwd, ontstaat het risico dat onrechtmatig persoonsgegevens worden verwerken en een inbreuk wordt gemaakt op privacyrechten van betrokkenen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-03-doel-verwerken-persoonsgegevens/#bronnen","title":"Bronnen","text":"<ul> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 3.01, 3.05</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, PRI.4 </li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, PRI.7 </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-03-doel-verwerken-persoonsgegevens/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-04-gebruikte-techniek/","title":"Beschrijf welke techniek gebruikt wordt voor de beoogde toepassing","text":"<p>owp-04OntwerpOntwikkelaarTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-04-gebruikte-techniek/#maatregel","title":"Maatregel","text":"<p>Beschrijf welke techniek gebruikt wordt voor de beoogde toepassing. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-04-gebruikte-techniek/#toelichting","title":"Toelichting","text":"<ul> <li>Beschrijf wat voor soort algoritme er gebruikt gaat worden voor de beoogde toepassing. </li> <li> <p>Bepaal of je gebruik wilt maken van een:</p> <ul> <li>zelflerend algoritme</li> <li>niet-zelflerend algoritme zoals een algoritme gebaseerd op rekenregels</li> </ul> </li> <li> <p>Beschrijf vervolgens ook:</p> <ul> <li>waarom er voor dit type algoritme wordt gekozen</li> <li>wat de alternatieven zijn en waarom die minder passend zijn?</li> <li>waarom dit algoritme het meest geschikt is om het beoogde doel van het algoritme te bereiken. </li> </ul> </li> <li> <p>De precieze details kunnen in dit stadium van de levenscyclus waarschijnlijk nog niet ingevuld worden. Maak een goede eerste inschatting van de gebruikte techniek. Eventueel kan je er ook voor kiezen om verschillende technieken verder te onderzoeken. Dat betekent dat er meerdere algoritmes ontwikkeld worden (op basis van verschillende technieken), en je later een definitieve keuze maakt. </p> </li> <li> <p>Het is belangrijk om uiteindelijk een passend uitlegbaar algoritme te selecteren voor de context waarin het wordt toegepast. Daarin moet de afweging gemaakt worden of de technische uitlegbaarheid voldoende is in de context die de inzet van het algoritme vereist. Hierbij kan ook de conclusie worden getrokken dat een simpeler, inzichtelijker algoritme de voorkeur krijgt. </p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-04-gebruikte-techniek/#voorbeeld","title":"Voorbeeld","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-04-gebruikte-techniek/#risico","title":"Risico","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-04-gebruikte-techniek/#bronnen","title":"Bronnen","text":"<p>Impact Assessment Mensenrechten en Algoritmes, 2A.1, 2B.1</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-05-soort-algoritme/","title":"Bepaal het soort algoritme en de risicogroep en vereisten die hierbij horen","text":"<p>owp-05OntwerpOntwikkelenProjectleiderBeleid en adviesPublieke inkoopGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-05-soort-algoritme/#maatregel","title":"Maatregel","text":"<p>Stel vast om wat voor type algoritme het gaat en wat de bijbehorende risicoclassificatie is om te bepalen welke vereisten hierop van toepassing zijn.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-05-soort-algoritme/#toelichting","title":"Toelichting","text":"<p>Het verschilt per type algoritme welke vereisten hierop van toepassing is en waar een aanbieder of gebruiksverantwoordelijke aan moet voldoen.  Dit is mede afhankelijk van de bijbehorende risicoclassificatie.  Hiervoor kan in de nabije toekomst de 'beslisboom' in het Algoritmekader voor worden gebruikt'.  Deze stap is van groot belang, omdat dit ook bepalend is welke contractuele verplichtingen moeten worden gecre\u00eberd tussen opdrachtgever en opdrachtnemer/aanbieder. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-05-soort-algoritme/#bronnen","title":"Bronnen","text":"<p>Algoritmekader</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-05-soort-algoritme/#voorbeeld","title":"Voorbeeld","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/","title":"Inventariseer welke grondrechten het algoritme kan schenden en maak een belangenafweging","text":"<p>owp-06ProbleemanalyseOntwerpVerificatie en validatieMonitoring en beheerProjectleiderBeleid en adviesFundamentele rechten</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/#maatregel","title":"Maatregel","text":"<p>Identificeer welke grondrechten geraakt worden door het in te zetten algoritme en maak een afweging of dit aanvaardbaar is</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/#toelichting","title":"Toelichting","text":"<p>Een algoritme kan invloed hebben op grondrechten. Op een aantal grondrechten kan een algoritme sneller invloed hebben, zoals recht op persoonsgegevensbescherming, recht op behoorlijk bestuur en recht op gelijke behandeling. Deze veelvoorkomende grondrechten krijgen op andere plekken in het Algoritmekader specifieke aandacht.  Er zijn echter ook grondrechten die bij minder algoritmen relevant zijn, maar desalniettemin in die gevallen zeer invloedrijk kunnen zijn.  Het is van belang uiteindelijk een totale afweging te maken van alle grondrechten die (mogelijk) geraakt worden ten opzichte van de voordelen van het in te zetten algoritme.  Een voorbeeld van een grondrecht dat minder snel geraakt wordt is bijvoorbeeld een algoritme om hate speech te kunnen detecteren. Zo'n algoritme zal van invloed kunnen zijn op de vrijheid van meningsuiting en het recht op informatie.</p> <p>Doorloop in lijn met Deel 4 van het Impact Assessment Mensenrechten en Algoritmes de volgende stappen:</p> <ol> <li>Breng in kaart welke grondrechten geraakt kunnen worden door de inzet van het algoritme. Hiervoor kan bijlage 1 uit het Impact Assessment Mensenrechten en Algoritmes gebruikt worden.</li> <li>Als dat het geval is, is het allereerst van belang om te controleren of hiervoor specifieke wetgeving is waar de inzet van het algoritme aan moet voldoen.</li> <li>Bepaal hoe zwaar de geindentificeerde grondrechten worden geraakt door het beoogde algoritme.</li> <li>Bepaal hoe doeltreffend/effectief het algoritme in de praktijk is.</li> <li>Bepaal of de inzet van het algoritme noodzakelijk is om het beoogde doel te bereiken. Zijn er alternatieven? Of zijn er mitigerende maatregelen die genomen kunnen worden waardoor grondrechten niet of minder worden geraakt en eventuele nadelige gevolgen verzacht kunnen worden?</li> <li>Gegeven alle voorgaande stappen, bepaal of de inzet van het algoritme en proportioneel is om het beoogde doel te bereiken. Wegen de voordelen op tegen de nadelen?</li> </ol> <p>Het is van belang voldoende belanghebbenden te betrekken bij het doorlopen van deze stappen om te zorgen dat alle eventueel nadelige aspecten van het in te zetten algoritme worden meegenomen.  Documenteer de doorlopen stappen en leg de keuzes en afwegingen goed vast. </p> <p>Opmerking</p> <p>Zoals vermeld in de vereiste voor beoordeling van gevolgen voor grondrechten uit de AI-verordening moeten sommige hoog-risico AI-systemen een beoordeling doen van de gevolgen voor grondrechten. Het is nog niet bekend welke vorm dit precies moet hebben.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/#bronnen","title":"Bronnen","text":"<ul> <li>Impact Assessment Mensenrechten en Algoritmes, deel 4</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.4</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/#risico","title":"Risico","text":"<p>Het risico is dat er grondrechten, anders dan die expliciet beschermd zijn in andere maatregelen en vereisten, aangetast worden.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/#voorbeeld","title":"Voorbeeld","text":"<p>Hoofdstuk 4 van het Impact Assesment Mensenrechten en Algoritmen (IAMA) richt zich specifiek op de grondrechten. In bijlage 1 is tevens een overzicht te vinden van mogelijk relevante grondrechten.</p> <p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-07-kwetsbare-groepen/","title":"Maak een lijst van de meest kwetsbare groepen en bescherm hen extra","text":"<p>owp-07OntwerpBeleid en adviesFundamentele rechten</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-07-kwetsbare-groepen/#maatregel","title":"Maatregel","text":"<p>Bepaal wat de impact van het in te zetten algoritme is voor betrokkenen (personen of groepen). Bepaal vervolgens of er groepen zijn waarbij de impact van het algoritme dermate groot kan zijn, dat het wenselijk is om deze groepen extra bescherming te bieden.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-07-kwetsbare-groepen/#toelichting","title":"Toelichting","text":"<ul> <li>Verschillende groepen kunnen op een andere manier geraakt worden door het inzetten van een algoritme. Dit is afhankelijk van de context waarin het algoritme wordt ingezet, en dient daardoor bij iedere toepassing opnieuw bekeken te worden. </li> <li>Bedenk wat er met de uitkomsten van het algoritme gedaan wordt, en wat de consequenties daarvan zijn voor burgers. Hierbij kan gedacht worden aan de volgende aspecten:<ul> <li>Worden bepaalde groepen sneller gemonitord?</li> <li>Wat als het model het fout heeft? </li> <li>Wordt het systeem gebruikt om informatie te verkrijgen, om besluiten voor te bereiden of om zelfstandige besluiten te nemen en welke gevolgen heeft dat voor de mate waarin het algoritme bepalend zal zijn in de praktijk? </li> <li>Worden de gegevens veilig en vertrouwelijk behandeld; welke gevolgen zou een datalek hebben voor groepen of categorie\u00ebn personen?</li> <li>Worden data gedeeld met andere partijen en wat is het gevaar dat die misbruik maken van de data met negatieve gevolgen voor groepen of categorie\u00ebn personen?</li> </ul> </li> <li>Houd hierbij ook rekening met de impact van het in te zetten algoritme op de samenleving (vanuit sociaal, democratisch en milieu/ecologisch perspectief).</li> <li>Om de impact op groepen te bepalen, kan het handig zijn een mensenrechtentoets zoals het Impact Assessment Mensenrechten en Algoritmes toe te passen. </li> <li>Bepaal of er maatregelen genomen kunnen worden om de ge\u00efdentificeerde groepen extra bescherming te bieden. Hierbij kan men denken aan de volgende aspecten: Kan de (extra) administratieve druk voor bepaalde groepen worden weggenomen? Worden resultaten van het algoritme naast de resultaten van een expert gelegd? Is het wenselijk om een proces in te richten waarbij zowel algoritme als een expert een uitkomst geven? Kunnen we de betreffende groep extra hulp aanbieden? Is het wenselijk bij negatieve uitkomsten een vier-ogen-principe toe te passen? </li> <li>De impact van het algoritme op de groepen die ge\u00efdentificeerd worden in deze stap, kunnen mogelijk onderzocht worden in een biasanalyse. Daarbij kan geidentificeerd worden of bepaalde groepen oververtegenwoordigd of ondervertegenwoordigd zijn in selecties, of dat het algoritme andere of meer fouten maakt voor bepaalde groepen. </li> <li>Merk op dat het onmogelijk is om de risico's voor alle specifieke groepen af te vangen. Hierbij kan het helpen om te focussen op de meest kwetsbare groepen. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-07-kwetsbare-groepen/#risico","title":"Risico","text":"<p>De impact van het algoritme op de besluitvorming en op personen, doelgroepen en/of de samenleving is niet inzichtelijk, waardoor onvoldoende maatregelen zijn getroffen om ongewenste effecten (zoals bias en discriminatie) te voorkomen. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-07-kwetsbare-groepen/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.4, DM.16</li> <li>Kamerstukken II 2023/24, 31066-1374</li> <li>Impact Assessment Mensenrechten en Algoritmes, 4.1</li> <li>Handreiking non-discriminatie by design, 1.7 en 1.8 en 1.15</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-07-kwetsbare-groepen/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-08-archiveren-documenten/","title":"Bepaal welke documenten voor hoe lang gearchiveerd moeten worden","text":"<p>owp-08OntwerpOntwikkelenOntwikkelaarProjectleiderJuristTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-08-archiveren-documenten/#maatregel","title":"Maatregel","text":"<p>Stel vast welke documenten, (samengesteld geheel van) data/informatie van/in het algoritme gelden als \"archiefbescheiden\" in de zin van artikel 1 c Archiefwet en documenteer daarvan een overzicht, bij voorkeur vastgesteld door een daartoe bevoegde. Bepaal de bijbehorende bewaartermijnen vast voor de archiefbescheiden.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-08-archiveren-documenten/#toelichting","title":"Toelichting","text":"<ul> <li>Bij archiefbescheiden kan worden gedacht aan de broncode, trainings- en testdata, (technische) documentatie en de output. </li> <li>Deze archiefbescheiden moeten voor een bepaalde tijd worden bewaard (de bewaartermijn).</li> <li>Overleg hierover met de verantwoordelijke binnen de organisatie voor het toepassen van de Archiefwet.</li> <li>Het is mogelijk dat de selectielijsten nog niet duiden welke informatie of data, specifiek bij de toepassing van algoritmen, moet worden toegepast en hier dus ook nog geen termijnen bij zijn gekoppeld. </li> <li>Stel vast of beperkingen aan openbaarheid van de archiefbescheiden moeten worden gesteld. Er zijn gevallen waarbij het openbaren van archiefbescheiden is uitgesloten. Stem in het begin van het proces (pro-actief) met de opdrachtgever af wat de wenselijkheid is t.a.v. transparantie/openheid (uitgangspunt zou 'open, tenzij' moeten zijn).</li> <li>Stel vast hoe de archiefbescheiden op een duurzame wijze toegankelijk kunnen worden gemaakt. Het moet mogelijk zijn dat de archiefbescheiden daadwerkelijk overhandigd kunnen worden aan betrokken partijen. Denk hierbij aan burgers, onderneming, toezichthouder of rechters. Duurzaam betekent hier met behoud van functie en kwaliteit voor langere tijd. Onderzoek welke voorziening hiervoor beschikbaar is binnen de organisatie.</li> </ul> <p>Tip</p> <p>Formeer hierbij een multi-discipinaire groep (bestaande uit bijvoorbeeld een inkoper, ontwikkelaar, data scientist, proceseigenaar en archiefdeskundige) om deze maatregel toe te passen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-08-archiveren-documenten/#bronnen","title":"Bronnen","text":"<ul> <li>Rekenen en rekenschap. Essay over Algoritmes en de Archiefwet</li> <li>Toetsingskader Algemene Rekenkamer 4.06 </li> <li>Onderzoekskader Auditdienst Rijk, DM.13 </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-08-archiveren-documenten/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-model-verwerkersovereenkomst-onderdeel-aanbesteding/","title":"Een model-verwerkersovereenkomst is onderdeel van de aanbesteding als persoonsgegevens worden verwerkt","text":"<p>owp-09OntwerpMonitoring en beheerProjectleiderBeleid en adviesPublieke inkoopPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-model-verwerkersovereenkomst-onderdeel-aanbesteding/#maatregel","title":"Maatregel","text":"<p>Inventariseer of er mogelijk sprake is van een algoritme dat een hoog risico kan inhouden voor de rechten en vrijheden van natuurlijke personen of impactvol kan zijn voor hen en maak in voorkomend geval in de model-verwerkersovereenkomst een uitdrukkelijke verwijzing naar een concreet DPIA-document (met datum/kenmerk) of (indien op dat moment nog in bezit of bekend bij de steller) een expliciet invulveld voor het duiden van de betreffende DPIA, zodat die wordt genoemd ter completeren van de verwerkersovereenkomst vooraf het overeenkomen/ondertekenen van die verwerkersovereenkomst.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-model-verwerkersovereenkomst-onderdeel-aanbesteding/#toelichting","title":"Toelichting","text":"<p>Een model-verwerkersoverenkomst is veelal een verplicht onderdeel bij het publiek inkopen van software waarbij persoonsgegevens worden verwerkt en bij de totstandkoming van de overeenkomst.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-model-verwerkersovereenkomst-onderdeel-aanbesteding/#bronnen","title":"Bronnen","text":"<p>Algoritmekader</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-model-verwerkersovereenkomst-onderdeel-aanbesteding/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-multidisciplinair-inkoopteam/","title":"Stel een multidisciplinair team samen bij het ontwikkelen of inkopen van algoritmes.","text":"<p>owp-09OntwerpProjectleiderBeleid en adviesPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-multidisciplinair-inkoopteam/#maatregel","title":"Maatregel","text":"<p>Stel een multidisciplinair team samen bij het ontwikkelen of inkopen van algoritmes.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-multidisciplinair-inkoopteam/#toelichting","title":"Toelichting","text":"<ul> <li>Bij een project gericht op het ontwikkelen of inkopen van algoritmes is het belangrijk dat betrokkenen al in een vroeg stadium samenwerken. Dit betekent dat zowel een interne opdrachtgever als het ontwikkelingsteam of de afdeling inkoop tijdig worden aangehaakt om te zorgen voor een goed afgestemd proces.</li> <li>Wanneer het gaat om het ontwikkelen of inkopen van algoritmes, is een multidisciplinair team wenselijk. Zo'n team brengt relevante kennis en ervaring samen om de behoeften en specificaties helder te krijgen. Afhankelijk van de aard en complexiteit van het algoritme kunnen de rollen binnen dit team vari\u00ebren.</li> <li>Naast een interne opdrachtgever, materiedeskundige en gebruiker kun je voor het ontwikkelen van algoritmes denken aan een data-engineer, data scientist, IT-architect, ethicus, data- en privacy-officer. Bij een overheidsopdracht gericht op de inkoop van een algiritme, horen daar nog een (aanbestedings)jurist en inkoper bij. Afhankelijk van de complexiteit van de oplossing zijn meer of minder disciplines en dus te beleggen verantwoordelijkheden binnen het team wenselijk.</li> <li>Een multidisciplinair team kan ondersteunen bij het formuleren van de probleemstelling of formuleren van de doelstellingen van een project, verkennen van de mogelijke oplossingsrichtingen en het vertalen van de gewenste oplossingsrichting naar de concrete behoefte.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-multidisciplinair-inkoopteam/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-multidisciplinair-inkoopteam/#risico","title":"Risico","text":"<p>Zonder een multidisciplinair team is het waarschijnlijk dat belangrijke aspecten voor een verantwoorde inzet van algoritmes niet worden geadresseerd en ongewenste algoritmes worden ontwikkeld of ingekocht.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-multidisciplinair-inkoopteam/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/","title":"Maak een Project Startarchitectuur (PSA) voor de ontwikkeling of inkoop van algoritmes","text":"<p>owp-10OntwerpOntwikkelenVerificatie en validatieImplementatieProjectleiderBeleid en adviesTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/#maatregel","title":"Maatregel","text":"<p>Voer een Project Startarchitectuur (PSA) uit als algoritmes worden ontwikkeld of ingekocht.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/#toelichting","title":"Toelichting","text":"<ul> <li>Een Project Startarchitectuur (PSA) is een hulpmiddel dat bij een project wordt ingezet om veranderingen van A naar Beter te faciliteren.</li> <li>De PSA richt zich daarbij op de kaders die op een project van toepassing zijn en wat de oplossing bijdraagt aan het realiseren van de gewenste, toekomstige architectuur, wat de implicaties zullen zijn voor bestaande voorzieningen en waar het project zal afwijken van bestaande beelden.</li> <li>Met de PSA wordt een concreet en doelgericht ICT-architectuurkader opgesteld, waarbinnen het project moet worden uitgevoerd. </li> <li>De PSA maakt concreet wat architectuur voor een project betekent.</li> <li>Door een PSA uit te voeren ontstaan inzichten hoe het betreffende algoritme zo optimaal mogelijk onderdeel kan worden gemaakt van het bestaande applicatielandschap, waarmee bijvoorbeeld kan worden voorkomen dat het algoritme of AI-systeem na verloop van tijd geen input meer kan ontvangen door onverwachte wijzigingen in systemen.</li> <li>Onderwerpen als privacy, informatiebeheer en beheer worden hierin ook globaal meegenomen. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/#risico","title":"Risico","text":"<p>Het algoritme kan niet of na verloop van tijd niet meer functioneren, doordat onverwachte of ongewenst wijzigingen in het applicatielandschap plaatsvinden. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/#bronnen","title":"Bronnen","text":"<ul> <li>Project Startarchitectuur,NORA</li> <li>PSA Format</li> <li>PSA Handleiding</li> <li>Algoritmekader</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/#voorbeeld","title":"Voorbeeld","text":"<ul> <li>Gemeente Amsterdam - Onderzoekswaardigheid Algoritme \u2018Slimme check\u2019 (Een tool die de medewerkers helpt om te bepalen of een aanvraag levensonderhoud onderzoekswaardig is, niet meer in gebruik!): Start Architectuurnotitie van dit project</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/","title":"Koop duurzaam algoritmes in","text":"<p>owp-11OntwerpProjectleiderBeleid en adviesPublieke inkoopDuurzaamheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/#maatregel","title":"Maatregel","text":"<p>Kies softwareoplossingen van aanbieders die duurzaamheid bevorderen, en stel heldere eisen aan energieverbruik, hernieuwbare energiebronnen en transparantie over de milieuprestaties van software.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/#toelichting","title":"Toelichting","text":"<p>Door software duurzaam in te kopen, kun je als organisatie al vroeg in het ontwikkelproces bijdragen aan de verduurzaming van je algoritmes. Kies daarom softwareoplossingen van aanbieders die maatschappelijk verantwoord ondernemen (MVI) en energie-effici\u00ebntie vooropstellen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/#duurzaamheidscriteria-en-selectie-van-aanbieders","title":"Duurzaamheidscriteria en selectie van aanbieders","text":"<p>Om software duurzaam in te kopen, kun je aanbieders beoordelen op specifieke duurzaamheidscriteria. Enkele belangrijke criteria zijn:</p> <ul> <li>het energieverbruik van de software</li> <li>het gebruik van hernieuwbare energiebronnen in de benodigde datacenters</li> <li>het beperken van CO\u2082-uitstoot tijdens de levenscyclus van de software</li> </ul> <p>Vraag om inzicht in milieuprestaties en certificeringen, zoals ISO-14001, om de toewijding van aanbieders aan duurzaamheid te toetsen. De ISO-14001 is een internationaal geaccepteerde standaard met eisen voor een milieumanagementsysteem.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/#inkoopvoorwaarden-en-contractuele-eisen","title":"Inkoopvoorwaarden en contractuele eisen","text":"<p>Stel bij het inkopen duidelijke eisen aan duurzaamheidscriteria, zoals het gebruik van \"groene technologie\u00ebn\", het aanbieden van Software-as-a-Service (SaaS) en open standaarden. Zo maak je duurzame keuzes die bijdragen aan een langere levensduur en energie-effici\u00ebntie van je algoritmes. Door KPI\u2019s op te nemen voor energie-effici\u00ebntie en CO\u2082-reductiedoelen kun je de voortgang van deze doelen concreet monitoren. Je kunt deze voorwaarden opnemen als standaard inkoopvoorwaarden.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/#bonus-malusregeling-en-monitoring","title":"Bonus-malusregeling en monitoring","text":"<p>Om naleving van duurzame doelstellingen te stimuleren, kun je een bonus-malusregeling inzetten. Aanbieders ontvangen een bonus wanneer zij duurzame doelstellingen halen, en kunnen worden aangesproken als beloofde duurzaamheidsnormen niet worden behaald. Monitoring via jaarlijkse rapportages helpt om de voortgang van de duurzaamheidsdoelen te evalueren en, indien nodig, bij te sturen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/#extra-overwegingen","title":"Extra overwegingen","text":"<p>Extra overwegingen die je kunt maken bij het aankopen van algoritmes, zoals genoemd in de handreiking 'Hoe maak ik mijn inkoop van software duurzamer?' van PIANOo:</p> <ul> <li>Ga na of je de software wel echt moet inkopen.</li> <li>Probeer zoveel mogelijk uit te vragen in een SaaS-oplossing.</li> <li>Vraag een oplossing in een Cloud-omgeving.</li> <li>Ga na of \u2018serverless\u2019 ook een oplossing is.</li> <li>Vraag om de broncode van de software.</li> <li>Denk goed na over de technische levensduur van verschillende componenten.</li> <li>Open standaarden zijn een vorm van duurzaamheid.</li> <li>Pas containerisatie en virtualisatie toe.</li> <li>Neem eisen op over opschalingsmogelijkheden.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/#risico","title":"Risico","text":"<p>Zonder duurzaamheidscriteria bij het inkopen van software loop je het risico op hogere energie- en kostenlasten, en beperk je de mogelijkheden om duurzaamheidsdoelstellingen te halen bij je algoritmes.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/#bronnen","title":"Bronnen","text":"<ul> <li>Handreiking: Hoe maak ik mijn inkoop van software duurzamer? (PIANOo)</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/#voorbeeld","title":"Voorbeeld","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-gebruikte-data/","title":"Beschrijf welke data gebruikt wordt voor de beoogde toepassing","text":"<p>owp-02OntwerpDataverkenning en datapreparatieOntwikkelaarBeleid en adviesData</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-gebruikte-data/#maatregel","title":"Maatregel","text":"<p>Beschrijf welke data gebruikt wordt voor de beoogde toepassing. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-gebruikte-data/#toelichting","title":"Toelichting","text":"<ul> <li>Maak in een vroege fase van de ontwikkeling een inschatting van welke data er gebruikt gaat worden voor het algoritme.</li> <li>Leg na het uitvoeren van een beschikbaarheids-, kwaliteit en toegankelijkheidsanalyse vast, welke data wordt verwerkt voor het ontwikkelen en gebruiken van het algoritme</li> <li>Beschrijf daarbij om wat voor gegevens het gaat en uit welke bron deze komen.</li> <li>Bepaal of het is toegestaan om deze data te verwerken.</li> <li>Het is denkbaar dat het onderzoek van de kwaliteit van de data in een latere fase in de levenscyclus pas grondig kan worden uitgevoerd. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-gebruikte-data/#voorbeeld","title":"Voorbeeld","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-gebruikte-data/#risico","title":"Risico","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-gebruikte-data/#bronnen","title":"Bronnen","text":"<ul> <li>Impact Assessment Mensenrechten en Algoritmes, 2A.2.1</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/","title":"Bespreek de vereisten die gelden voor een verantwoorde inzet van algoritmes met aanbieders.","text":"<p>owp-12OntwerpOntwikkelenProjectleiderPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/#maatregel","title":"Maatregel","text":"<p>Bespreek de vereiste die gelden voor een verantwoorde inzet van algoritmes met een aanbieder.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/#toelichting","title":"Toelichting","text":"<p>Ga met een aanbieder in gesprek over in hoeverre zij invulling kunnen geven aan de vereisten die gelden voor een verantwoorde inzet van algoritmes. Dit kan worden gedaan bijvoorbeeld bij een informatiesessie met aanbieders voorafgaand aan een aanbesteding. </p> <p>Op basis van nieuwe of gewijzigde wet- en regelgeving of de totstandkoming van nieuwe standaard, is het denkbaar dat aanbieders van algoritmes nog niet of niet meer voldoet aan deze vereisten. Het is van belang om deze inzichten bijvoorbeeld tijdens een aanbesteding worden verkregen. Indien van toepassing, laat de aanbieder inzichtelijk maken welke stappen deze gaat zetten om hieraan te gaan voldoen. Dit is ook relevant bij reeds afgesloten contracten.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/#risico","title":"Risico","text":"<p>Door de vereisten voor een verantwoorde inzet van algoritmes niet te bespreken met aanbieders, is het voor hen (deels) onduidelijk aan welke vereisten diens algoritmes moet voldoen om te kunnen contractueren met overheidsorganisaties.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/","title":"Ontwerp algoritmes zo eenvoudig mogelijk","text":"<p>owp-12OntwerpOntwikkelenOntwikkelaarDuurzaamheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/#maatregel","title":"Maatregel","text":"<p>Ontwerp algoritmes gericht op eenvoud en effici\u00ebntie, zodat het energieverbruik en de benodigde rekenkracht tijdens gebruik minimaal blijven.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/#toelichting","title":"Toelichting","text":"<p>Complexe algoritmes vereisen vaak aanzienlijke rekenkracht, wat energie-intensief kan zijn. Door algoritmes minder complex en rekenintensief te ontwerpen, verlaag je de benodigde middelen en energie bij het trainen en uiteindelijk toepassen van deze algoritmes. Een effici\u00ebnter ontwerp maakt de algoritmes energiezuiniger in de trainings- en gebruiksfase en draagt zo bij aan duurzaamheid in de gehele levenscyclus.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/#modellen-vereenvoudigen-en-focussen-op-kernfunctionaliteit","title":"Modellen vereenvoudigen en focussen op kernfunctionaliteit","text":"<p>Wanneer je een nieuw algoritme ontwikkelt, kun je de omvang en rekenbelasting beperken door alleen noodzakelijke functionaliteit op te nemen. Focus op de kernfunctionaliteit, zodat je gebruik maakt van een kleiner model dat beter te begrijpen en gemakkelijker te beheren is. Het vermijden van overbodige functionaliteiten maakt het algoritme minder zwaar en verlaagt de milieu-impact aanzienlijk.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/#minder-complexiteit-door-divide-and-conquer-en-dynamisch-programmeren","title":"Minder complexiteit door divide-and-conquer en dynamisch programmeren","text":"<p>Een populaire methode om complexiteit te verlagen is het divide-and-conquer principe, waarbij je een grote algoritmische berekening opsplitst in kleinere, overzichtelijke deelberekeningen en deze vervolgens oplost (je splitst hierbij het technische probleem in meerdere kleinere problemen). Dit vermindert de rekenlast aanzienlijk en verhoogt de effici\u00ebntie. Ook kun je met dynamisch programmeren optimalisaties toevoegen door eerder berekende resultaten op te slaan en te hergebruiken, wat herhaling van berekeningen voorkomt en de rekenkracht vermindert.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/#minder-complexiteit-door-modeloptimalisatie","title":"Minder complexiteit door modeloptimalisatie","text":"<ul> <li>Door gebruik te maken van pruning kunnen minder relevante verbindingen en nodes in een neuraal netwerk worden verwijderd, waardoor de rekenbelasting vermindert.</li> <li>Quantization verlaagt de precisie van numerieke waarden in een model, wat opslag en rekenkracht verlaagt zonder de prestaties significant te be\u00efnvloeden.</li> <li>Knowledge distillation kan verder helpen door de kennis van een groot model over te dragen naar een kleiner, minder complex model, dat vervolgens effici\u00ebnter werkt.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/#risico","title":"Risico","text":"<p>Ontwerpen zonder oog voor effici\u00ebntie kan leiden tot energie-intensieve algoritmes die hoge kosten en milieubelasting met zich meebrengen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/#-what-is-knowledge-distillation-ibm","title":"- What is knowledge distillation? (IBM)","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/#voorbeeld","title":"Voorbeeld","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/","title":"Maak vereisten voor algoritmes onderdeel van algemene inkoopvoorwaarden en de contractovereenkomst.","text":"<p>owp-13OntwerpProjectleiderBeleid en adviesPublieke inkoopTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/#maatregel","title":"Maatregel","text":"<p>Maak vereisten voor algoritmes onderdeel van contractvoorwaarden en de contractovereeenkomst.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/#toelichting","title":"Toelichting","text":"<ul> <li>Door vereisten die gelden voor algoritmes onderdeel te maken van contractvoorwaarden, is voor een aanbieder vooraf duidelijk aan welke voorwaarden zij moeten voldoen als zijn algoritmes willen aanbieden aan overheidsorganisaties.</li> <li>Het is van belang om een afweging te maken welke vereisten voor algoritmes als 'algemene contractvoorwaarden' kunnen gelden en welke aanvullend in een contractovereenkomst moeten worden opgenomen.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.11</li> <li>Specificeren algemene inkoopvoorwaarden</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/#risico","title":"Risico","text":"<p>Door de vereisten voor een verantwoorde inzet van algoritmes niet te communiceren met aanbieders, is het voor hen (deels) onduidelijk aan welke vereisten diens algoritmes moet voldoen om te kunnen contractueren met overheidsorganisaties.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/#voorbeeld","title":"Voorbeeld","text":"<ul> <li>Contractvoorwaarden gemeente Amsterdam</li> <li>Europese Inkoopvoorwaarden Hoog Risico </li> <li>Europese Inkoopvoorwaarden Laag Risico</li> </ul> <p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-14-verwerkersovereenkomst-onderdeel-aanbesteding/","title":"Maak het opstellen van een verwerkersovereenkomst onderdeel van de aanbesteding als persoonsgegevens worden verwerkt.","text":"<p>owp-14OntwerpMonitoring en beheerProjectleiderBeleid en adviesPublieke inkoopPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-14-verwerkersovereenkomst-onderdeel-aanbesteding/#maatregel","title":"Maatregel","text":"<p>Het opstellen van een verwerkersovereenkomst met aanbieder is onderdeel van de aanbesteding als persoonsgegevens worden verwerkt of noodzakelijk zijn voor het trainen of genereren van output door algoritmes van aanbieder.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-14-verwerkersovereenkomst-onderdeel-aanbesteding/#toelichting","title":"Toelichting","text":"<p>Een verwerkersovereenkomst moet worden opgesteld als persoonsgegevens worden verwerkt voor het trainen of het genereren van output door algoritmes van aanbieder. Met een verwerkersovereenkomst worden een aantal afspraken schriftelijk vastgelegd het bij de verwerking van persoonsgegevens. Het gaat om de volgende zaken:</p> <ul> <li> <p>Algemene beschrijving. Een omschrijving van het onderwerp, de duur, de aard en het doel van de verwerking, het soort persoonsgegevens, de categorie\u00ebn van betrokkenen en uw rechten en verplichtingen als verwerkingsverantwoordelijke.</p> </li> <li> <p>Instructies voor de verwerking. De verwerking vindt in principe uitsluitend plaats op basis van uw schriftelijke instructies. De verwerker mag de persoonsgegevens niet voor eigen doeleinden gebruiken. Geheimhoudingsplicht. Personen in dienst van of werkzaam voor de verwerker hebben een geheimhoudingsplicht. Beveiliging. De verwerker treft passende technische en organisatorische maatregelen om de verwerking te beveiligen. Bijvoorbeeld pseudonimisering en versleuteling van persoonsgegevens, permanente informatiebeveiliging, herstel van beschikbaarheid en toegang tot gegevens bij incidenten, regelmatige beveiligingstesten.</p> </li> <li> <p>Subverwerkers. De verwerker schakelt geen subverwerker(s) in zonder uw voorafgaande schriftelijke toestemming. De verwerker legt aan een subverwerker in een subverwerkersovereenkomst dezelfde verplichtingen op als de verwerker richting u heeft. In de overeenkomst kunt u ook direct afspreken dat de verwerker subverwerkers mag inschakelen en onder welke voorwaarden. Komt de subverwerker de verplichtingen niet na? Dan blijft de verwerker volledig aansprakelijk richting u voor het nakomen van de verplichtingen van de subverwerker (artikel 28, vierde lid, van de AVG).</p> </li> <li> <p>Privacyrechten. De verwerker helpt u om te voldoen aan uw plichten als betrokkenen hun privacyrechten uitoefenen (zoals het recht op inzage, correctie, verwijdering en dataportabiliteit).</p> </li> <li> <p>Andere verplichtingen. De verwerker helpt u ook om andere verplichtingen na te komen. Zoals bij het melden van datalekken, het uitvoeren van een data protection impact assessment (DPIA) en bij een voorafgaande raadpleging.</p> </li> <li> <p>Gegevens verwijderen. Na afloop van de verwerkingsdiensten verwijdert de verwerker de gegevens. Of bezorgt de verwerker de gegevens aan u terug, als u dat wilt. Ook verwijdert de verwerker kopie\u00ebn. Tenzij de verwerker wettelijk verplicht is de gegevens te bewaren.</p> </li> <li> <p>Audits. De verwerker werkt mee aan uw audits of die van een derde partij. En stelt alle relevante informatie beschikbaar om te kunnen controleren of de verwerker zich houdt aan de hierboven genoemde verplichtingen (artikel 28 AVG).</p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-14-verwerkersovereenkomst-onderdeel-aanbesteding/#bronnen","title":"Bronnen","text":"<p>Verwerkersovereenkomst</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-14-verwerkersovereenkomst-onderdeel-aanbesteding/#risico","title":"Risico","text":"<p>Er is sprake van een onrechtmatige verwerking van persoonsgegevens als geen verwerkersovereenkomst is opgesteld tussen de verwerker en de verwerkingsverantwoordelijke. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-14-verwerkersovereenkomst-onderdeel-aanbesteding/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-15-leveren-bewijs_voldoen-aan-vereisten-algoritme-aanbieder/","title":"Maak het leveren van bewijs voor het voldoen aan de vereisten voor algoritmes onderdeel van de beoordeling van een inschrijving.","text":"<p>owp-15OntwerpProjectleiderBeleid en adviesPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-15-leveren-bewijs_voldoen-aan-vereisten-algoritme-aanbieder/#maatregel","title":"Maatregel","text":"<p>Maak het leveren van bewijs voor het voldoen aan de vereiste onderdeel van de beoordeling van een inschrijving</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-15-leveren-bewijs_voldoen-aan-vereisten-algoritme-aanbieder/#toelichting","title":"Toelichting","text":"<p>Het leveren van bewijs door aanbieder dat de ontwikkelde algoritmes voldoen aan de vereisten, draagt bij aan het kunnen beoordelen of een aanbieder geschikt is om mee te contracteren. Bij het leveren van bewijs kan worden gedacht aan het overhandigen van bijvoorbeeld een certificaat of een EU-conformiteitsverklaring voor hoog risico AI-systemen. </p> <p>Daarbij is het relevant om te beoordelen in hoeverre er is voldaan aan geharmoniseerde standaarden. Deze standaarden zijn momenteel in ontwikkeling. In de (nabije) toekomst zal dit naar verwachting op een vergelijkbare manier kunnen worden benaderd als bij het moeten leveren van een NEN-ISO 27001 certificaat (voldoen aan informatiebeveiligingsvereisten) door een leverancier. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-15-leveren-bewijs_voldoen-aan-vereisten-algoritme-aanbieder/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-15-leveren-bewijs_voldoen-aan-vereisten-algoritme-aanbieder/#risico","title":"Risico","text":"<p>Er wordt gecontracteerd met een aanbieder die niet voldoet aan de vereisten voor een verantwoorde inzet van algoritmes. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-15-leveren-bewijs_voldoen-aan-vereisten-algoritme-aanbieder/#voorbeeld","title":"Voorbeeld","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/","title":"Laat aanbieder(s) bewijs leveren dat de door hen ontwikkelde algoritmes geen inbreuk maken op de auteursrechten van derden met de trainingsdata en de output.","text":"<p>owp-16Dataverkenning en datapreparatieVerificatie en validatieProjectleiderBeleid en adviesPublieke inkoopData</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/#maatregel","title":"Maatregel","text":"<p>Maak het al dan niet kunnen leveren van bewijs door een aanbieder dat auteursrechten niet worden geschonden met de trainingsdata en output van diens algoritme van bijvoorbeeld een aanbesteding.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/#toelichting","title":"Toelichting","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/#trainingsdata","title":"Trainingsdata","text":"<ul> <li> <p>Algoritmes worden veelal getraind aan de hand van een omvangrijke hoeveelheid data. Wanneer grote hoeveelheden data, bijvoorbeeld door deze te scrapen van internet, worden gebruikt is het zeer aannemelijk (of: nagenoeg zeker) dat zich onder de gescrapete inhoud (ook) veel auteursrechtelijk beschermde werken bevinden, zoals bijvoorbeeld e-books en afbeeldingen. De gebruikte auteursrechtelijke werken kunnen soms bijvoorbeeld uit illegale bron verkregen zijn, en ook los daarvan zijn rechthebbenden veelal niet op de hoogte van het feit dat hun auteursrechtelijke werken voor de ontwikkeling van een algoritme of AI gebruikt worden.</p> </li> <li> <p>Onder auteursrechtjuristen wordt aangenomen dat het gebruik van auteursrechtelijk beschermde werken ter training van algoritmes (waarschijnlijk) als kopi\u00ebren geldt: een handeling die de rechthebbende kan verbieden. Dat betekent dat aanbieders van algoritmes het gebruik van auteursrechtelijk beschermd materiaal in de inputfase steeds moeten kunnen legitimeren op grond van (a) toestemming van de rechthebbende(n) of (b) een in de wet neergelegde exceptie op het auteursrechtelijke verveelvoudigingsrecht.</p> </li> <li> <p>Laat de aanbieder(s) uitleggen en (aantoonbaar) onderbouwen op welke manier de trainingsdata is verkregen en of dit rechtmatig was. Laat de aanbieders(s) ook aantonen welke maatregelen er zijn getroffen om dit te voorkomen en ga hier eventueel over in gesprek. Maak een jurist onderdeel van de beoordeling hiervan. Overweeg om een bronvermelding te laten opnemen.</p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/#output","title":"Output","text":"<p>Laat de aanbieder(s) uitleggen en (aantoonbaar) onderbouwen op welke manier de trainingsdata is verkregen en of dit rechtmatig was. Laat de aanbieders(s) ook aantonen welke maatregelen er zijn getroffen om dit te voorkomen. Maak een jurist onderdeel van de beoordeling hiervan. Overweeg om een bronvermelding te laten opnemen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/#risicomanagement","title":"Risicomanagement","text":"<p>Het is van belang dat de (rest)risico's inzichtelijk zijn gemaakt als er sprake is van een (potenti\u00eble) schending van auteursrechten. Laat een aanbieder deze risico's inzichtelijk maken, zodat aanbieder en gebruiksverantwoordelijke maatregelen kunnen treffen en handelen als dit nodig is. Beoordeel of deze rest(risico's) acceptabel zijn. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/#contractovereenkomst","title":"Contractovereenkomst","text":"<p>Neem in de conceptovereenkomst op dat de aanbieder garandeert dat auteursrechten niet worden geschonden met de trainingsdata of output van het algoritme en dat aanbieder dit gedurende de ontwikkeling en levensduur actief bewaakt.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/#bronnen","title":"Bronnen","text":"<ul> <li>Advies Landsadvocaat Pels Rijcken over het gebruik van generatieve AI-tools door medewerkers van de Staat</li> <li>ARVODI (24.7) en ARBIT (art 8.5 &amp; 8.6)</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/#risico","title":"Risico","text":"<p>Dat wordt gecontracteerd met een aanbieder waarbij niet kan worden uitgesloten dat auteursrechten worden geschonden. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-17-beoordeel-aansprakelijkheidsvoorwaarden-van-aanbieder/","title":"Aansprakelijkheidsvoorwaarden van een aanbieder worden beoordeeld in de aanbesteding","text":"<p>owp-17OntwerpImplementatieJuristBeleid en adviesPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-17-beoordeel-aansprakelijkheidsvoorwaarden-van-aanbieder/#maatregel","title":"Maatregel","text":"<p>Maak de aansprakelijkheidsvoorwaarden die een aanbieder stelt ten aanzien van auteursrechten een vast onderdeel om te beoordelen in de aanbesteding.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-17-beoordeel-aansprakelijkheidsvoorwaarden-van-aanbieder/#toelichting","title":"Toelichting","text":"<ul> <li> <p>Eindgebruikers van algoritmes kunnen er niet altijd op vertrouwen, of (eenvoudig) nagaan, of datgene wat zij door middel van een algoritme laten genereren, inbreuk maakt op rechten van anderen. Het is onwenselijk dat een eindgebruiker aansprakelijk wordt gesteld voor het maken van een inbreuk op rechten van derden, als deze gebruik maakt van algoritmes die worden aangeboden door aanbieders. Organisatie moeten daarom afspraken hierover maken met aanbieders.</p> </li> <li> <p>Hoe groot de kans is dat eindgebruikers vanwege het gebruik van algoritmes aansprakelijk worden gesteld, is nog onduidelijk. Er zijn wel voorbeelden waarbij eindgebruikers voor een eventuele inbreuk aansprakelijk kunnen worden gesteld.</p> </li> <li> <p>Op dit moment zijn (nog) geen gevallen of rechtszaken bekend waarin eindgebruikers (of hun werkgevers) aansprakelijk zijn gesteld voor een inbreuk op het intellectuele-eigendomsrecht vanwege het gebruik van op basis van algoritme. Feit is echter wel dat een dergelijke aansprakelijkstelling in voorkomende gevallen dus mogelijk zullen zijn, te meer nu de aanbieders van algoritmes in hun algemene voorwaarden het risico voor aansprakelijkheid volledig of grotendeels uitsluiten, of zelfs verlangen dat gebruikers hen vrijwaren voor de gevolgen van eventuele aansprakelijkstellingen.</p> </li> <li> <p>Het is daarom van belang om een beoordeling te maken in hoeverre de aansprakelijkheidsvoorwaarden van de aanbieder passend zijn. Maak een jurist onderdeel van de beoordeling.</p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-17-beoordeel-aansprakelijkheidsvoorwaarden-van-aanbieder/#bronnen","title":"Bronnen","text":"<p>Advies Landsadvocaat Pels Rijcken over het gebruik van generatieve AI-tools door medewerkers van de Staat</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-17-beoordeel-aansprakelijkheidsvoorwaarden-van-aanbieder/#risico","title":"Risico","text":"<p>Er wordt gecontracteerd met een aanbieder die ongewenste aansprakelijkheidsvoorwaarden hanteert. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-17-beoordeel-aansprakelijkheidsvoorwaarden-van-aanbieder/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-18-maak-vereisten-onderdeel-van-subgunningscriteria/","title":"Maak vereisten onderdeel van (sub)gunningscriteria bij een aanbesteding.","text":"<p>owp-18OntwerpOntwikkelaarPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-18-maak-vereisten-onderdeel-van-subgunningscriteria/#maatregel","title":"Maatregel","text":"<p>Maak vereisten onderdeel van (sub)gunningscriteria bij een aanbesteding.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-18-maak-vereisten-onderdeel-van-subgunningscriteria/#toelichting","title":"Toelichting","text":"<ul> <li>Door een vereiste onderdeel te maken van een (sub)gunningscriteria, ontstaat een mogelijkheid voor aanbieders om zich te onderscheiden van andere aanbieders.</li> <li>Dit kan zorgen voor een extra stimulatie op kwaliteitsaspecten van algoritmes</li> <li>In de context van algoritmes is dit in het bijzonder relevant, bijvoorbeeld in relatie tot vereisten als non-discriminatie, eerbiedigen fundamentele rechten of het verbod op schenden auteursrechten. </li> <li>Door vereisten te vertalen naar een (sub)gunningscriteria, kan een inhoudelijke beoordeling worden gemaakt in hoeverre een aanbieder voldoet aan deze vereisten.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-18-maak-vereisten-onderdeel-van-subgunningscriteria/#bronnen","title":"Bronnen","text":"<ul> <li>Keuze gunningscriterium en opstellen (sub)gunningscriteria</li> <li>Handreiking Beste prijs-kwaliteitsverhouding:de basis</li> <li>Beste prijs-kwaliteitsverhouding</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-18-maak-vereisten-onderdeel-van-subgunningscriteria/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/","title":"Cre\u00eber ruimte om met een aanbieder samen te gaan werken om specifieke vereisten te realiseren","text":"<p>owp-19OntwerpOntwikkelenProjectleiderPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/#maatregel","title":"Maatregel","text":"<p>Cre\u00eber ruimte om met een aanbieder samen te gaan werken om specifieke vereisten te gaan realiseren.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/#toelichting","title":"Toelichting","text":"<ul> <li> <p>Om op een betekenisvolle manier invulling te geven aan bepaalde vereisten, kan het noodzakelijk zijn dat opdrachtgever en aanbieder (innovatief) moeten gaan samenwerken. Op basis van nieuwe wet- en regelgeving (bv. AI-Verordening) of geharmoniseerde standaarden kunnen aanbieders mogelijk nog niet voldoen aan nieuwe vereisten. Het kan ook onduidelijk zijn hoe moet worden voldaan aan vereisten nu de technologie zich snel ontwikkelt of dat de specifieke omstandigheden van het beoogde gebruik vragen om een samenspel tussen opdrachtgever en aanbieder.</p> </li> <li> <p>Bij een verantwoorde inzet van algoritmes kan het bij vereisten zoals non-discriminatie, transparantie, menselijke controle en grondrechten van belang zijn om samen te onderzoeken hoe hier invulling aan moet worden gegeven. Het is belangrijk om bij de behoeftestelling al te verkennen om welke onderwerpen dit mogelijk van toepassing is. Bij een marktverkenning of informatiesessie kan worden verkend hoe aanbieders ervoor staan. Op basis hiervan kan worden beoordeeld in hoeverre bijvoorbeeld in een aanbesteding contractuele ruimte moet worden gecre\u00eberd voor opdrachtgever en aanbieder om hieraan te werken. </p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/#bronnen","title":"Bronnen","text":"<ul> <li>Ruimte voor Innovatie in het contract</li> <li>Aanbesteding Ethische Beeldinwinning en Objectherkenning Openbare Ruimte</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/#risico","title":"Risico","text":"<p>Door niet te kunnen samenwerken aan vereisten, kan de situatie ontstaan dat uiteindelijk niet op een betekenisvolle manier wordt voldaan aan deze vereisten voor een verantwoorde inzet van algoritmes. Gebrek aan samenwerking kan leiden tot onvermogen om de benodigde vereisten voldoende in de praktijk te garanderen. Ook is het belangrijk dat de verantwoordelijke goed genoeg begrijpt hoe het algoritme werkt en welke keuzes er gemaakt zijn tijdens het ontwerp, omdat alleen dan goed beoordeeld kan worden welke vereisten zijn voldaan en welke risico\u2019s nog niet of minder goed zijn afgedekt. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-20-vaststellen-aanleveren-informatie-technische-documentatie/","title":"Vul technische documentatie van aanbieder aan met relevante informatie vanuit de gebruiksverantwoordelijke.","text":"<p>owp-20OntwerpProjectleiderBeleid en adviesOntwikkelaarPublieke inkoopTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-20-vaststellen-aanleveren-informatie-technische-documentatie/#maatregel","title":"Maatregel","text":"<p>Vul technische documentatie van aanbieder aan met relevante informatie vanuit de gebruiksverantwoordelijke, zodat het alle relevante onderdelen van het algoritme zijn beschreven.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-20-vaststellen-aanleveren-informatie-technische-documentatie/#toelichting","title":"Toelichting","text":"<ul> <li> <p>Het is van belang dat duidelijke afspraken worden gemaakt over het opstellen, aanvullen en actueel houden van technische documentatie van algorites. Bij het inkopen van algoritmes moet hier rekening mee worden gehouden. De aanbieder zal een belangrijk deel van de technische documentatie moeten aanleveren, maar bij gebruik door de gebruiksverantwoordelijken zal deze informatie moeten worden aangevuld. </p> </li> <li> <p>Bespreek met het projectteam welke onderdelen van de technische documentatie, als genoemd in de Bijlage 4 AI-verordening, van het AI-systeem door welke partij (aanbieder of gebruiksverantwoordelijke) moeten worden ingevuld of aangevuld. </p> </li> <li> <p>Hierbij is het van belang dat de documentatie aansluit bij de verschillende gebruikers van het systeem, waarbij rekening wordt gehouden met verschillende toepassingen of versies. Bespreek met het projectteam welke onderdelen van de technische documentatie voor AI-systemen, als genoemd in de Bijlage 4 AI-verordening, door welke partij (aanbieder of gebruiksverantwoordelijke) moeten worden ingevuld of aangevuld. </p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-20-vaststellen-aanleveren-informatie-technische-documentatie/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-20-vaststellen-aanleveren-informatie-technische-documentatie/#risico","title":"Risico","text":"<p>Door de technische documentatie niet volledig op te stellen, is niet geheel transparant hoe het algoritme functioneert en kan daar geen verantwoording voor worden afgelegd.    </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-20-vaststellen-aanleveren-informatie-technische-documentatie/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/","title":"Neem het kunnen uitvoeren van een audit over de vereiste op in contractvoorwaarden en de contractovereenkomst","text":"<p>owp-21OntwerpProjectleiderBeleid en adviesPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/#maatregel","title":"Maatregel","text":"<p>Neem het kunnen uitvoeren van een audit over de vereiste op in contractvoorwaarden en de contractovereenkomst </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/#toelichting","title":"Toelichting","text":"<p>Het is van belang dat opdrachtgever mogelijkheden heeft om te controleren in hoeverre door aanbieder/opdrachtnemer wordt voldaan aan naleving van de contractvoorwaarden</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/#bronnen","title":"Bronnen","text":"<ul> <li>Contractvoorwaarden gemeente Amsterdam</li> <li>Europese Inkoopvoorwaarden Hoog Risico</li> <li>Europese Inkoopvoorwaarden Laag Risico</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/#risico","title":"Risico","text":"<p>Er kunnen geen controles of inspecties worden uitgevoerd om te beoordelen of de algoritmes van aanbieder nog voldoen aan de vereisten voor een verantwoorde inzet van algoritmes. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-22-invloed-besluitvorming-algoritmes-aanbieders/","title":"Bepaal in een aanbesteding of algoritmes van een aanbieder bepalende invloed hebben in een besluit richting personen","text":"<p>owp-22OntwerpProjectleiderBeleid en adviesOntwikkelaarPublieke inkoopTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-22-invloed-besluitvorming-algoritmes-aanbieders/#maatregel","title":"Maatregel","text":"<p>Ga na of algoritmes van een aanbieder een bepalende invloed hebben in een besluit richting personen en laat de aanbieder onderbouwen in hoeverre dit wel of niet het geval is.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-22-invloed-besluitvorming-algoritmes-aanbieders/#toelichting","title":"Toelichting","text":"<ul> <li> <p>Als overheidsorganisaties algoritmes willen gebruiken van aanbieders, dan zal bijvoorbeeld tijdens een aanbestedingsproces moeten worden beoordeeld in hoeverre deze algoritmes invloed hebben op besluitvormingprocessen van deze organisaties. Algoritmes kunnen namelijk gebruikers ondersteunen bij de totstandkoming van besluiten, maar ook de besluitvorming van gebruikers overnemen. De mate van menselijke tussenkomst speelt daarbij een belangrijk rol. </p> </li> <li> <p>Een opdrachtgever moet zelf bepalen welke algoritmes, gezien de specifieke context, wenselijk en toegestaan zijn. Vervolgens moet worden beoordeeld of de algoritmes die worden aangeboden door aanbieder daarbij aansluiten.</p> </li> <li> <p>Tijdens het aanbestedingsproces moeten daarom inzichten worden verkregen hoe de algoritmes van aanbieders functioneren om tot een beoordeling te kunnen komen. Laat de aanbieder dit toelichten. </p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-22-invloed-besluitvorming-algoritmes-aanbieders/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-22-invloed-besluitvorming-algoritmes-aanbieders/#risico","title":"Risico","text":"<p>Algoritmes van aanbieders nemen besluitvormende taken over, zonder dat daar zicht op is of dat dit is beoordeeld.  </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-22-invloed-besluitvorming-algoritmes-aanbieders/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/","title":"Laat de aanbieder aangeven welke mate van opleiding en ondersteuning bij de implementatie nodig is om de beoogde algoritmes verantwoord te gebruiken.","text":"<p>owp-23OntwerpProjectleiderBeleid en adviesOntwikkelaarPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/#maatregel","title":"Maatregel","text":"<p>Laat de aanbieder aangeven welke mate van kennisoverdracht (opleiding en training) en ondersteuning bij de organisatorische implementatie nodig is om de beoogde algoritmes verantwoord te kunnen gebruiken. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/#toelichting","title":"Toelichting","text":"<p>Beoordeel of de kennisoverdracht en ondersteuning van aanbieder voldoende is om voor een langere periode zelfstandig op een verantwoorde wijze gebruikt te kunnen maken van de algoritmes.</p> <p>Laat de aanbieder aangeven op welk niveau de noodzakelijkerwijs te leveren trainingen passend is voor het beoogde gebruik, waarbij de opdrachtgever vooraf inzicht geeft in het bestaande niveau, zodat een aanbieder concreet kan zijn over eventuele verschillen tussen beiden.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/#risico","title":"Risico","text":"<p>Zonder kennisoverdracht aan de organisaties en gebruikers, ontstaat het risico's dat algoritmes onjuist worden toegepast of dat de output onjuist wordt ge\u00efnterpreteerd en zo fouten ontstaan bij het uitvoeren van overheidstaken. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-24-risico-analyse-informatiebeveiliging-leverancier/","title":"Voer een risico-analyse met de aanbieder uit op het gebied van informatiebeveiliging bij een uitbestedingstraject","text":"<p>owp-24OntwerpProjectleiderBeleid en adviesTechnische robuustheid en veiligheidPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-24-risico-analyse-informatiebeveiliging-leverancier/#maatregel","title":"Maatregel","text":"<p>Voer een risico-analyse met de aanbieder uit op het gebied van informatiebeveiliging bij een uitbestedingstraject</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-24-risico-analyse-informatiebeveiliging-leverancier/#toelichting","title":"Toelichting","text":"<ul> <li>Stel vast of een aanbieder voldoet aan de Baseline Informatiebeveiliging Overheid.</li> <li>Bespreek de informatiebeveiligingseisen met aanbieder die verband houden met de beschikbaarheid, integriteit en vertrouwelijkheid van de informatie en de informatiesystemen.</li> <li>Bepaal of er, gezien de restrisico's, aanvullende beveiligingsmaatregelen (door de aanbieder of opdrachtgever) moeten worden getroffen om deze te beschermen.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-24-risico-analyse-informatiebeveiliging-leverancier/#bronnen","title":"Bronnen","text":"<ul> <li>Baseline Informatiebeveiliging Overheid, BIO 15.1.1.1</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, IB.29</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-24-risico-analyse-informatiebeveiliging-leverancier/#risico","title":"Risico","text":"<p>Er is onvoldoende zicht op risico's op het gebied van informatiebeveiliging als gebruikt wordt gemaakt van algoritmes van aanbieders. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-24-risico-analyse-informatiebeveiliging-leverancier/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/","title":"Maak vereisten onderdeel van het programma van eisen bij een aanbesteding","text":"<p>owp-25OntwerpProjectleiderBeleid en adviesOntwikkelaarPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/#maatregel","title":"Maatregel","text":"<p>Maak vereisten onderdeel van het programma van eisen bij een aanbesteding</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/#toelichting","title":"Toelichting","text":"<ul> <li>Door vereisten onderdeel te maken van het programma van eisen bij een aanbesteding, is het voor aanbieders duidelijk aan welke specifieke eisen een oplossing moet voldoen.</li> <li>Op basis hiervan kan een aanbieder een zo goed mogelijke aanbieding doen.</li> <li>Afhankelijk van de behoeftestelling kan het relevant zijn om bepaalde vereisten te verfijnen in het Programma van Eisen en aan te geven wanneer hieraan voldaan is, bijvoorbeeld met betrekking tot het transparantievereiste. Bepaal met het inkoopteam bij welke vereisten dit noodzakelijk is. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/#risico","title":"Risico","text":"<p>Er is niet gespecificeerd en daarmee achteraf niet afdwingbaar dat algoritmes aan bepaalde vereisten moeten voldoen die van de belangen voor de betreffende overheidsorganisatie. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/#bronnen","title":"Bronnen","text":"<p>Hoe specificeer ik mijn vraag?</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/#voorbeeld","title":"Voorbeeld","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/","title":"Maak vereisten voor algoritmes onderdeel van de Service Level Agreement","text":"<p>owp-26OntwerpProjectleiderBeleid en adviesOntwikkelaarPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/#maatregel","title":"Maatregel","text":"<p>Maak de vereiste onderdeel van Service Level Agreement</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/#toelichting","title":"Toelichting","text":"<ul> <li>Onderzoek met het inkoopteam het relevant is om vereiste voor een verantwoorde inzet van algoritmes onderdeel te maken van de Service Level Agreement. </li> <li>Met een SLA kunnen specifieke afspraken worden gemaakt over de kwaliteit van de dienstverlening van aanbieder.</li> <li>Hierbij kan worden gedacht aan onderwerpen als incidentmanagement, servicemanagement, verantwoordelijkheden matrix, hersteltijd, prestatiecriteria, reproduceerbaarheid, versiebeheer van de gebruikte algoritmes en informatiebeveiliging. </li> <li>Laat de aanbieder aangeven welke vormen van onderhoud aan de betreffende algoritmes nodig zijn en de snelheid waarmee signalen vanuit gebruik, ongeacht de bron, kunnen worden verwerkt in het systeem en welke expertise hiervoor beschikbaar is. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/#risico","title":"Risico","text":"<p>Zonder concrete afspraken te maken in de SLA, ontstaat het risico dat aloritmes (tijdelijk) of te langdurig niet kunnen worden gebruikt, onjuist fuctioneren of dat er geen verantwoording over de output kan worden afgelegd.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.11 </li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 1.05 </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-27-contractuele-afspraken-data-en-artefacten/","title":"Maak (contractuele) afspraken over data en artefacten met een aanbieder","text":"<p>owp-27OntwerpImplementatieJuristPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-27-contractuele-afspraken-data-en-artefacten/#maatregel","title":"Maatregel","text":"<p>Maak (contractuele) afspraken met de aanbieder wie eigenaar is van de data en artefacten die ontstaan bij het gebruik van algoritmes.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-27-contractuele-afspraken-data-en-artefacten/#toelichting","title":"Toelichting","text":"<p>Hier kan worden gedacht aan (initi\u00eble) trainingsdatasets, outputdata (richting gebruikers) en nieuwe trainingsdata (vanuit gebruikers). </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-27-contractuele-afspraken-data-en-artefacten/#bronnen","title":"Bronnen","text":"Bron Algoritmekader"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-27-contractuele-afspraken-data-en-artefacten/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-28-pas-vastgestelde-beleidskaders-zijn-nageleefd/","title":"Pas vastgestelde interne beleidskaders toe en maak aantoonbaar dat deze zijn nageleefd bij het ontwikkelen, inkopen en gebruiken van algoritmes.","text":"<p>owp-28OrganisatieverantwoordelijkhedenProjectleiderBeleid en adviesGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-28-pas-vastgestelde-beleidskaders-zijn-nageleefd/#maatregel","title":"Maatregel","text":"<p>Pas vastgestelde interne beleidskaders toe en maak aantoonbaar dat deze zijn nageleefd bij het ontwikkelen, inkopen en gebruiken van algoritmes.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-28-pas-vastgestelde-beleidskaders-zijn-nageleefd/#toelichting","title":"Toelichting","text":"<ul> <li>Interne vastgestelde beleidskaders moeten worden toegepast bij het ontwikkelen, inkopen of gebruiken van algoritmes.</li> <li>Het is van belang dat tijdig, bijvoorbeeld in de probleemanalyse fase, inzichtelijk wordt gemaakt welke interne beleidskaders moeten worden toegepast.</li> <li>Hierbij kan worden gedacht aan definities die moeten worden gehanteerd, het naleven van inkoopbeleid, strategisch beleid volgen met betrekking tot het mogen inzetten van algoritmes binnen de organisaties of het doorlopen van processen en protocollen die moeten worden toegepast.</li> <li>Vraag de betrokken experts welke beleidskaders van toepassing zijn vanuit diens specifieke expertise. </li> <li>Ten behoeve van controles en audits is het van belang dat aantoonbaar wordt gemaakt dat de vastgestelde beleidskaders zijn nageleefd. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-28-pas-vastgestelde-beleidskaders-zijn-nageleefd/#risico","title":"Risico","text":"<p>De in te zetten algoritmes voldoen niet aan vastgestelde beleidskaders. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-28-pas-vastgestelde-beleidskaders-zijn-nageleefd/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.8</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-28-pas-vastgestelde-beleidskaders-zijn-nageleefd/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-29-informeer_betrokkenen/","title":"Stel vast welke betrokkenen ge\u00efnformeerd moeten worden en welke informatie zij nodig hebben.","text":"<p>pba-04OntwerpOntwikkelenProjectleiderBeleid en adviesTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-29-informeer_betrokkenen/#maatregel","title":"Maatregel","text":"<p>Stel vast welke betrokkenen ge\u00efnformeerd moeten worden over de ontwikkeling en het gebruik van algoritmes en welke informatie zij hierover nodig hebben.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-29-informeer_betrokkenen/#toelichting","title":"Toelichting","text":"<p>Welke informatie over algoritmes relevant is, verschilt per partij. Het is van belang om deze partijen in beeld te brengen en vast te stellen welke informatie voor hen relevant is. Raadpleeg hierbij vastgestelde beleidskaders, waarin is beschreven welke informatie in welke gevallen moet worden gecommuniceerd.</p> <p>Stel bijvoorbeeld de volgende vragen:</p> Vragen Acties die je kan ondernemen Wie heeft informatie nodig over het ontwikkelen en gebruiken van algoritmes? Stel vast welke betrokken(en) binnen of buiten de organisatie iets over het algoritme wil of zou moeten weten. Wat voor informatie voor algoritmes heeft deze betrokken partij nodig? Toets dit ook bij vastgesteld beleid.    Ga na wat de doelgroep moet weten over de werking of inzet van het algoritme. Bepaal om welk technisch niveau dit gaat. Op wat voor manier informeer je de betrokken partij? Pas de juiste methodes toe om de doelgroep te informeren. Wanneer wordt deze informatie gebruikt? Ga na in welke fase van de levenscyclus de gewenste informatie over de werking of inzet van het algoritme wordt gebruikt. Hoe verschilt de informatiebehoefte in elke fase van de levenscyclus? Wie is er verantwoordelijk voor de informatieverstrekking? Bepaal wie er informatie over het algoritme moet ophalen, en wie er voor die informatie kan zorgen. <p>Maak bij het vaststellen van de informatiebehoefte onderscheid tussen transparantie, uitlegbaarheid en interpreteerbaarheid. Houd daarbij ook rekening met zaken die moeten worden gecommuniceerd. Denk hierbij aan het kunnen uitleggen hoe een automatisch genomen besluit tot stand is gekomen. </p> <p>Stel een communicatieplan op over de ontwikkeling en gebruik van het algoritme. Bepaal vervolgens aan de hand van de levenscyclus wanneer, welke informatie wanneer beschikbaar moet worden gesteld. Stel vast wie verantwoordelijk is voor het opstellen of het leveren van een bijdrage aan deze informatie. In het communicatieplan kunnen verder zaken worden opgenomen als:</p> <ul> <li>Het doel van het algoritme.</li> <li>Mogelijkheden van het algoritme.</li> <li>Beperkingen van het algoritme.</li> <li>Context waarin het algoritme wordt toegepast.</li> <li>Wie heeft informatie nodig?</li> <li>Wat voor informatie heeft deze betrokken partij nodig?</li> <li>Op wat voor manier informeer je de betrokken partij?</li> <li>Wanneer wordt deze informatie gebruikt?</li> <li>Wie is er verantwoordelijk voor de informatieverstrekking?</li> <li>Hoe en naar wie communiceer je in het geval van een incident?</li> <li>Wat is de planning voor de communicatieactiviteiten?</li> </ul> <p>Overleg regelmatig met betrokkenen en belanghebbenden in hoeverre de informatieverstrekking aansluit bij de (nieuwe) behoeften.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-29-informeer_betrokkenen/#bronnen","title":"Bronnen","text":"<p>Algoritmekader</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-29-informeer_betrokkenen/#risico","title":"Risico","text":"<p>Het risico is dat partijen niet of onvolledig worden ge\u00efnformeerd over de ontwikkeling en gebruik van algoritmes, en hierdoor hun rechten niet kunnen effectueren of belangen kenbaar kunnen maken.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-29-informeer_betrokkenen/#voorbeeld","title":"Voorbeeld","text":"<ul> <li>Bouwstenen van een communicatieplan</li> <li>WMO voorspelmodel</li> <li>Handreiking WMO voorspelmodel</li> <li>Maatwerkscan UWV</li> <li>Slimme keuzehulp aangifte internetoplichting: Ik heb iets gekocht, maar niets ontvangen</li> <li>Chatbot gemeente Hillegom</li> </ul> <p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/","title":"Pas uitlegbaarheidstechnieken toe en evalueer en valideer deze.","text":"<p>owp-07OntwerpProjectleiderBeleid en adviesOntwikkelaarTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/#maatregel","title":"Maatregel","text":"<p>Pas uitlegbaarheidstechnieken toe en evalueer en valideer deze.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/#toelichting","title":"Toelichting","text":"<p>Uitlegbaarheidstechnieken helpen om de werking van een algoritme transparant te maken. De keuze voor het type algoritme bepaalt hoe transparant je kunt zijn. Van rekenregels kun je namelijk precies uitleggen hoe deze tot een beslissing komen. Maar complexe AI-systemen kunnen een black box zijn. Het is dan onduidelijk hoe deze systemen beslissingen maken. </p> <p>Afhankelijk van het type algoritme zijn er uitlegbaarheidstechnieken beschikbaar om de werking en keuzes van een algoritme bloot te leggen. Er moet eerst een keuze worden gemaakt welk type algoritme geschikt is gezien de informatiebehoefte. Het is belangrijk om samen met de betrokken partijen vast te leggen welke uitlegbaarheidstechnieken moeten worden toegepast. Bij bronnen kan informatie worden geraadpleegd die helpen bij het vinden van de juiste methodiek.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/#gebruik-uitlegbaarheid-bij-besluiten","title":"Gebruik uitlegbaarheid bij besluiten","text":"<p>Onderzoek hoe uitlegbaarheidstechnieken kunnen bijdragen aan het motiveren van besluiten. Dit kan bijvoorbeeld door:</p> <pre><code>- De output van het algoritme te koppelen aan het zaakdossier, met een toelichting op de interpretatie van die output.\n- De output of een samenvatting hiervan op te nemen in de beschikking.\n</code></pre>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/#beperkingen-en-veiligheid","title":"Beperkingen en veiligheid","text":"<p>Vanuit veiligheidsoverwegingen kan bij specifieke algoritmes besloten worden om bepaalde informatie over de werking van een algoritme niet aan iedereen vrij te geven. Denk hierbij aan de beperkingen die de Wet Open Overheid oplegt. Houd ook rekening met mogelijke risico\u2019s op aanvallen die kunnen ontstaan door het gebruik van uitlegbaarheidstechnieken, zoals omschreven in: A Survey of Privacy-Preserving Model Explanations: Privacy Risks, Attacks, and Countermeasures. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/#evaluatie-en-validatie","title":"Evaluatie en validatie","text":"<p>Evalueer de uitlegbaarheid van het systeem op functionele, operationele, bruikbaarheids- en veiligheidsvereisten in samenwerking met betrokkenen zoals gebruikers. Valideer of de uitkomst van het algoritme begrijpelijk genoeg is voor gebruiker om hier op een verantwoorde wijze mee te werken.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/#risico","title":"Risico","text":"<p>Als er geen rekening wordt gehouden met de uitlegbaarheid van een algoritme binnen een bepaalde context, ontstaat het risico dat de output van het algoritme niet wordt begrepen of verkeerd wordt ge\u00efnterpreteerd, wat kan leiden tot onjuist gebruik.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/#bronnen","title":"Bronnen","text":"<ul> <li>Toolkit voor implementatie</li> <li>An introduction to explainable AI with Shapley values</li> <li>Paper over (de evaluatie van) toolkits</li> <li>UXAI: Design Strategy</li> <li>Overzicht (evaluatie van) metrieken XAI</li> <li>Part 2: Explaining AI in practice | ICO</li> <li>A Survey of Privacy-Preserving Model Explanations: Privacy Risks, Attacks, and Countermeasures</li> <li>Towards Transparency by Design for Artificial Intelligence | Science and Engineering Ethics.</li> <li>From Anecdotal Evidence to Quantitative Evaluation Methods: A Systematic Review on Evaluating Explainable AI</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/#voorbeeld","title":"Voorbeeld","text":"<ul> <li>Gemeente Amsterdam - Onderzoekswaardigheid Algoritme \u2018Slimme check\u2019. Een tool die de medewerkers helpt om te bepalen of een aanvraag levensonderhoud onderzoekswaardig is. (niet meer in gebruik!): Overzicht Verwerkte Data en Features</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-genereren-bronvermelding/","title":"Maak gebruik van een algoritme dat bronvermelding kan genereren bij de output.","text":"<p>imp-10OntwerpValidatie en verificatieProjectleiderBeleid en adviesTransparantiePublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-genereren-bronvermelding/#maatregel","title":"Maatregel","text":"<p>Maak gebruik van een algoritme dat bronvermelding kan genereren bij de output.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-genereren-bronvermelding/#toelichting","title":"Toelichting","text":"<p>Bij het gebruik van generatieve AI/LLM\u2019s is bronvermelding van belang. Hiermee kan tot op zekere hoogte een beoordeling worden gegeven in hoeverre bij het trainen van het AI-model rechtmatig gebruik is gemaakt van bronnen. Bronvermelding is daarnaast essentieel om de output van het AI-model inhoudelijk te kunnen controleren, wat ook informatie geeft in hoeverre het AI-model bijvoorbeeld al dan niet hallucineert of manipuleert. </p> <p>Voor het ontwikkelen van een AI-model is bronvermelding noodzakelijk, omdat het voor ontwikkelaars de enige manier is om te kunnen controleren of het model goed werkt. Dit geldt ook voor ontwikkelaars die pre-trained modellen gebruiken. </p> <p>Neem het kunnen generenen van een bronvermelding mee als een 'requirement' voor het te ontwikkelen AI-model in de ontwerpfase of maakt het onderdeel van de behoeftestelling en specificeer deze behoefte in het inkoopproces.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-genereren-bronvermelding/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-genereren-bronvermelding/#voorbeeld","title":"Voorbeeld","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-toepassen_vastgestelde-beleidskaders/","title":"Pas vastgestelde beleidskaders toe","text":"<p>org-02OrganisatieverantwoordelijkhedenProjectleiderBeleid en adviesGovernanceTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-toepassen_vastgestelde-beleidskaders/#maatregel","title":"Maatregel","text":"<p>Pas vastgestelde beleidskaders toe.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-toepassen_vastgestelde-beleidskaders/#toelichting","title":"Toelichting","text":"<ul> <li>Vastgestelde (interne) beleidskaders moeten worden toegepast bij het ontwikkelen, inkopen of gebruiken van algoritmes. Denk aan specifiek beleid voor de inzet van algoritmes.</li> <li>Het is van belang dat tijdig, bijvoorbeeld in de probleemanalyse fase, inzichtelijk wordt gemaakt welke interne beleidskaders moeten worden toegepast.</li> <li>Hierbij kan worden gedacht aan definities die moet worden gehanteerd, het naleven van inkoopbeleid, strategisch beleid volgen met betrekking tot het mogen inzetten van algoritmes binnen de organisaties of het doorlopen van processen en protocollen die moeten worden toegepast.</li> <li>Vraag de betrokken experts welke beleidskaders van toepassing zijn vanuit diens expertise. </li> <li>Ten behoeve van controles en audits is het van belang dat aantoonbaar wordt gemaakt dat de vastgestelde beleidskaders zijn nageleefd. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-toepassen_vastgestelde-beleidskaders/#risico","title":"Risico","text":"<p>De in te zetten algoritmes voldoen niet aan vastgestelde beleidskaders. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-toepassen_vastgestelde-beleidskaders/#bronnen","title":"Bronnen","text":"<p>Onderzoekskader Algoritmes Auditdienst Rijk, SV.8</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-toepassen_vastgestelde-beleidskaders/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-01-datakwaliteit/","title":"Controleer de datakwaliteit","text":"<p>dat-01Dataverkenning en datapreparatieOntwikkelaarData</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-01-datakwaliteit/#maatregel","title":"Maatregel","text":"<p>Stel vast of de gebruikte data van voldoende kwaliteit is voor de beoogde toepassing.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-01-datakwaliteit/#toelichting","title":"Toelichting","text":"<ul> <li> <p>Stel functionele eisen voor de datakwaliteit vast en analyseer structureel of er aan deze eisen wordt voldaan. </p> </li> <li> <p>De kwaliteit van de data die als input voor het algoritme wordt gebruikt is bepalend voor de uitkomsten van het algoritme. Hier wordt soms ook naar gerefereerd als garbage in = garbage out. </p> </li> <li>Een vraag die gesteld dient te worden: beschrijft de data het fenomeen dat onderzocht dient te worden? </li> <li> <p>Het Raamwerk gegevenskwaliteit bevat een breed toepasbare set van kwaliteitsdimensies:</p> <ul> <li>juistheid</li> <li>compleetheid</li> <li>validiteit</li> <li>consistentie</li> <li>actualiteit</li> <li>precisie</li> <li>plausibiliteit</li> <li>traceerbaarheid</li> <li>begrijpelijkheid</li> </ul> <p>Deze dimensies zijn aangevuld met kwaliteitsattributen welke gebruikt kunnen worden om de verschillende dimensies meetbaar te maken. </p> </li> <li> <p>De vraag of de data kwaliteit voldoende is, hangt sterk samen met de vraag of er bias in de onderliggende data zit. Analyseer daarom ook welke bias en aannames er besloten zijn in de onderliggende data. Denk hierbij onder andere aan de volgende vormen van bias:</p> <ul> <li>historische bias</li> <li>meetbias</li> <li>representatie bias</li> </ul> </li> <li> <p>Zorg dat je data vindbaar, toegankelijk, interoperabel en herbruikbaar (FAIR) is.</p> </li> </ul> <p>Let op!</p> <p>Wanneer je een algoritme inkoopt en de ontwikkeling van het algoritme uitbesteedt aan een derde partij, houdt er dan dan rekening mee dat data traceerbaar en reproduceerbaar moet zijn. Maak hier heldere afspraken over met de aanbieder. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-01-datakwaliteit/#risico","title":"Risico","text":"<ul> <li>Door onjuiste beslissingen van gegevens kunnen verkeerde beslissingen genomen worden. </li> <li>Het model cre\u00ebert onwenselijke systematische afwijking voor specifieke personen, groepen of andere eenheden. Dit kan leiden tot ongelijke behandeling en discriminerende effecten met eventuele schade voor betrokkenen. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-01-datakwaliteit/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, DM.9, DM.19</li> <li>Toetsingskader Algoritmes, Algemene Rekenkamder, 2.18</li> <li>NORA, Raamwerk gegevenskwaliteit</li> <li>Impact Assessment Mensenrechten en Algoritmes, 2A.2.2</li> <li>Handreiking non-discriminatie by design</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-01-datakwaliteit/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-02-fair-data/","title":"Maak waardevolle data vindbaar, toegankelijk, interoperabel en herbruikbaar (FAIR) binnen en buiten de eigen organisatie.","text":"<p>dat-02Dataverkenning en datapreparatieOntwikkelaarData</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-02-fair-data/#maatregel","title":"Maatregel","text":"<p>Maak waardevolle data vindbaar, toegankelijk, interoperabel en herbruikbaar (FAIR) binnen en buiten de eigen organisatie.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-02-fair-data/#toelichting","title":"Toelichting","text":"<p>De internationale FAIR-principes zijn richtlijnen voor de manier van beschrijven, opslag en publicatie van data. </p> <ul> <li>Findable (vindbaar): Metadata moet gemakkelijk te vinden zijn voor zowel mensen als computers.</li> <li>Accessible (toegankelijk): Gebruikers moeten weten hoe toegang tot de data verkregen kan worden (autorisatie en authenticatie)</li> <li>Interoperable (uitwisselbaar): Data moet meestal ge\u00efntegreerd worden met andere data en bijbehorden applicaties, opslag en processen.</li> <li>Reusable (herbruikbaar): Het uiteindelijke doel van FAIR is om hergebruik van data te optimaliseren.</li> </ul> <p>Wanneer je voldoet aan de 15 principes is je data 'machine actionable'. Dit maakt het mogelijk dat de data effectief gebruikt kan worden voor verschillende algoritmes.</p> <p>FAIR data betekent niet per definitie dat data open data is. Juist ook voor (privacy) gevoelige data (gesloten data) kan het heel zinvol zijn om te voldoen aan de principes voor FAIR data, om juist daarmee specifieke geautoriseerde toegang tot gevoelige data mogelijk te kunnen maken.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-02-fair-data/#15-principes-voor-fair-data","title":"15 principes voor FAIR data","text":"<p>Er zijn 15 principes voor FAIR data geformuleerd:</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-02-fair-data/#findable-vindbaar","title":"Findable (vindbaar)","text":"<ul> <li> <p>F1: Aan (meta)data wordt een wereldwijd unieke en permanente identifier toegevoegd</p> <p>Voorbeeld</p> <p>Met behulp van Persistent Identifiers (PID) zorg je ervoor dat jouw data (bijvoorbeeld onderzoeksdata) altijd vindbaar blijft.  PID's kun je vergelijken met het ISBN-nummer bij boeken. Het idee is dat ook als de locatie of de onderliggende infrastructuur verandert, de verwijzing intact blijft. </p> </li> <li> <p>F2: Data wordt beschreven met rijke metadata</p> <p>Voorbeeld</p> <p>Het team van data.overheid.nl heeft de metadata standaard DCAT-AP-DONL ontwikkeld die speciaal voor de uitwisseling van dataset informatie voor de Nederlandse situatie is ingericht. Dit is gebaseerd op de Data Catalog Vocabulary (DCAT) versie die de Europese Unie heeft opgesteld. Je kan hierover meer lezen op de site van data.overheid.nl.</p> </li> <li> <p>F3: Metadata bevat duidelijk en expliciet de identificatie van de data die ze beschrijven</p> </li> <li>F4: (Meta)data worden geregistreerd of ge\u00efndexeerd in een doorzoekbare bron </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-02-fair-data/#accessible-toegankelijk","title":"Accessible (toegankelijk)","text":"<ul> <li>A1: (Meta)data zijn opvraagbaar op basis van hun identificatiecode met behulp van een gestandaardiseerd communicatieprotocol </li> <li>A1.1: Het protocol is open, vrij en universeel implementeerbaar </li> <li>A1.2: Het protocol maakt waar nodig een authenticatie- en autorisatieprocedure mogelijk </li> <li>A2: Metadata zijn toegankelijk, ook als de data niet meer beschikbaar zijn </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-02-fair-data/#interoperable-uitwisselbaar","title":"Interoperable (uitwisselbaar)","text":"<ul> <li>I1: (Meta)data gebruikt een formele, toegankelijke, gedeelde en breed toepasbare taal voor kennisrepresentatie </li> <li> <p>I2: (Meta)data gebruikt gegevenswoordenboeken of vocabulaires die FAIR-principes volgen </p> <p>Voorbeeld woordenboek</p> <p>In het woordenboek Hitte staan ongeveer 230 definities van termen rond het thema hitte die gebruikt worden in het klimaatadaptatieveld. Dit woordenboek is ontwikkeld in opdracht van het ministerie van Infrastructuur en Waterstaat door overheidsstichting Geonovum.</p> </li> <li> <p>I3: (Meta)data bevat gekwalificeerde verwijzingen naar andere (meta)data </p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-02-fair-data/#reusable-herbruikbaar","title":"Reusable (herbruikbaar)","text":"<ul> <li>R1: (Meta)data wordt rijkelijk beschreven met een veelheid aan nauwkeurige en relevante attributen </li> <li>R1.1: (Meta)data wordt vrijgegeven met een duidelijke en toegankelijke licentie voor datagebruik </li> <li> <p>R1.2: (Meta)data wordt geassocieerd met gedetailleerde herkomst </p> <p>Voorbeeld</p> <p>PROV-DM is een conceptueel datamodel dat gebruikt kan worden voor de herkomstinformatie (provenance) van data. </p> </li> <li> <p>R1.3: (Meta)data voldoet aan domein-relevante normen </p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-02-fair-data/#bronnen","title":"Bronnen","text":"<ul> <li>GO FAIR Foundation</li> <li>3-point FAIRification framework 3PFF</li> <li>Toolbox verantwoord datagebruik, 2b</li> <li>NORA online</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-04-bewaartermijnen-persoonsgegevens/","title":"Geef data zoals persoonsgegevens een bewaartermijn met een vernietigingsprocedure","text":"<p>dat-04OntwikkelenMonitoring en beheerJuristProjectleiderTechnische robuustheid en veiligheidPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-04-bewaartermijnen-persoonsgegevens/#maatregel","title":"Maatregel","text":"<p>Bepaal de bewaartermijnen en richt een vernietigingsprocesdure in voor de verwerkte (persoons)gegevens.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-04-bewaartermijnen-persoonsgegevens/#toelichting","title":"Toelichting","text":"<ul> <li>(Persoons)gegevens die het algoritme verwerkt worden niet langer bewaard dan voor de verwezenlijking van de  verwerkingsdoeleinden noodzakelijk is.</li> <li>Beschrijf de bewaartermijnen voor de gegevens, bijvoorbeeld in een DPIA.</li> <li>Beschrijf hoe de (persoons)gegeven moeten worden vernietigd.</li> <li>Zorg ervoor dat de vereisten met betrekking tot bewaartermijnen correct zijn of worden vertaald naar het algoritme en de onderliggende (zaak)systemen.</li> <li>Controleer of deze maatregelen voor de bewaartermijnen en vernietiging van de (persoons)gegevens (in de onderliggende systemen) zijn getroffen en zorg dat dit aantoonbaar is, bijvoorbeeld met logbestanden.</li> <li>Maak aantoonbaar dat persoonsgegevens zijn vernietigd, bijvoorbeeld met logbestanden.  </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-04-bewaartermijnen-persoonsgegevens/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, PRI.11</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 3.17</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-04-bewaartermijnen-persoonsgegevens/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-05-pseudonimiseren-anonimiseren/","title":"Bescherm persoonsgegevens door data te anonimiseren, pseudonimiseren of te aggregeren","text":"<p>dat-05Dataverkenning en datapreparatieOntwikkelenOntwikkelaarJuristPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-05-pseudonimiseren-anonimiseren/#maatregel","title":"Maatregel","text":"<p>Pas maatregelen toe als pseudonimiseren, anonimisering of aggregeren van persoonsgegevens toe bij het verwerken van de data. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-05-pseudonimiseren-anonimiseren/#toelichting","title":"Toelichting","text":"<ul> <li>Als is vastgesteld welke persoonsgegevens mogen worden verwerkt voor het ontwikkelen en gebruiken van algoritmes, moet worden nagegaan of er maatregelen kunnen worden getroffen om deze te beschermen.</li> <li>Het algoritme verwerkt niet meer persoonsgegevens dan noodzakelijk; de verwerkte gegevens zijn proportioneel en substantieel.</li> <li>Hierbij kan worden gedacht aan het pseudonomiseren, anonimiseren of aggregeren van persoonsgegevens.</li> <li>Het bepalen of persoonsgegevens mogen worden verwerkt voor algoritmes moet worden bekeken in samenhang met maatregelen die kunnen worden getroffen om deze gegevens te beschermen. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-05-pseudonimiseren-anonimiseren/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Auditdienst Rijk, PRI.5</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 2.20</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-05-pseudonimiseren-anonimiseren/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-06-schending-auteursrechten/","title":"Controleer de auteursrechten van eigen data","text":"<p>dat-06OntwerpDataverkenning en datapreparatieJuristData</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-06-schending-auteursrechten/#maatregel","title":"Maatregel","text":"<p>Controleer of eventueel door de eigen organisatie verstrekte data binnen of buiten auteursrechten vallen. Bij voorkeur blijven de data eigendom van de (verstrekkende) overheidsorganisatie.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-06-schending-auteursrechten/#toelichting","title":"Toelichting","text":"<p>Het is van belang om te controleren of de te verwerken data waar overheidsorganisaties zelf over beschikken rechtmatig zijn verkregen en geen inbreuken maken op auteursrechten. Hier kan worden gedacht aan data die is gescraped van het internet en zou kunnen worden gebruikt voor de ontwikkeling van een algoritme.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-06-schending-auteursrechten/#bronnen","title":"Bronnen","text":"<p>Algoritmekader</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-06-schending-auteursrechten/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/","title":"Gebruik duurzame datacenters","text":"<p>dat-07OntwerpDataverkenning en datapreparatieOntwikkelenImplementatieMonitoring en beheerOntwikkelaarProjectleiderBeleid en adviesDuurzaamheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/#maatregel","title":"Maatregel","text":"<p>Maak gebruik van datacenters die gebruikmaken van duurzame energiebronnen en energie-effici\u00ebnte technologie\u00ebn voor de opslag en verwerking van data.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/#toelichting","title":"Toelichting","text":"<p>Door data op te slaan en algoritmes te laten draaien in datacenters die hernieuwbare energiebronnen inzetten en bijvoorbeeld de ontstane restwarmte recyclen, kun je de ecologische voetafdruk van de algoritmes aanzienlijk verkleinen. Datacenters die zich op duurzaamheid richten, verlagen de CO\u2082-uitstoot van hun infrastructuur en bieden mogelijk duurzaamheidsrapportages. Let bij het kiezen van een aanbieder op mogelijke greenwashing; dit gebeurt wanneer bedrijven beweren groen te zijn zonder dit met concrete maatregelen te onderbouwen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/#technologieen-voor-energie-efficiente-datacenters","title":"Technologie\u00ebn voor energie-effici\u00ebnte datacenters","text":"<p>Om datacenters energie-effici\u00ebnt te maken, zijn er verschillende benaderingen:</p> <ul> <li>Gebruik van groene energiebronnen: Kies voor datacenters/aanbieders die hernieuwbare energie gebruiken. Maak bijvoorbeeld afspraken over een doel, zoals een DCie-score van minimaal 50%, gewogen over een heel jaar. De DCie score van elk Overheids Datacenter (ODC) kun je hier bekijken. Je kunt ook kijken of naast duurzame stroom ook restwarmte van servers wordt benut om bijvoorbeeld nabijgelegen gebouwen te verwarmen.</li> <li>Koeling en energiebeheer optimaliseren: Adiabatische koeling, waarbij water en lucht worden gebruikt in plaats van elektriciteit, verlaagt het energieverbruik. Effici\u00ebnte stroomverdeling en warmteterugwinning dragen verder bij aan een lagere ecologische voetafdruk.</li> <li>Monitoren: Blijf controleren op duurzame prestaties door te letten op certificeringen, zoals ISO 14001, ISO 50001 en BREEAM, en vraag naar energierapportages en details over het energieverbruik en de herkomst van stroom. Dit helpt om claims van duurzaamheid te toetsen en te voorkomen dat je in greenwashing trapt.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/#risico","title":"Risico","text":"<p>Door geen gebruik te maken van duurzame datacenters, loop je het risico op een hogere CO\u2082-uitstoot, en wordt daardoor niet aangesloten bij Rijksbreed beleid. Ook loop je risico op hogere energiekosten.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/#bronnen","title":"Bronnen","text":"<ul> <li>Rijks ICT Dashboard - Duurzaamheid</li> <li>Denk Doe Duurzaam - Doelen voor ICT</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/","title":"Gebruik bij machine learning technieken gescheiden train-, test- en validatiedata en houdt rekening met underfitting en overfitting.","text":"<p>dat-07Dataverkenning en datapreparatieOntwikkelenOntwikkelaarDataTechnische robuustheid en veiligheidBias en non discriminatie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/#maatregel","title":"Maatregel","text":"<p>Indien je gebruik maakt van machine learning technieken, maak een passende keuze voor gescheiden train-, test- en validatiedata en houd hierbij rekening met underfitting en overfitting. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/#toelichting","title":"Toelichting","text":"<p>Verdeel je dataset in drie delen:</p> <ol> <li> <p>de trainingsset</p> <p>Deze dataset wordt gebruikt om het model te trainen. Uit deze dataset worden de onderliggende patronen of relaties geleerd die later gebruikt kunnen worden om voorspellingen mee te doen.</p> <p>De kwaliteit van deze dataset moet goed zijn en zo representatief mogelijk voor de doelpopulatie. Eventuele bias of vooroordelen in deze dataset kan door het trainen in het model sluipen.</p> </li> </ol> <p>Let bij het samenstellen van de traningsset op dat de data waarop het model gebaseerd is, niet beschikbaar zijn voordat de uitkomsten zijn geobserveerd. Met andere woorden, zorg ervoor de de voorspellingen geen onderdeel kunnen zijn van de inputvariabelen. </p> <ol> <li> <p>de validatieset</p> <p>De validatieset fungeert als een onafhankelijke, onbevooroordeelde dataset voor het vergelijken van de prestaties van verschillende algoritmes die zijn getraind op onze trainingsset.</p> <p>Verschillende modellen kunnen getraind worden op de trainingsdataset. Zo kan je bijvoorbeeld vari\u00ebren in de (hyper)parameters of de inputvariabelen. Dit leidt tot verschillende varianten van het model. Om de prestaties van de verschillende modellen te vergelijken, moeten we een nieuwe dataset gebruiken: de validatieset. Zou je hiervoor de trainingsdataset gebruiken, kan dat leiden tot overfitting, wanneer het model dan te specifiek afgestemd is op 1 dataset. Het model kan dan niet voldoende generaliseren voor nieuwe situaties.</p> </li> <li> <p>de testset</p> <p>Nadat er met behulp van de validatieset een keuze is gemaakt voor een passend model en bijbehorende (hyper)parameters, moet je het model nog testen op nieuwe data. Dit geeft een beeld van de werkelijke prestaties van het model in nieuwe omstandigheden. </p> <p>Let op dat je pas naar deze resultaten kijkt als laatste stap. Inzichten uit deze testdataset mogen niet worden meegenomen in de ontwikkeling, omdat dit kan leiden tot overfitting. Het model zal dan in productie mogelijk minder goed presteren. </p> </li> </ol>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/#grootte-van-de-drie-datasets","title":"Grootte van de drie datasets","text":"<p>Er is geen optimale verdeling van de drie datsets. Veelvoorkomende verhoudingen om je data in te splitten zijn:</p> <ul> <li>80% trainingsset, 10% validatieset, 10% testset</li> <li>70% trainingsset, 15% validatieset, 15% testset</li> <li>60% trainingsset, 20% validatieset, 20% testset</li> </ul> <p>Afhankelijk van de hoeveelheid beschikbare data en de context maak je hierin een keuze. Houdt hierbij rekening met:</p> <ul> <li>Hoe minder trainingdata, hoe groter de variantie van het model tijdens het trainen. De patronen en relaties die ontdekt zijn, bevatten dan een grotere onzekerheid. </li> <li>Hoe minder validatie- en testdata je gebruikt, hoe grote de variantie en de onzekerheid in de verwachte prestaties van het algoritme. </li> <li>Hoe complexer het model, en hoe meer (hyper)parameters er zijn om te optimaliserne, hoe groter de validatieset moet zijn om het model met optimale presetaties te vinden. Wanneer er weinig hyperparameters zijn, is een relatief kleine validatieset vaak voldoende.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/#k-fold-cross-validation","title":"k-fold cross validation","text":"<p>Naast dat je de datasets willekeurig kan verdelen in drie delen (aselect), kan je ook meer geavanceerde technieken gebruiken. Een robuuste en veelgebruikte techniek is k-fold cross validation, waarbij het model k keer wordt getraind op verschillende delen van de data. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/#risico","title":"Risico","text":"<p>Door onjuiste training van het model presteert het model in de praktijk minder goed dan bij de tests. Als trainings-, validatie- en testdata door elkaar lopen (\"data leakage\"), kan dit leiden tot overfitting, waardoor het model beter lijkt te presteren dan in werkelijkheid het geval is.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Auditdienst Rijk, DM.5, DM.6</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 2.15, 2.21 </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-08-eigenaarschap-data/","title":"Zorg dat je controle of eigenaarschap hebt over de data","text":"<p>dat-08Dataverkenning en datapreparatieProjectleiderDataPublieke inkoop</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-08-eigenaarschap-data/#maatregel","title":"Maatregel","text":"<p>De organisatie heeft volledige controle of eigenaarschap over de data. Wanneer dit niet mogelijk is, zijn afspraken gemaakt om de functionele eisen te waarborgen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-08-eigenaarschap-data/#toelichting","title":"Toelichting","text":"<p>Wanneer een algoritme ontwikkeld of ingekocht wordt, is het belangrijk om toegang tot de gebruikte data goed te regelen. Maak bijvoorbeeld afspraken over wie ervoor zorgt dat de data:</p> <ul> <li>op een centrale plek beschikbaar wordt gesteld</li> <li>van voldoende kwaliteit is</li> <li>goed beveiligd is</li> </ul> <p>Wanneer een algoritme wordt ontwikkeld door een derde partij en dus niet wordt beheerd door de eigen organisatie, maak je duidelijke afspraken over eigenaarschap van de data. Dat geldt zowel voor de inputdata als de outputdata.  Zorg dat de inputdata tot je beschikking blijft, zodat resultaten altijd reproduceerbaar zijn. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-08-eigenaarschap-data/#risico","title":"Risico","text":"<p>De organisatie is afhankelijk voor de data of het model afhankelijk van derden en kan daardoor reproduceerbaarheid en prestatie niet garanderen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-08-eigenaarschap-data/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Auditdienst Rijk, DM.23</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-08-eigenaarschap-data/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-09-dataminimalisatie/","title":"Beperk de omvang van datasets voor energie-effici\u00ebntie","text":"<p>dat-09Dataverkenning en datapreparatieOntwikkelenOntwikkelaarProjectleiderDataDuurzaamheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-09-dataminimalisatie/#maatregel","title":"Maatregel","text":"<p>Houd datasets beperkt tot het noodzakelijke en voldoende specifiek om onnodige energieconsumptie te voorkomen tijdens de verwerking en opslag van data voor algoritmes. We noemen dit ook wel dataminimalisatie.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-09-dataminimalisatie/#toelichting","title":"Toelichting","text":"<p>Hoe meer je bewaart, hoe meer ruimte dat kost om op te slaan. Bovendien verbruikt elk apparaat dat nodig is om data op te slaan stroom. Dat heeft grote invloed op de CO\u2082-uitstoot van een datacentrum. Grote datasets brengen daarom hoge energie- en opslagkosten met zich mee. Door de dataset bewust te beperken tot relevante gegevens, kun je ook de energie-effici\u00ebntie van algoritmes aanzienlijk verbeteren. Vooral bij de ontwikkeling van AI-systemen kan het verminderen van data bijdragen aan lagere energiebehoeften en CO\u2082-uitstoot.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-09-dataminimalisatie/#technieken-voor-dataminimalisatie","title":"Technieken voor dataminimalisatie","text":"<ul> <li>Slimme selectie van trainingsdata: Gebruik methoden die irrelevante data uit de dataset filteren, zoals dataselectie-algoritmes en sampling-technieken. Door te focussen op relevante data, beperk je de omvang zonder de prestaties van het model te be\u00efnvloeden.</li> <li>Verwijderen van redundante en dubbele data: Deduplicatie van data minimaliseert onnodige verwerkingskracht. Door alleen unieke en relevante gegevens op te slaan, wordt de opslagbehoefte verder beperkt.</li> <li>Opschonen en archiveren van verouderde data: Regelmatige archivering of verwijdering van verouderde data in je dataset zorgt voor een verminderde voetafdruk en verhoogt ook de effici\u00ebntie.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-09-dataminimalisatie/#risico","title":"Risico","text":"<p>Zonder dataminimalisatie loopt je organisatie het risico op onnodig hoge energie- en opslagkosten, en een grotere ecologische impact.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/3-dat-09-dataminimalisatie/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Auditdienst Rijk, PRI.5</li> <li>Rijks ICT-dashboard</li> <li>Sustainable artificial intelligence \u2013 TU Delft</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-01-security-by-design/","title":"Ontwerp en ontwikkel het algoritme volgens de principes van \u2018security by design\u2019","text":"<p>owk-01OntwikkelenProjectleiderOntwikkelaarTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-01-security-by-design/#maatregel","title":"Maatregel","text":"<p>Hanteer principes van \u2018security by design\u2019 (informatiebeveiligingsmaatregelen) als uitgangspunten bij de ontwikkeling van het algoritme. Stel vast welke principes horen bij security by design en welke relevant zijn voor het ontwerp of de ontwikkeling van het algoritme. Mogelijke documenten waarin deze principes kunnen worden opgenomen, zijn het security beleid, of ontwikkelbeleid. Bij het bepalen en vaststellen van de juiste principes kunnen interviews met de ontwikkelaar en software-architecten helpen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-01-security-by-design/#toelichting","title":"Toelichting","text":"<p>Security by design is gehanteerd en terug te zien als uitgangspunt. (BIO 14.2.1.1) </p> <p>Security by design benadrukt het belang van het in een vroeg stadium integreren van securitymaatregelen. Op die manier kan worden voldaan aan regelgeving, maar wordt de weerbaarheid tegen bijvoorbeeld cyberaanvallen verhoogd. In een vroeg stadium nadenken over security betekent dat vroeg al de benodigde expertise wordt betrokken, zoals een security-officer.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-01-security-by-design/#risico","title":"Risico","text":"<p>Wanneer tijdens het ontwerp en de inrichting van het algoritmisch systeem niet voldoende rekening wordt gehouden met vastgestelde security-by-design principes kan dit leiden tot een onvoldoende veilige (software-)omgeving. Dit kan tot gevolg hebben: oneigenlijke toegang, wijzigingen of vernietigingen van het algoritme, de data of uitkomsten van het algoritme.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-01-security-by-design/#bronnen","title":"Bronnen","text":"<ul> <li>Baseline Informatiebeveiliging Overheid, (BIO 14.2.1.1)</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, IB.28</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 4.09</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-01-security-by-design/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-02-stopzetten-gebruik/","title":"Maak een noodplan voor het stoppen van het algoritme","text":"<p>owk-02OntwikkelenImplementatieProjectleiderOntwikkelaarGovernanceMenselijke controle</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-02-stopzetten-gebruik/#maatregel","title":"Maatregel","text":"<p>Tref (technische) maatregelen waarmee het gebruik van het algoritme kan worden stopgezet.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-02-stopzetten-gebruik/#toelichting","title":"Toelichting","text":"<ul> <li>Er moet in een proces zijn beschreven wanneer en hoe het gebruik van algoritmes moet worden stopgezet.</li> <li>Het is van belang dat bij het ontwerp van algoritmes er rekening wordt gehouden met dat het werkproces ook zonder het algoritme kan worden uitgevoerd.</li> <li>In het geval van risicoselectie kan er bijvoorbeeld worden teruggevallen op het enkel uitvoeren van een aselecte steekproef als selectieinstrument. </li> <li>Als blijkt dat het algoritme ongewenst functioneert, dan moeten (technische) maatregelen zijn getroffen waarmee het gebruik daadwerkelijk kan worden stopgezet. Denk hierbij aan een stopknop en werkinstructies hoe het gebruik kan worden be\u00ebindigd.</li> <li>Maak aantoonbaar dat deze maatregelen zijn getroffen.</li> <li>De proceseigenaar of een menselijk toezichthouder moet in staat zijn om het algoritme op elk moment te kunnen be\u00ebindigen.</li> <li>Het stopzetten van het gebruik van een algoritme mag niet tot gevolg hebben dat betrokkenen niet meer kunnen achterhalen hoe besluiten tot stand zijn gekomen of dat gevolgen niet meer kunnen worden gecorrigeerd als dat noodzakelijk is. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-02-stopzetten-gebruik/#risico","title":"Risico","text":"<p>Betrokkenen of belanghebbenden kunnen nadelige gevolgen ondervinden van een algoritme dat onjuist functioneert en niet tijdig kan worden stopgezet.  </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-02-stopzetten-gebruik/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.18, SV.17 </li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 1.03</li> <li>Impact Assessment Mensenrechten en Algoritmes, 1.5</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-02-stopzetten-gebruik/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-03-privacyrisico/","title":"Analyseer de privacy-risico\u2019s en neem maatregelen om deze risico\u2019s laag te houden","text":"<p>owk-03OntwerpOntwikkelenMonitoring en beheerProjectleiderJuristPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-03-privacyrisico/#maatregel","title":"Maatregel","text":"<p>Uitvoeren risicoanalyse en formuleren mitigerende maatregelen voor privacyrisico.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-03-privacyrisico/#toelichting","title":"Toelichting","text":"<ul> <li>Verifieer of een DPIA is uitgevoerd over het werkproces dat wordt of zal worden ondersteund met een algoritme. Zo nee, voer een risico analyse (DPIA) uit om de risico's voor de rechten en vrijheden van betrokkenen met de inzet van algoritmes in beeld te brengen.</li> <li>Organisatorische en technische maatregelen moeten worden getroffen om persoonsgegevens bij de ontwikkeling en het gebruik van het algoritme te beschermen.</li> <li>Beleg de mitigerende maatregelen bij betrokken actoren. Denk bijvoorbeeld aan het toekennen van de maatregelen als anonimiseren en pseudonimiseren van persoonsgegevens aan een data engineer, voordat deze kunnen worden gebruikt ten behoeve van het ontwikkelen of controleren van het algoritme.</li> <li>Bepaal welke maatregelen moeten zijn gerealiseerd voordat mag worden gestart met de verwerking van de persoonsgegevens en welke moeten worden gemonitord.  </li> <li>Monitor de voortgang op het realiseren van de maatregelen en zorg voor bewijsstuken als deze zijn gerealiseerd. Deze bewijsstukken kunnen onderdeel worden van een audit.</li> <li>Als er een noodzaak is om na verloop van tijd meer persoonsgegevens te verwerken of om andere verwerkingen uit te voeren, zal opnieuw een beoordeling moeten plaatsvinden of er privacyrisico's ontstaan en hoe deze kunnen worden gemitigeerd. Gedurende de levenscyclus van het algoritme moet aandacht blijven voor het uitvoeren van de risicoanalyse voor privacyrisico's.</li> <li>Bij hoge risico's voor het verwerken van persoonsgegevens is een voorafgaande raadpleging bij de Autoriteit Persoonsgegevens onder artikel 36 AVG verplicht. Bepaal of raadpleging noodzakelijk is. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-03-privacyrisico/#risico","title":"Risico","text":"<p>Privacyrisico's met de inzet van algoritmes worden niet gemitigeerd, waardoor privacyrechten van betrokkenen worden geschonden. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-03-privacyrisico/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, PRI.2, PRI.3</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 3.03</li> <li>Besluit inzake lijst van verwerkingen van persoonsgegevens waarvoor een gegevensbeschermingseffectbeoordeling (DPIA) verplicht is, Autoriteit Persoonsgegevens</li> <li>Model DPIA Rijksdienst</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-03-privacyrisico/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-04-logging/","title":"Maak logbestanden waarin staat wie wanneer toegang had tot de data en de code","text":"<p>owk-04OntwikkelenMonitoring en beheerOntwikkelaarTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-04-logging/#maatregel","title":"Maatregel","text":"<p>Zorg ervoor dat logbestanden worden gecre\u00eberd waarin informatie wordt geregistreerd over gebruikersactiviteiten, uitzonderingen en informatiebeveiligingsgebeurtenissen. Door goede logging is te achterhalen wanneer en door wie er toegang is geweest tot code en data (audit trail). Er kan loginformatie gegenereerd, bewaard, toegankelijk gemaakt en gemonitord worden. Logbestanden bevatten vaak gebeurtenissen die gebruikersactiviteiten, uitzonderingen en informatiebeveiligingsgebeurtenissen registreren. Bedenk wat deze informatie betekent in de context van de werking van het algoritme.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-04-logging/#toelichting","title":"Toelichting","text":"<ul> <li>Met logbestanden is te achterhalen wanneer en door wie er (ongewenste) aanpassingen zijn gedaan (audit trail).</li> <li>Loginformatie moet worden gegenereerd, bewaard, gemonitord en toegankelijk worden gemaakt.</li> <li>Logbestanden bevatten vaak gebeurtenissen die gebruikersactiviteiten, uitzonderingen en informatiebeveiligingsgebeurtenissen registreren.</li> <li>Bedenk wat deze informatie betekent in de context van de werking van het algoritme. loginformatie gegenereerd, bewaard, toegankelijk gemaakt en gemonitord worden. Logbestanden bevatten vaak gebeurtenissen die gebruikersactiviteiten, uitzonderingen en informatiebeveiligingsgebeurtenissen registreren.</li> <li>Stel vast welke informatie bij het ontwikkelen en gebruiken van algoritmes relevant is om te loggen. </li> <li>Log behalve het aanpassen van gegevens ook het uitlezen van gegevens waar dat relevant is. Bijvoorbeeld als persoonsgegevens worden opgevraagd.</li> <li>Logs dienen periodiek (of doorlopend) gecontroleerd to worden op relevante incidenten. Dat betekent dat wat er gelogd wordt geschikt moet zijn om relevante beveiligingsincidenten op te merken. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-04-logging/#risico","title":"Risico","text":"<p>Wanneer loginformatie ontbreekt, is niet te achterhalen wanneer er (eventueel ongewenste) aanpassingen zijn gedaan (audit trail) op (de code van) het algoritme, of door wie.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-04-logging/#bronnen","title":"Bronnen","text":"<ul> <li>Baseline Informatiebeveiliging Overheid, BIO 12.3.1.1, 12.3.1.4, 12.3.1.5, 12.4.1.1, 12.4.2.2</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, IB.27</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 4.06</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-04-logging/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-05-energiezuinige-programmeermethoden/","title":"Kies energiezuinige programmeermethoden","text":"<p>owk-05OntwikkelenOntwikkelaarDuurzaamheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-05-energiezuinige-programmeermethoden/#maatregel","title":"Maatregel","text":"<p>Gebruik energie-effici\u00ebnte programmeertechnieken en methoden die de benodigde rekenkracht minimaliseren.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-05-energiezuinige-programmeermethoden/#toelichting","title":"Toelichting","text":"<p>Energiezuinig programmeren maakt het mogelijk om de voetafdruk van algoritmes te verkleinen door minder energie en middelen te verbruiken. Door specifieke technieken toe te passen, zoals optimalisatie van processen en effici\u00ebnte geheugenbeheerstrategie\u00ebn, kun je als ontwikkelaar bijdragen aan het verduurzamen van algoritmes.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-05-energiezuinige-programmeermethoden/#technieken-voor-energiezuinige-softwareontwikkeling","title":"Technieken voor energiezuinige softwareontwikkeling","text":"<ol> <li> <p>Lean coding en minimalisatie van code bloat    Lean coding richt zich op het gebruik van alleen de benodigde code zonder overbodige complexiteit of libraries, wat resulteert in lagere energieconsumptie. Door \u201ccode bloat\u201d te vermijden, zorg je ervoor dat het algoritme minder verwerkingskracht en geheugen verbruikt.</p> </li> <li> <p>Gebruik van energiezuinige programmeertalen en frameworks    Programmeren in talen zoals Rust, Go en Elixir draagt bij aan energie-effici\u00ebntie doordat deze ontworpen zijn voor lage resource-omvang en hoge effici\u00ebntie. Ook frameworks die lichtgewicht en modulair zijn, ondersteunen energiezuinige processen.</p> </li> <li> <p>Parallel processing en multi-core optimalisaties    Door parallelle verwerking en multi-core optimalisaties toe te passen, wordt rekenwerk verdeeld over meerdere cores. Dit reduceert de totale verwerkingstijd, bespaart energie en verhoogt de prestaties van je code op het vlak van duurzaamheid.</p> </li> <li> <p>Microservices en modulaire architecturen    Een modulaire architectuur, zoals microservices, zorgt ervoor dat je onderdelen van de applicatie alleen activeert wanneer dat nodig is. Dit voorkomt onnodige belasting en beperkt energieverbruik behoorlijk.</p> </li> <li> <p>Geoptimaliseerd geheugenbeheer    Door effici\u00ebnt geheugenbeheer, zoals caching en lazy loading, voorkom je onnodige data-opslag en bewerkingen. Dit verlaagt de energievraag en verbetert de snelheid van het algoritme aanzienlijk.</p> </li> </ol>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-05-energiezuinige-programmeermethoden/#risico","title":"Risico","text":"<p>Zonder energie-effici\u00ebnte methoden kan het algoritme onnodig veel energie verbruiken, wat leidt tot hogere operationele kosten en een grotere milieu-impact.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-05-energiezuinige-programmeermethoden/#bronnen","title":"Bronnen","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-05-energiezuinige-programmeermethoden/#voorbeeld","title":"Voorbeeld","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-06-optimaliseer-AI-training/","title":"Optimaliseer AI-trainingsprocessen voor energie-effici\u00ebntie","text":"<p>owk-06OntwikkelenOntwikkelaarDuurzaamheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-06-optimaliseer-AI-training/#maatregel","title":"Maatregel","text":"<p>Streef naar energiezuinige methoden voor AI-training, zoals het beperken van trainingscycli en het gebruik van energie-effici\u00ebnte hardware.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-06-optimaliseer-AI-training/#toelichting","title":"Toelichting","text":"<p>Het trainen van AI, vooral generatieve AI-modellen, vergt aanzienlijke energie en heeft daardoor een grote ecologische voetafdruk. Een enkele trainingsronde kan al een enorme hoeveelheid CO\u2082 uitstoten. Door enkele concrete methoden toe te passen, kun je deze impact beperken.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-06-optimaliseer-AI-training/#energie-optimalisatie-door-hardwarekeuze-en-serverbeheer","title":"Energie-optimalisatie door hardwarekeuze en serverbeheer","text":"<ul> <li>Gebruik energie-effici\u00ebnte hardware zoals specifiek afgestemde GPU's, die geschikt zijn voor de trainingsbehoeften van het model. Door bijvoorbeeld te kiezen voor GPU\u2019s die optimaal bij je model passen in plaats van de krachtigste beschikbare hardware, kan het energieverbruik drastisch worden verminderd. Houd hiermee rekening in je keuze voor een trainingsomgeving.</li> <li>Verder kan servergebruik geoptimaliseerd worden door onnodige trainingsomgevingen tijdig te stoppen of voor andere trainingsomgevingen of testomgevingen te kiezen. Ook kun je servers dynamisch schalen met tools zoals Kubernetes of autoscaling technologie.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-06-optimaliseer-AI-training/#slimme-data-en-trainingsoptimalisatie","title":"Slimme data- en trainingsoptimalisatie","text":"<p>Niet alle beschikbare data dragen bij aan de modelprestaties. Door een dataselectiestrategie toe te passen, gebruik je enkel relevante datasets (dataminimalisatie), wat zorgt voor minder intensieve rekenbelasting tijdens het trainingsproces. Daarnaast kan slimme caching helpen om repetitieve data-opvragingen te beperken, wat bijdraagt aan een lagere energievraag. Bovendien kun je hertrainingscycli van AI beperken door enkel updates te doen wanneer nieuwe data dit echt vereist. Dit voorkomt overbodige trainingscycli en bespaart energie.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-06-optimaliseer-AI-training/#risico","title":"Risico","text":"<p>Zonder energie-effici\u00ebnte methoden kan AI-training leiden tot hoge operationele kosten en een aanzienlijke ecologische impact, met name door overmatig gebruik van rekenkracht en energie-intensieve hardware.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-06-optimaliseer-AI-training/#bronnen","title":"Bronnen","text":"<ul> <li>How to Make Generative AI Greener - Harvard Business Review</li> <li>GreenOps: 4 Tips om AI-training duurzamer te maken - AG Connect</li> <li>Duurzame kunstmatige intelligentie - TU Delft</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/4-owk-06-optimaliseer-AI-training/#voorbeeld","title":"Voorbeeld","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/","title":"Controleer regelmatig of het algoritme werkt zoals het bedoeld is","text":"<p>ver-01OntwikkelenVerificatie en validatieMonitoring en beheerProjectleiderOntwikkelaarTechnische robuustheid en veiligheidBias en non discriminatie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/#maatregel","title":"Maatregel","text":"<p>Stel vast dat het algoritme voortdurend functioneert in lijn met de vastgestelde doelstelling. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/#toelichting","title":"Toelichting","text":"<ul> <li>Vertaal de vastgestelde doelstelling naar functionele eisen voor het algoritme. Werk het vastgestelde doel uit in een beschrijving in logische taal/pseudo code of documentatie die handvatten biedt aan de ontwikkelaar. </li> <li>Monitor de mate waarin aan deze eisen wordt voldaan door het algoritme. </li> <li>Bepaal en leg vast hoe eventuele parameters, business rules en indicatoren bepaald worden. Zorg dat dit breed wordt afgestemd in de organisatie (ontwikkelteam, opdrachtgevers en beheer).</li> <li>Houd hier rekening met eventuele (statistische) bias: meten we daadwerkelijk wat we denken te meten? </li> <li>Wanneer het algoritme meerdere doelen dient, is het belangrijk ook te evalueren op meerdere functionele eisen. </li> <li>Wanneer er sprake is van een (handmatige) behandeling, bepaal dan wanneer deze behandeling als 'succesvol' gezien kan worden. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/#risico","title":"Risico","text":"<p>Het algoritme functioneert niet in lijn met geformuleerde doelstellingen. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/#bronnen","title":"Bronnen","text":"<ul> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 2.01, 2.07 </li> <li>Impact Assessment Mensenrechten en Algoritmes, 1 </li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, DM.1, DM.4 </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/","title":"Toets het algoritme op bias","text":"<p>ver-01OntwerpVerificatie en validatieMonitoring en beheerProjectleiderBeleid en adviesOntwikkelaarJuristBias en non discriminatie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/#maatregel","title":"Maatregel","text":"<p>Analyseer of het gebruik van het algoritme of het proces daaromheen leidt tot onwenselijke of onrechtmatige verschillen in de behandeling van individuen en/of groepen.  </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/#toelichting","title":"Toelichting","text":"<p>Het uitvoeren van een analyse over onwenselijke of onrechtmatige verschillen bestaat grofweg uit 3 stappen:</p> <ul> <li>Stap 1: Analyseer of er sprake is van bias: systematisch verschil in behandeling van bepaalde objecten, mensen of groepen in vergelijking met anderen.</li> <li>Stap 2: Voer een rechtvaardigingstoets uit om te bepalen of het geconstateerde verschil uit stap 1 te rechtvaardigen is. </li> <li>Stap 3: Voer een ethische wenselijkheidstoets uit om te bepalen of het geconstateerde verschil uit stap 1 ethisch wenselijk is. </li> </ul> <p>Voor alle stappen geldt dat het belangrijk is om de gemaakte keuzes en afwegingen zorgvuldig te onderbouwen en te documenteren. De 3 stappen worden hieronder verder toegelicht. </p> <p>Opmerking</p> <p>Deze maatregel is in ieder geval van toepassing op natuurlijke personen. Voor andere rechtspersonen zoals bedrijven kan dit ook van toepassing zijn. Denk bijvoorbeeld aan een gelijke behandeling tussen eenmanszaken en grotere bedrijven. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/#stap-1-analyseer-of-er-sprake-is-van-bias","title":"Stap 1: Analyseer of er sprake is van bias","text":"<p>In deze stap is het doel om te bepalen in welke mate er sprake is van een systematisch verschil in behandeling van bepaalde objecten, mensen of groepen in vergelijking met anderen.  Dit verschil kan zowel op een directe als een indirecte manier ontstaan. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/#toetsen-op-direct-onderscheid","title":"Toetsen op direct onderscheid","text":"<p>Toetsen op direct onderscheid is in vergelijking tot toetsen op indirect onderscheid relatief eenvoudig. </p> <p> Bepaal of de inputvariabelen die gebruikt worden leiden tot een direct onderscheid op basis van godsdienst, levensovertuiging, politieke gezindheid, ras, geslacht, nationaliteit, hetero- of homoseksuele gerichtheid<sup>1</sup> of burgelijke staat. </p> <p>Het is niet mogelijk om een uitputtend overzicht te geven van alle selectiecriteria die mogelijk tot direct onderscheid op grond van ras of nationaliteit kunnen leiden.  Wel zijn in de jurisprudentie verschillende voorbeelden en aanknopingspunten te vinden.  Zo staat vast dat selectie op basis van fysieke etnische kenmerken, zoals huidskleur, direct onderscheid op grond van ras oplevert<sup>2</sup>. Een ander voorbeeld is dat onderscheid op grond van een niet-westers klinkende naam direct onderscheid op grond van afkomst (en dus ras) oplevert<sup>3</sup>.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/#toetsen-op-indirect-onderscheid","title":"Toetsen op indirect onderscheid","text":"<p>Ook selectiecriteria die op het eerste gezicht geen enkele link lijken te hebben met een discriminatiegrond kunnen leiden tot indirect onderscheid op grond van een discriminatiegrond.  Enkele voorbeelden van zulke 'ogenschijnlijk neutrale' selectiecriteria die verband hebben met ras of nationaliteit zijn: postcode, hoogte van het inkomen, kenteken, familielid in het buitenland, laaggeletterdheid.  Indirect onderscheid is in vergelijking met direct onderscheid lastiger op te signaleren en te voorkomen.  Daarom is het belangrijk jouw algoritmische toepassing regelmatig te analyseren op eventueel indirect onderscheid.  Het toetsen op indirect onderscheid bestaat uit 5 stappen:</p> <ol> <li> <p>Bepaal wat de kwetsbare groepen zijn. Eventueel kan dit aangevuld worden op basis van de discriminatiegronden uit non-discriminatie wetgeving. Of andere groepen waarvoor verschillen in behandeling ethisch onwenselijk zijn.</p> </li> <li> <p>Bepaal wat \"verschillen in behandeling\" betekent in de context van het algoritme. In deze stap is het belangrijk om voorafgaand aan de daadwerkelijke analyse met een brede groep stakeholders te bepalen wat 'eerlijk' en 'rechtvaardig' wordt bevonden in de context van het betreffende algoritme.  Er zijn veel verschillende manieren waarop je kan kijken naar onderscheid bij het gebruik van algoritmes. Voorbeelden van manieren waarop je naar onderscheid kan kijken zijn:</p> <ul> <li>Onderscheid op basis van gelijke uitkomsten (representatie).  De belangrijkste vraag die hier mee beantwoord wordt is: hebben personen uit verschillende groepen gelijke kans om geselecteerd te worden door het algoritme? Of is er sprake van een over- of ondervertegenwoording van bepaalde groepen in de selectie ten opzichte van de betreffende populatie?</li> <li>Onderscheid op basis van gelijke prestaties (fouten).  De belangrijkste vraag die hier mee beantwoord wordt is: presteert het algoritme gelijk voor personen uit verschillende groepen? Met andere woorden: maakt het algoritme vaker fouten bij bepaalde groepen? Dat kan er eventueel toe leiden dat bepaalde groepen vaker onterecht wel of niet geselecteerd worden door het algoritme. </li> </ul> <p>Om te toetsen of er sprake is van onderscheid op basis van gelijke prestaties, is het noodzakelijk om de prestaties van het algoritme goed te analyseren.  In het geval van classificatie is het daarvoor nodig om een zogeheten confusion matrix op te stellen.  Een confusion matrix is een tabel waarin de voorspellingen van het algoritme worden vergeleken met de werkelijke waarden (de ground truth). </p> <p>De verschillende maten/metrieken waarop gekeken kan worden naar onderscheid, worden in de (wetenschappelijke) literatuur ook wel fairness metrieken genoemd.  Veel van deze metrieken kunnen op basis van de confusion matrix berekend worden.  Een hulpmiddel om de meest passende metrieken te kiezen in jouw situatie is de Fairness tree. </p> <p>Door te denken vanuit verschillende perspectieven, zullen er in de praktijk meerdere metrieken van belang zijn.  Het kan echter voorkomen dat deze metrieken elkaar tegenspreken.  Maak een duidelijke prioritering van de verschillende metrieken om afwegingen te maken tussen de verschillende opvattingen van eerlijkheid. </p> </li> <li> <p>Verzamel de benodigde data die nodig is om bovenstaande groepen te bepalen. Bepaal welke data benodigd is om te analyseren of er verschillen zijn tussen bepaalde groepen.  In veel gevallen zal data benodigd zijn die demografische en beschermde kenmerken van groepen omschrijft.  Het verzamelen en verwerken van deze data kan in strijd zijn met privacy vereisten uit bijvoorbeeld de Algemene Verordening Gegevensbescherming. Het is daarom van belang om duidelijk afwegingen te maken tussen privacy en het analyseren van bias die rekening houdt met de juridische en ethische vereisten.</p> <p>Uitzondering voor hoog risico AI-systemen</p> <p>De AI-verordening biedt een uitzondering voor het verwerken van bijzondere categorie\u00ebn persoonsgegevens voor het monitoren, opsporen en corrigeren van bias bij AI-systemen met een hoog risico. Zie artikel 10.5, AI-verordening. </p> <p>Om de data op een veilige en rechtmatige manier te gebruiken voor een biasanalyse dient de data van voldoende kwaliteit te zijn.  Denk hier goed na of de data eventuele bias bevat die kan duiden op een bepaalde vooringenomenheid in de biasanalyse zelf (historische bias of representatie bias).  De data dient bijvoorbeeld voldoende actueel en volledig te zijn.</p> <p>Voor sommige groepen zal het onmogelijk zijn om te beschikken over data van voldoende kwaliteit om zorgvuldig te toetsen op bias.  De laaggeletterdheid van burgers of personen is bijvoorbeeld lastig meetbaar en in veel gevallen niet beschikbaar.  Bepaal in zo'n situatie of er andere mogelijkheden zijn deze groepen te helpen, of dat er andere mogelijkheden zijn om eventuele ongelijke behandeling bij deze groepen te constateren.  Bijvoorbeeld door hierop te monitoren in de klacht- en bezwarenprocedure. </p> </li> <li> <p>Bereken de verschillen in behandeling en/of uitkomsten van het algoritme. Er zijn verschillende open source softwarepakketten die je hierbij kunnen ondersteunen, zoals fairlearn, Aequitas, fairml, fairness of AI Fairness 360.</p> </li> <li> <p>Probeer te verklaren hoe het geconstateerde onderscheid is ontstaan. Als er in de vorige stap een significant onderscheid is geconstateerd, is het belangrijk om na te gaan hoe dit onderscheid is ontstaan.  Dit kan bijvoorbeeld ontstaan door:</p> <ul> <li>een vorm van bias in de onderliggende inputdata. Je kan hierbij denken aan: <ul> <li>historische bias: in hoeverre beschrijft de data de huidige situatie?</li> <li>representatie bias: is de data waarop getraind wordt representatief voor de bijbehorende populatie? Zijn trends uit de gebruikte data generaliseerbaar naar de totale populatie?</li> <li>meetbias: beschrijven de inputvariabelen wel wat ze moeten beschrijven? In hoeverre zijn dit benaderingen waarbij eventuele factoren worden weggelaten?</li> </ul> </li> <li>een vorm van bias in het proces na afloop van het algoritme<ul> <li>is er sprake van automatiseringsbias of bevestigingsbias in de (handmatige) beoordeling?</li> </ul> </li> </ul> </li> </ol> <p> Wanneer duidelijker is hoe de geconstateerde bias is ontstaan, is het goed om te verkennen of er mogelijkheden zijn om dit (in de toekomst) te voorkomen. </p> <p>Het is belangrijk hier een brede groep aan belanghebbenden bij te betrekken.  De oorzaken van bias komen uit de 'echte wereld', waarbij patronen in datasets historische, demografische en sociale verschillen weerspiegielen.  Het verklaren en voorkomen van bias vraagt daarmee niet alleen om technische oplossingen, maar het is belangrijk de hele socio-technische omgeving waarin het algoritme wordt ingezet mee te nemen. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/#stap-2-voer-een-rechtvaardigingstoets-uit","title":"Stap 2: Voer een rechtvaardigingstoets uit","text":"<p>Wanneer er in Stap 1 is geconstateerd dat er sprake is van een onderscheid, dient de volgende vraag beantwoord te worden:</p> <p>Valt dit onderscheid te rechtvaardigen?</p> <p>Een geconstateerd systematisch onderscheid is niet altijd fout en is niet altijd verboden, maar het vraagt wel altijd om aandacht en zorgvuldigheid.  Het geconstateerde onderscheid kan in bepaalde situaties en onder bepaalde strikte voorwaarden gerechtvaardigd zijn:</p> <ul> <li>Voor direct onderscheid kan er bijvoorbeeld sprake zijn van een wettelijke uitzondering die het gemaakte onderscheid toelaat. </li> <li>Voor indirect onderscheid geldt dat behalve een wettelijke uitzondering er ook een objectieve rechtvaardiging kan bestaan, waarmee het geconstateerde onderscheid in bepaalde gevallen toelaatbaar kan zijn. </li> </ul> <p>Twee subvragen die hierbij beantwoord moeten worden zijn:</p> <ul> <li>streeft het in te zetten algoritme een legitiem doel na?</li> <li>bestaat er een redelijke relatie van evenredigheid tussen het gebruikte algoritme en de nagestreefde doelstelling?</li> </ul> <p>Wanneer er geen rechtvaardiging is voor het gemaakte onderscheid, spreken we van een verboden direct of indirect onderscheid, ofwel discriminatie.  Het algoritme mag in dat geval niet gebruikt worden.</p> <p>Voor meer toelichting over het uitvoeren van een rechtvaardigingstoets, verwijzen we naar het rapport Discriminatie door risicoprofielen - Een mensenrechtelijk toetsingskader van het College voor de Rechten van de Mens. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/#stap-3-voer-een-ethische-wenselijkheidstoets-uit","title":"Stap 3: Voer een ethische wenselijkheidstoets uit","text":"<p>Bepaal of het geconstateerde onderscheid uit Stap 1 ethisch wenselijk is. Dit hangt samen met de algemene wenselijkheid van de inzet van het algoritme.  </p> <p>In sommige gevallen kan het zo zijn dat ondanks dat er een objectieve rechtvaardiging bestaat voor het gemaakte onderscheid, dit vanuit ethisch perspectief toch onwenselijk is.  Bepaal met een grote groep belanghebbenden wat eventuele (nadelige) effecten van het gemaakte onderscheid kunnen zijn, of jullie dit eerlijk vinden en of er eventuele alternatieven zijn. </p> <p>Opmerking</p> <p>De bepaling over wat eerlijk is en wat ethisch wenselijk is kan in sommige gevallen ook politiek bevonden worden. Houd hier rekening met de politiek-bestuurlijke verantwoordelijkheden en zorg indien nodig dat de politiek-bestuurlijke verantwoordelijkhden duidelijk zijn. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/#risico","title":"Risico","text":"<p>Wanneer er geen zorgvuldige analyse naar (onwenselijke) bias is uitgevoerd, bestaat het risico dat het gebruik van het algoritme discriminerende effecten met zich meebrengt.  Dit kan leiden tot een ongelijke behandeling van burgers met eventuele schade voor betrokkenen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/#bronnen","title":"Bronnen","text":"<ul> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 2.19, 3.08</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, DM.16, DM.17, DM.18, DM.20, DM.21, DM.22 </li> <li>Discriminatie door risicoprofielen - Een mensenrechtelijk toetsingskader, College voor de Rechten van de Mens</li> <li>Handreiking non-discriminatie by design</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/#voorbeelden","title":"Voorbeelden","text":"<ul> <li>Addendum Vooringenomenheid voorkomen, Algorithm Audit met bijbehorende data en broncode op Github</li> <li>Onderzoek misbruik uitwonendenbeurs, PricewaterhouseCoopers</li> <li>Pilot Slimme Check, Gemeente Amsterdam</li> <li>Bias toetsing 'Kort Verblijf Visa' aanvragen, Rijks ICT Gilde</li> <li>Report on Algorithmic bias assesment, SigmaRed</li> </ul> <ol> <li> <p>Er is een wetsvoorstel om de term 'hetero- of homoseksuele gerichtheid' in de Algmemene wet gelijke behandeling (Awgb) te wijzigingen in 'seksuele gerichtheid'. Met deze wijziging sluit de Awgb aan bij een eerdere wijziging van artikel 1 van de Grondwet.\u00a0\u21a9</p> </li> <li> <p>Zie Discriminatie door risicoprofielen, een mensenrechtelijk toetsingskader, College voor de Rechten van de Mens \u21a9</p> </li> <li> <p>Zie Discriminatie door risicoprofielen, een mensenrechtelijk toetsingskader, College voor de Rechten van de Mens, College voor de Rechten van de Mens 7 juni 2021, oordeel 2021-70; College voor de Rechten van de Mens 23 april 2015, oordeel 2015-44; College voor de Rechten van de Mens 23 april 2015, oordeel 2014-0426.\u00a0\u21a9</p> </li> </ol>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-03-vertaling-wetgeving-naar-systeem/","title":"Controleer regelmatig of het algoritme voldoet aan alle wetten en regels en het eigen beleid","text":"<p>ver-03Verificatie en validatieJuristGovernanceTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-03-vertaling-wetgeving-naar-systeem/#maatregel","title":"Maatregel","text":"<p>Stel regelmatig vast dat wetgeving en (lokaal) beleid correct is vertaald naar de uitvoering van het te ondersteunen werkproces en de onderliggende systemen. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-03-vertaling-wetgeving-naar-systeem/#toelichting","title":"Toelichting","text":"<ul> <li>Systemen die overheidsorganisaties inzetten voor bijvoorbeeld het verlenen van subsidies, vergunningen of bijstandsuitkeringen moeten de regels en processtappen volgen die in wetgeving zijn voorgeschreven.</li> <li>Er is een vertaling nodig van deze regels en processtappen naar de uitvoering van het werkproces, het datagebruik en onderliggende systemen.</li> <li>Algoritmes moeten ook voldoen aan deze regels en processtappen.</li> <li>Als algoritmes worden ontwikkeld, moet worden onderzocht wat deze regels zijn en hoe deze moeten worden toegepast bij het ontwikkelen van algoritmes.</li> <li>Het moeten voldoen aan wetgeving en beleid kan dus in zekere zin 'begrenzend' werken op wat mag worden gedaan met algoritmes. Dit is mede afhankelijk van de risico classificatie van de specifieke toepassing. </li> <li>Voor algoritmes, bijvoorbeeld regelgebaseerde rekenregels, moet bijvoorbeeld nauwkeurig worden geprogrammeerd in welke gevallen welke bedragen moeten worden uitgekeerd voor een bijstandsuitkering.</li> <li> <p>Voor machine learning algoritmes moet bijvoorbeeld worden vastgesteld of de trainingsdata wel tot stand is gekomen in lijn met wetgeving en vastgesteld beleid (datakwaliteit) en welke verbanden en patronen (inputvariabelen) al dan niet passend zijn bij het ondersteunen van wettelijke taken.</p> </li> <li> <p>Er is een multidisciplinaire samenwerking nodig tussen de proceseigenaar, gebruikers, juristen, informatieanalisten en ontwikkelaar om deze vertaling zorgvuldig en doorlopend te maken.</p> </li> <li>Voorafgaand aan het (laten) ontwikkelen van een algoritme moet dit zijn uitgevoerd.</li> <li>De toegepaste 'business rules' en de verwerkte data voor de uitvoering van het te ondersteunen werkproces met algoritmes moeten worden onderzocht en beoordeeld.</li> <li>Diepgaande procesanalyses (Bv. BPMN niveau Analytisch) en procesbeschrijvingen kunnen hierbij ondersteunen. </li> <li>Als blijkt dat een werkproces niet (meer) conform (gewijzigde) wetgeving of beleid wordt uitgevoerd, dan moet worden beoordeeld of de verworven data of welke deel van de data geschikt is voor het ontwikkelen een algoritme.</li> <li>Het is dan raadzaam om de uitvoering van het betreffende werkproces en de werking van onderliggende systemen eerst te 'herstellen' en om hiermee een nieuw datafundament te cre\u00eberen (eerst een groot aantal zaken behandelen) die later als trainingsdata kan worden gebruikt. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-03-vertaling-wetgeving-naar-systeem/#risico","title":"Risico","text":"<p>Een beslissing of besluit wordt niet conform wetgeving genomen en is daarmee onrechtmatig, als geen goede vertaling wordt gemaakt van wetgeving naar het algoritme. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-03-vertaling-wetgeving-naar-systeem/#bron","title":"Bron","text":"<ul> <li>Wetsanalyse</li> <li>Onderzoekskader Auditdienst Rijk, DM.15</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 2.05</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/5-ver-03-vertaling-wetgeving-naar-systeem/#voorbeeld","title":"Voorbeeld","text":"<p>Handleiding Wetanalyse </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/","title":"Stel een werkinstructie op voor gebruikers.","text":"<p>imp-01ImplementatieProjectleiderOntwikkelaarMenselijke controleTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/#maatregel","title":"Maatregel","text":"<p>Stel een werkinstructie op voor gebruikers. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/#toelichting","title":"Toelichting","text":"<p>Het is belangrijk dat gebruikers een werkinstructie ontvangen met informatie over hoe zij met het algoritme kunnen en moeten werken. Hierin worden zaken beschreven als:</p> <ul> <li>Op wat voor manier het algoritme ondersteunt bij het uitvoeren van (wettelijke) taken.</li> <li>Wat de mogelijkheden en beperkingen zijn bij het gebruik van het algoritme.</li> <li>Wat de impact is van het gebruik van het algoritme op de samenleving en individuen (denk aan energieverbruik of dat een besluit met rechtsgevolgen wordt genomen).</li> <li>Wat de risico's zijn die aan het gebruik verbonden zijn (bijv. (automation) bias, false positives/negatives).</li> <li>Welke maatregelen zijn getroffen om deze risico's te beperken (bijv. bias analyse, 'stopknop' ingebouwd, transparantie over de output).</li> <li>Hoe de output van het algoritme moet worden ge\u00efnterpreteerd.</li> <li>Hoe het werkproces kan worden uitgevoerd, zonder ondersteuning van het algoritme.</li> <li>Welke protocollen er zijn als incidenten zich voordoen.</li> </ul> <p>Denk hierbij na over het eventueel bijscholen van medewerkers als het kennisniveau nog onvoldoende is om de werkinstructies goed te begrijpen. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/#bronnen","title":"Bronnen","text":"<ul> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 3.07</li> <li>Ethics Guidelines of Trustworthy AI</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/#risico","title":"Risico","text":"<p>Het algoritme wordt onjuist gebruikt of verkeerd ge\u00efnterpreteerd door gebruikers, waardoor onjuiste belissingen of besluiten worden genomen. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-02-aselecte-steekproeven/","title":"Doe aselecte steekproeven om algoritmes met 'risicogestuurde selectie\u2019 te controleren","text":"<p>imp-02Dataverkenning en datapreparatieImplementatieMonitoring en beheerOntwikkelaarBias en non discriminatieTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-02-aselecte-steekproeven/#maatregel","title":"Maatregel","text":"<p>Uitvoeren van aselecte steekproeven als aanvulling wanneer gebruik gemaakt wordt van risicogestuurde selectie.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-02-aselecte-steekproeven/#toelichting","title":"Toelichting","text":"<p>Aselecte steekproeven kunnen een waardevolle toevoeging zijn bij risicogestuurde selectie.</p> <p>Het toevoegen van aselecte steekproeven maakt het mogelijk om over tijd te beoordelen of het algoritme nog voldoende effectief is. Populaties veranderen immers over tijd. Een selectie die het meest effectief was bij ingebruikname, kan over tijd dat niet meer zijn. Door alleen risicogestuurd te selecteren, wordt dit niet inzichtelijk, omdat bepaalde groepen zelden tot nooit gecontroleerd worden. Door de aanvullende mogelijkheid van monitoring, kan over tijd beoordeeld worden of er nog steeds sprake is van de meest proportionele vorm. Als dat niet zo is, kan bijvoorbeeld gekozen worden voor aanpassing van de risicogestuurde selectie of overgaan op volledig aselect.</p> <p>De maatregel gaat daarmee niet direct discriminatie tegen, omdat er sprake kan zijn van discriminatie ongeacht de effectiviteit van de risicogestuurde selectie. Een lagere effectiviteit maakt het echter lastiger het gemaakte onderscheid te rechtvaardigen.</p> <p>Het gebruik van een aselecte steekproef is in veel gevallen essentieel om het systeem te kunnen toetsen op vooringenomenheid.  Een aselecte steekproef geeft ook inzicht in heel deel van de populatie dat doorgaans niet geselecteerd en behandeld wordt door het betreffende risicogestuurde algoritme.  Dit maakt het mogelijk om te toetsen of er sprake is van een over- of ondervertegenwoordiging van bepaalde groepen, of om te bepalen of bepaalde typen fouten vaker gemaakt worden in bepaalde groepen.</p> <p>Bij AI-systemen die verder leren op basis van verkregen data kan daarnaast sprake zijn van een reinforcing feedbackloop, omdat zij geen representatieve data krijgen. Het toevoegen van aselecte steekproeven kan deze feedbackloop doorbreken.</p> <p>Het is aan te bevelen om, waar mogelijk, behandelaars niet in te lichten of een casus toegewezen is op basis van een risicogestuurd of aselecte selectie. Daardoor wordt beperkt dat een behandelaar met tunnelvisie een zaak bekijkt. De behandelaar weet immers dat er tussen de selecties zaken zitten waar niet sprake is van verhoogd risico. Op die manier kan automation bias beperkt te worden. Niet in alle gevallen zal dit mogelijk zijn, omdat de behandelaar ook uit andere aangeleverde gegevens kan halen op basis waarvan een casus geselecteerd is. Het is dan belang om op andere wijze de tunnelvisie tegen te gaan.</p> <p>De precieze inzet van aselecte steekproeven zal afhangen van de context. Zo verschilt het per context hoeveel zaken aselect geselecteerd moeten worden. Bepaal welke groepen er precies vergeleken dienen te worden en bepaal aan de hand daarvan een passende steekproefgrootte zodanig dat er gesproken kan worden over statistische significantie. </p> <p>In sommige gevallen zal de impact van een selectie ook dusdanig zijn, dat het zich niet leent voor aselecte steekproef. Zo kan een aselecte steekproef wel de basis zijn voor bureauonderzoek, maar mogelijk niet als enige basis voor een huisbezoek. Deze belangenenafweging moet per context gemaakt worden.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-02-aselecte-steekproeven/#bronnen","title":"Bronnen","text":"<p>Rapportage Algoritmerisico's Nederland voorjaar 2024 (pp. 36-41)</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-02-aselecte-steekproeven/#risico","title":"Risico","text":"<ul> <li>Historical bias</li> <li>Representation bias</li> <li>Automation bias en Reinforcing Feedback Loop</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-02-aselecte-steekproeven/#voorbeeld","title":"Voorbeeld","text":"<p>In het onderzoek van zowel Algorithm Audit als PricewaterhouseCoopers naar de Controle Uitwonendenbeurs is het belang van de aselecte steekproef duidelijk geworden. </p> <p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/","title":"Richt de juiste menselijke controle in van het algoritme","text":"<p>imp-03OntwerpImplementatieMonitoring en beheerProjectleiderBeleid en adviesMenselijke controleGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/#maatregel","title":"Maatregel","text":"<p>Richt (technische) controlemechanismen in voor menselijke tussenkomst (of: menselijke controle) waarmee de output van een algoritme kan worden gecontroleerd.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/#toelichting","title":"Toelichting","text":"<p>Algoritmes ondersteunen vaak beslissingen en besluitvorming van overheidsorganisaties. Deze beslissingen of besluiten kunnen betrokkenen in aanmerkelijke mate raken of zelfs rechtsgevolgen hebben. Omdat algoritmes niet foutloos zijn, is het belangrijk dat een mens controleert wat een algoritme doet en, waar nodig, corrigeert. Dit proces heet 'menselijke tussenkomst' en moet betekenisvol zijn, niet slechts symbolisch.</p> <p>Het inrichten, monitoren en evalueren van menselijke controle is cruciaal om te voorkomen dat algoritmes negatieve effecten veroorzaken of de menselijke autonomie ondermijnen.</p> <p>Betekenisvolle menselijke controle houdt in dat:</p> <ul> <li>Het toezicht wordt uitgevoerd door iemand die bevoegd en bekwaam is om een beslissing of besluit te wijzigen.</li> <li>Automatische aanbevelingen niet klakkeloos worden overgenomen. Bijvoorbeeld: een systeem dat standaard een suggestie accepteert door een enkele klik voldoet hier niet aan.</li> <li>De vormen van menselijke tussenkomst al in een vroeg stadium, bijvoorbeeld in de ontwerpfase, worden vastgesteld op basis van risicoanalyses.</li> <li>Gebruikers voldoende kennis, tijd en verantwoordelijkheid hebben om weloverwogen beslissingen te nemen over het functioneren van algoritmes. Dit betekent ook dat externe factoren, zoals tijdsdruk of onvoldoende informatie, de beoordeling van de output niet mogen be\u00efnvloeden. (zie ook het onderzoekskader van de ADR, SV.6)</li> </ul> <p>Soms is menselijke tussenkomst minder relevant, zoals bij \u2018gebonden bevoegdheden\u2019. Hierbij is weinig tot geen ruimte om een beslissing of besluit aan te passen. Voorbeelden zijn:</p> <ul> <li>Het opleggen van verkeersboetes onder de Wet administratiefrechtelijke handhaving verkeersvoorschriften (Wahv).</li> <li>Het automatisch aanpassen van studiefinanciering op basis van inkomenswijzigingen.</li> </ul> <p>Om menselijke tussenkomst goed te organiseren, zijn technische en organisatorische maatregelen nodig. Dit geldt ook wanneer een externe aanbieder de algoritmes levert. In dat geval moet de verantwoordelijke organisatie (gebruiksverantwoordelijke) samen met de aanbieder bepalen hoe menselijke tussenkomst zinvol kan worden ingericht.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/#inrichten-van-menselijke-controle","title":"Inrichten van menselijke controle","text":"<p>Er zijn verschillende manieren om menselijke tussenkomst in te richten, afhankelijk van de specifieke toepassing van een algoritme. Hieronder worden vier mogelijkheden beschreven die kunnen worden ingezet, los of in combinatie:</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/#1-human-in-the-loop","title":"1. Human in the loop","text":"<p>Bij dit model speelt de mens een actieve rol in elke fase van het algoritme. Deze variant geeft de meeste controle en invloed, maar kan leiden tot vertraagde of minder effici\u00ebnte besluitvorming, vooral bij real-time of zeer complexe taken waarbij snelheid cruciaal is. Een voorbeeld van toepassen van Human-in-the-loop is het nakijken en beoordelen van de output van een algoritme door een mens, telkens voordat een beslissing wordt genomen. Het verwerken van data gebeurt alleen in opdracht van de mens en verder neemt het algoritme of AI model geen autonome beslissingen. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/#2-human-on-the-loop","title":"2. Human on the loop","text":"<p>Hier behoudt de mens toezicht en kan ingrijpen wanneer dat nodig is, om te garanderen dat een model veilig en ethisch opereert. Dit model biedt daardoor een balans tussen autonome besluitvorming en menselijke controle. Het is vooral nuttig in situaties waarin afwijkende keuzes of acties van het algoritme grote gevolgen kunnen hebben. De menselijke operator houdt de werking van het algoritme in de gaten en staat klaar om in te grijpen of beslissingen terug te draaien wanneer nodig.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/#3-human-above-the-loop","title":"3. Human above the loop","text":"<p>In dit model houdt de mens toezicht op een hoger niveau, met een focus op strategische en ethische keuzes, in plaats van dat de menselijke operator zich bezighoudt met directe operationele beslissingen. Dit stelt de mens in staat in te grijpen wanneer kritieke morele, juridische of sociale zorgen ontstaan om het model op de langere termijn bij te sturen.  De menselijke tussenkomst is gericht op het bepalen van beleid en de richtlijnen voor algoritmes. Het gaat daarbij niet alleen over het defini\u00ebren van operationele procedures maar ook het maken van bepaalde ethische overwegingen, het zorgen voor naleving van regelgeving en het overwegen van de implicaties van de inzet van algoritmes op de lange termijn. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/#4-human-before-the-loop","title":"4. Human before the loop","text":"<p>Hier maakt de mens vooraf ethische en morele afwegingen die in het algoritme zelf worden ingebouwd. Hoewel het model in productie autonoom opereert, zal de menselijke input gedurende de ontwikkeling ervoor zorgen dat het model ook in complexe situaties volgens de juiste (ethische) afwegingen keuzes en acties onderneemt.</p> <p>Dit model is essentieel in situaties waar menselijk ingrijpen tijdens de uitvoering niet mogelijk is (wanneer er bijvoorbeeld weinig of helemaal geen tijd is om als mens te interveni\u00ebren), maar waar ethische keuzes cruciaal blijven. Denk aan bestrijding van zeemijnen of situaties met zelfrijdende auto\u2019s in onvoorspelbare verkeerssituaties (bron: TNO visiestuk 2022). Deze variant kan ook worden ingezet voor situaties waarin wel nog menselijk ingrijpen mogelijk is. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/#risico","title":"Risico","text":"<p>Het niet inrichten van passende menselijke controle leidt tot onverantwoorde inzet van algoritmen en het niet voldoen aan wettelijke vereisten. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/#bronnen","title":"Bronnen","text":"<ul> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 2.01<ul> <li>Menselijke tussenkomst | Algoritmes | Algemene Rekenkamer</li> </ul> </li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.5, SV.6 </li> <li>Advies over geautomatiseerde selectietechniek Pels Rijcken, p.9</li> <li>Recht op een menselijke blik bij besluiten | Autoriteit Persoonsgegevens</li> <li>Kamerstukken IT 2017-2018, 34 851, nr. (MvT UAVG), p. 120-121</li> <li>Ethics guidelines for trustworthy AI | Shaping Europe\u2019s digital future, deel (64)</li> <li>\"Towards Digital Life: Een toekomstvisie op AI anno 2032\" - TNO, 2022</li> <li>Algoritmes afwegen | Rathenau Instituut</li> <li>Managing supplier delivery reliability risk under limited information: Foundations for a human-in-the-loop DSS - ScienceDirect</li> <li>Human control of AI systems: from supervision to teaming | AI and Ethics (springer.com)</li> <li>Zijn er beperkingen op het gebruik van geautomatiseerde besluitvorming? - Europese Commissie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/#voorbeeld","title":"Voorbeeld","text":"<p>HvJEU december 2023, ECLI:EU:C:2023:957 (SCHUFA Scoring)</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-04-publiceren-algoritmeregister/","title":"Publiceer impactvolle algoritmes en hoog-risico-AI-systemen in het Algoritmeregister","text":"<p>imp-04ImplementatieMonitoring en beheerProjectleiderBeleid en adviesTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-04-publiceren-algoritmeregister/#maatregel","title":"Maatregel","text":"<p>Publiceer het algoritme  in het Nederlandse Algoritmeregister.  </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-04-publiceren-algoritmeregister/#toelichting","title":"Toelichting","text":"<ul> <li>De regering wil dat de overheid algoritmes verantwoord gebruikt. Mensen moeten erop kunnen vertrouwen dat algoritmes voldoen aan de waarden en normen van de samenleving.</li> <li>Wanneer de overheid open is over algoritmes en hun toepassing, kunnen burgers, organisaties en media haar kritisch volgen.</li> <li>Impactvolle algoritmes en hoog risico AI-systemen moeten daarom worden gepubliceerd in het Algoritmeregister.</li> <li>In het Algoritmeregister moet uitleg zijn over hoe algoritmes, of het proces wat hiermee wordt ondersteund werkt.</li> <li>Er is een Handreiking Algoritmeregister opgesteld met informatie over het publiceren van algoritmes in het Algoritmeregister.</li> <li>De Algoritmeregister Publicatiestandaard kan overheidsorganisaties ondersteunen bij het helpen invullen van het Algoritmeregister.</li> <li>Sommige overheidsorganisaties publiceren hun algoritmes ook in een eigen Algoritmeregister, zodat burgers dit makkelijker kunnen vinden. Bijvoorbeeld het Algoritmeregister van de Gemeente Rotterdam, het Algoritmeregister van de Gemeente Amsterdam of het Algoritmeregister van het UWV. </li> <li>Zorg na publicatie dat de informatie in het Algoritmeregister up-to-date blijft en indien nodig regelmatig wordt aangepast. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-04-publiceren-algoritmeregister/#risico","title":"Risico","text":"<p>Betrokkenen zijn niet op de hoogte dat hun persoonsgegevens worden verwerkt met een algoritme, waardoor zij hier geen controle over hebben. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-04-publiceren-algoritmeregister/#bronnen","title":"Bronnen","text":"<ul> <li>Handreiking Algoritmeregister</li> <li>Algoritmeregister Publicatiestandaard</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 3.12, 3.14, 3.16 </li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, SV.14, PRI.8 </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-04-publiceren-algoritmeregister/#voorbeeld","title":"Voorbeeld","text":"<ul> <li>Gemeente Groningen, Algoritmeregister: Eerste Hulp bij Geldzaken</li> <li>Gemeente Amsterdam, Algoritemregister: Blurring as a Service</li> <li>Juryrapport Best Beschreven Algoritme</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-proces-privacyrechten/","title":"Spreek af hoe de organisatie omgaat met privacy-verzoeken","text":"<p>imp-06OrganisatieverantwoordelijkhedenOntwikkelenProjectleiderBeleid en adviesJuristPrivacy en gegevensbeschermingGovernanceData</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-proces-privacyrechten/#maatregel","title":"Maatregel","text":"<p>Richt een proces in waarmee betrokkenen hun privacyrechten kunnen inroepen als algoritmes worden ontwikkeld of gebruikt.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-proces-privacyrechten/#toelichting","title":"Toelichting","text":"<ul> <li>Betrokkenen moeten hun persoonsgegevens kunnen inzien, rectificeren, laten verwijderen of het gebruik ervan beperken bij het toepassen van algorimtes.</li> <li>Betrokkenen moeten hun verzoek kunnen indienen bij de betreffende organisatie. Denk hierbij aan het inrichten van een privacyloket.</li> <li>Er zullen  afspraken moeten worden gemaakt door servicemanagement in te richten hoe deze verzoeken effectief kunnen worden behandeld door bijvoorbeeld door het ontwikkel- of beheerteam (aanbieder).</li> <li>Bij het inrichten van  servicemanagement moet zijn nagedacht over hoe een verzoek tot het inzien, rectificeren, verwijderen of beperken van de verwerking van persoonsgegevens op een betekenisvolle manier kan of moet worden behandeld.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-proces-privacyrechten/#risico","title":"Risico","text":"<p>Betrokkenen hebben geen controle over hun persoonsgegevens doordat ze geen beroep kunnen doen op hun privacyrechten. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-proces-privacyrechten/#bronnen","title":"Bronnen","text":"<p>Onderzoekskader Algoritmes Auditdienst Rijk, PRI.9 </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-proces-privacyrechten/#voorbeeld","title":"Voorbeeld","text":"<p>Privacyverzoek Gemeente Amsterdam</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-werkinstructies-medewerkers/","title":"Spreek af hoe medewerkers omgaan met het algoritme.","text":"<p>imp-05ImplementatieProjectleiderBeleid en adviesGovernanceMenselijke controle</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-werkinstructies-medewerkers/#maatregel","title":"Maatregel","text":"<p>Stel duidelijke werkinstructies op voor de medewerkers die het algoritme gaan gebruiken. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-werkinstructies-medewerkers/#toelichting","title":"Toelichting","text":"<ul> <li>Maak keuzes rondom de rol van het systeem in de werkwijze van medewerkers.</li> <li>Gebruik duidelijke werkinstructies en protocollen om te voorkomen dat beslissingen, gebaseerd op de output van het systeem, door (automation) bias worden be\u00efnvloed.</li> <li>Stel een structuur op voor het melden van mogelijke problemen die medewerkers ervaren met het systeem.</li> <li> <p>Opleiding van medewerkers over:</p> <ul> <li>Algoritmes, waaronder AI;</li> <li>het systeem waarmee ze gaan werken;</li> <li>de rol van het systeem in hun werkwijze;</li> <li>de risico's die aan het gebruik van een systeem verbonden zijn (bijv. (automation) bias, false positives/negatives);</li> <li>de maatregelen die genomen zijn om deze risico\u2019s te beperken (bijv. willekeurige of fictieve casussen, transparantie over de output).</li> </ul> </li> <li> <p>Bespreek regelmatig de uitdagingen die medewerkers ondervinden bij het werken met het systeem (bijv. tijdsdruk).</p> </li> <li> <p>Documenteer alle keuzes en de onderliggende redenen/afwegingen rondom menselijke tussenkomst en overzicht. Evalueer en pas gemaakte keuzes waar nodig aan.</p> </li> <li> <p>Goede samenwerking tussen medewerkers en systemen helpt bij het voorkomen van (automation) bias en discriminatie, het signaleren van algoritmische problemen, en het vermijden van de facto automatische besluitvorming.</p> </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-werkinstructies-medewerkers/#bronnen","title":"Bronnen","text":"<ul> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 3.07</li> <li>Handreiking non-discriminatie by design </li> <li>Impact Assessment Mensenrechten en Algoritmes </li> <li>Ethics Guidelines of Trustworthy AI</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-werkinstructies-medewerkers/#risico","title":"Risico","text":"<p>Bias, discriminatie, de facto automatische besluitvorming.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-werkinstructies-medewerkers/#voorbeeld","title":"Voorbeeld","text":"<p>Heb je een voorbeeld of best practice, laat het ons weten via algoritmes@minbzk.nl</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-06-vermelding-in-privacyverklaring/","title":"Vermeld het gebruik van persoonsgegevens in een privacyverklaring","text":"<p>imp-07ImplementatieProjectleiderJuristPrivacy en gegevensbeschermingTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-06-vermelding-in-privacyverklaring/#maatregel","title":"Maatregel","text":"<p>Neem het gebruik van een algoritme op in de privacyverklaring als hierbij persoonsgegevens worden verwerkt.  </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-06-vermelding-in-privacyverklaring/#toelichting","title":"Toelichting","text":"<ul> <li>Door in een privacyverklaring te vermelden welke persoonsgegevens worden verwerkt voor het gebruik van een algoritme, wordt een betrokkene ge\u00efnformeerd over de verwerking van diens persoonsgegevens.</li> <li>Een privacyverklaring kan op organistieniveau worden opgesteld en ook voor specifieke verwerkingen.</li> <li> <p>In een privacyverklaring wordt in ieder geval het volgende opgenomen:</p> </li> <li> <p>de identiteit en contactgegevens van uw organisatie. En ook die van vertegenwoordiger in de Europese Unie (EU), als deze er zijn.</p> </li> <li>de contactgegevens van de functionaris gegevensbescherming (FG), als een organistie deze heeft.</li> <li>de doeleinden van de verwerking en de AVG-grondslag. </li> <li>de (categorie\u00ebn van) ontvangers van de persoonsgegevens.</li> <li>of de persoonsgegevens door worden geven buiten de EER of aan een internationale organisatie. En zo ja, op welke juridische grond.</li> <li>de bewaartermijn van de gegevens.</li> <li>de privacyrechten van de betrokkenen, zoals het recht op inzage, rectificatie en gegevens verwijderen.</li> <li>het recht van de betrokkenen om de toestemming die zij voor een bepaalde verwerking hebben gegeven, altijd weer te mogen intrekken.</li> <li>dat de betrokkenen een klacht kunnen indienen bij de privacytoezichthouder. In Nederland is dat de Autoriteit Persoonsgegevens (AP).</li> <li>of de betrokkenen verplicht zijn de persoonsgegevens te verstrekken. En zo ja, waarom. Vermeld dan ook wat de gevolgen zijn als zij de gegevens niet verstrekken.</li> <li>of er sprake is van geautomatiseerde besluitvorming, inclusief profilering. En zo ja, hoe deze beslissing wordt genomen.</li> <li> <p>als persoonsgegevens van een andere organisatie zijn ontvangen: de bron waar de persoonsgegevens vandaan komen. En of de gegevens afkomstig zijn van openbare bronnen.</p> </li> <li> <p>Het is denkbaar dat in een specifieke privacyverklaring informatie over onderliggende logica van het algoritme, alsmede het belang en de verwachte gevolgen van die verwerking voor de betrokkene. Het is ook denkbaar dat deze informatie in het algoritmeregister wordt opgenomen.</p> </li> <li>Als ervoor wordt gekozen om het algoritme uit te faseren, dan moet informatie in het algoriteregister hierop worden aangepast. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-06-vermelding-in-privacyverklaring/#risico","title":"Risico","text":"<p>Betrokkenen zijn niet op de hoogte dat hun persoonsgegevens worden verwerkt met een algoritme, waardoor zij hier geen controle over hebben en zich niet kunnen beroepen op hun privacyrechten.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-06-vermelding-in-privacyverklaring/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, PRI.8</li> <li>Autoriteit Persoonsgegevens  Algoritmekader </li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 3.12 </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-06-vermelding-in-privacyverklaring/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-07-klacht-bezwaar-beroep/","title":"Richt een proces in zodat burgers of andere belanghebbenden een klacht, bezwaar of beroep kunnen indienen over het gebruik van het algoritme en monitor dit proces.","text":"<p>imp-09ImplementatieMonitoring en beheerProjectleiderOntwikkelaarGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-07-klacht-bezwaar-beroep/#maatregel","title":"Maatregel","text":"<p>Richt een proces in zodat burgers of andere belanghebbenden een klacht, bezwaar of beroep kunnen indienen over het gebruik van het algoritme. Zorg voor goede monitoring van dit proces zodat het projectteam op de hoogte is van klachten, bezwaren en beroepen over het systeem. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-07-klacht-bezwaar-beroep/#toelichting","title":"Toelichting","text":"<ul> <li>Een goede datahuishouding van de binnengekomen bezwaren, klachten en beroepen is essentieel om de informatie rondom de klachten, bezwaren en beroepen vanuit datagedreven perspectief te kunnen monitoren.</li> <li>Goede monitoring kan ervoor zorgen dat eventuele patronen in bezwaar, klacht en beroep snel gesignaleerd worden. Eventuele patronen in klacht, bezwaar en beroep kunnen duiden op problemen in het functioneren van het algoritme. Dit kan bijvoorbeeld duiden op discriminerende effecten van het algoritme, waardoor nader onderzoek wenselijk is. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-07-klacht-bezwaar-beroep/#risico","title":"Risico","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-07-klacht-bezwaar-beroep/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Auditdienst Rijk, SV.17, PRI.9</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 1.08</li> <li>Onderzoek misbruik uitwonendenbeurs, PricewaterhouseCoopers</li> <li>Intern onderzoek controle uitwonendenbeurs, DUO</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-07-klacht-bezwaar-beroep/#voorbeeld","title":"Voorbeeld","text":""},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-08-vermelding-in-verwerkingsregister/","title":"Vermeld het gebruik van persoonsgegevens in het verwerkingsregister","text":"<p>imp-08ImplementatieProjectleiderJuristTransparantiePrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-08-vermelding-in-verwerkingsregister/#maatregel","title":"Maatregel","text":"<p>Neem de ontwikkeling en gebruik van een algoritme op in het verwerkingsregister als persoonsgegevens worden verwerkt.  </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-08-vermelding-in-verwerkingsregister/#toelichting","title":"Toelichting","text":"<ul> <li>Door in het verwerkingsregister te vermelden welke persoonsgegevens worden verwerkt voor het gebruik van een algoritme, wordt een betrokkene ge\u00efnformeerd over de verwerking van diens persoonsgegevens</li> <li>Hiermee is ook voor de organisatie intern inzichtelijk welke persoonsgegevens voor welke toepassingen worden verwerkt;</li> <li>Het is van belang dat vanaf het moment dat persoonsgegevens worden verwerkt, meteen een vermelding hiervan wordt gemaakt in het verwerkingsregister;</li> <li>Dat betekent dat als persoonsgegevens worden verwerkt bij het ontwikkelen en trainen van het algoritme, en deze nog niet in gebruik zijn genomen, al een vermelding moet worden gedaan in het verwerkingsregister;</li> <li>Bij be\u00ebindiging van het gebruik van het algoritme, moet het verwerkingsregister worden aangepast. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-08-vermelding-in-verwerkingsregister/#risico","title":"Risico","text":"<p>Betrokkenen en de interne organisatie zijn niet op de hoogte welke persoonsgegevens worden verwerkt met een algoritme, waardoor zij hier geen controle over hebben. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-08-vermelding-in-verwerkingsregister/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Algoritmes Auditdienst Rijk, PRI.8</li> <li>Autoriteit Persoonsgegevens</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 3.04</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-08-vermelding-in-verwerkingsregister/#voorbeeld","title":"Voorbeeld","text":"<ul> <li>Blurring as a Service, Verwerkingsregister gemeente Amsterdam</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-09-politiek-bestuurlijk-besluit/","title":"Maak een openbaar besluit over de inzet van het algoritme","text":"<p>imp-01OrganisatieverantwoordelijkhedenImplementatieProjectleiderGovernanceTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-09-politiek-bestuurlijk-besluit/#maatregel","title":"Maatregel","text":"<p>Een politieke-bestuurlijk besluit wordt genomen over de inzet van een impactvol algoritme. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-09-politiek-bestuurlijk-besluit/#toelichting","title":"Toelichting","text":"<ul> <li>Door een politiek-bestuurlijk besluit te nemen over de inzet of be\u00ebindiging van een impactvol algoritme, wordt een afweging en keuze gemaakt over de wenselijkheid, haalbaarheid, transparantie, invulling van menselijke controle en eventueel de mate van onbewuste vooringenomenheid van het betreffende algoritme.</li> <li>Impactvolle algoritmes bevatten aspecten die vragen om politieke afwegingen, en niet enkel door de ambtelijke organistie mogen worden beoordeeld.</li> <li>Een voorbeeld van een politiek afweging is wanneer er wel of geen sprake is van een gerechtvaardigd onderscheid wat wordt gemaakt door een algoritme. </li> <li>Het is van belang dat overheidsorganisaties een politiek-bestuurlijk kader opstellen waarin wordt beschreven hoe wordt omgegaan met dergelijke gevallen. </li> <li>Een openbaar besluit draagt bij aan de legitimiteit van de inzet van het algoritme en de controleerbaarheid van de overheidsorganisatie. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-09-politiek-bestuurlijk-besluit/#risico","title":"Risico","text":"<p>De ambtelijke organisatie maakt politieke-bestuurlijke afwegingen en beslissingen bij de inzet of be\u00ebindiging van het gebruik van impactvolle algoritmes, terwijl deze daar niet toe bevoegd is.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-09-politiek-bestuurlijk-besluit/#bronnen","title":"Bronnen","text":"<p>Algemene Rekenkamer</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/6-imp-09-politiek-bestuurlijk-besluit/#voorbeeld","title":"Voorbeeld","text":"<p>Besluit College van Burgemeester en Wethouders Gemeente Amsterdam </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-01-backups-maken/","title":"Maak back-ups van algoritmes","text":"<p>mon-01OntwikkelenMonitoring en beheerOntwikkelaarBeleid en adviesTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-01-backups-maken/#maatregel","title":"Maatregel","text":"<p>Back-up kopie\u00ebn van informatie, software en systeemafbeeldingen dienen regelmatig te worden gemaakt en getest. Idealiter gebeurt dit in overeenstemming met een afgesproken back-up beleid. Maak back-ups van de omgeving van het algoritme en zorg ervoor dat het algoritme en de data hersteld kunnen worden.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-01-backups-maken/#toelichting","title":"Toelichting","text":"<p>Er is een back-up beleid waarin de eisen voor het bewaren en beschermen zijn gedefinieerd en vastgesteld. Dit beleid moet vervolgens worden vertaald naar (technische) maatregelen om het kunnen maken van back-ups te realiseren.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-01-backups-maken/#risico","title":"Risico","text":"<p>Als er geen regelmatige back-ups worden gemaakt en de restore-procedure niet regelmatig wordt getest, bestaat het risico dat er geen hersteloptie is en mogelijkheid van gegevensverlies.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-01-backups-maken/#bronnen","title":"Bronnen","text":"<ul> <li>Baseline Informatiebeveiliging Overheid, 12.3.1.1, 12.3.1.4, 12.3.1.5.</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, IB.26</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 4.08 </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-01-backups-maken/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/","title":"Beveilig de software","text":"<p>mon-02Dataverkenning en datapreparatieOntwikkelenMonitoring en beheerProjectleiderBeleid en adviesOntwikkelaarTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/#maatregel","title":"Maatregel","text":"<p>Zorg voor een goede beveiliging van de verschillende softwarecomponenten van een algoritme. Bepaal of de data voldoende is beveiligd en maak hierin onderscheid tussen de inputdata en de outputdata.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/#toelichting","title":"Toelichting","text":"<p>Er zijn beheersmaatregelen die kunnen helpen bij het zorgen voor een goede beveiliging van verschillende (software-)componenten van een algoritme. Hierbij kan worden gedacht aan: Het toepassen van wachtwoordbeheer. Baseline Informatiebeveiliging Overheid, de NCSC Handreiking voor implementatie van detectieoplossingen en het Impact Assessment Mensenrechten en Algoritmes.</p> <ul> <li>Inzicht cre\u00ebren in de beoogde opzet van de IT-infrastructuur (de architectuur) en de werkelijk geconfigureerde hard- en software. (CIS Control 1, BIO 8.1.1).</li> <li>Inrichten van een formeel proces voor het beheer van technische kwetsbaarheden. Dit omvat minimaal periodieke (geautomatiseerde) controle op de aanwezigheid van kwetsbaarheden in de te toetsen systemen, een risicoafweging en navolgbare afwerking daarvan of risicoacceptatie (BIO 12.6).</li> <li>Beoordelen, patchen en updaten van kwetsbaarheden in IT-systemen als deze bekend zijn. (BIO 12.6.1)</li> <li>Verwijderen of deactiveren van softwarecomponenten en services die niet noodzakelijk zijn voor het functioneren van het algoritme om beveiligingsrisico\u2019s te beperken. (BIO 12.6.1)</li> <li>Er vindt zonering plaats binnen de technische infrastructuur conform de uitgangspunten die zijn vastgelegd in een operationeel beleidsdocument, waarbij minimaal sprake is van scheiding tussen vertrouwde en onvertrouwde netwerken (BIO 9.4.2). Denk ook aan het scheiden in netwerken (BIO 13.1.3).</li> <li>Actieve monitoring van de algoritme data vindt plaats zodat beveiligingsincidenten en -gebeurtenissen in een vroeg stadium worden gedetecteerd. (BIO 12.4.1, NCSC Handreiking voor implementatie van detectieoplossingen).</li> <li>Netwerkverkeer en componenten worden actief gemonitord. (BIO 12.4.1).</li> <li>Beoordeel of de data ten behoeve van het ontwikkelen en gebruiken van het algoritme voldoende is beveiligd. Maak hierin onderscheid tussen de trainingsdata, inputdata en de outputdata.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/#risico","title":"Risico","text":"<p>Oneigenlijke toegang van buitenaf kan plaatsvinden via zwakheden in het systeem.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/#bronnen","title":"Bronnen","text":"<ul> <li>Baseline Informatiebeveiliging Overheid</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, IB.18 t/m IB.25</li> <li>NCSC Handreiking voor implementatie van detectieoplossingen</li> <li>Handleiding Quickscan Information Security</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/","title":"Maak een noodplan voor beveiligingsincidenten","text":"<p>mon-03OrganisatieverantwoordelijkhedenMonitoring en beheerProjectleiderBeleid en adviesJuristTechnische robuustheid en veiligheidGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/#maatregel","title":"Maatregel","text":"<p>Richt een proces in waarmee beveiligingsincidenten m.b.t. algoritmes en data zo spoedig mogelijk worden opgelost.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/#toelichting","title":"Toelichting","text":"<p>Er zijn procedures aanwezig die borgen dat beveiligingsincidenten m.b.t. algoritmes en data zo spoedig mogelijk, afhankelijk van de kwalificatie van het incident, worden opgepakt.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/#risico","title":"Risico","text":"<p>Te late reactie op incidenten kan ervoor zorgen dat de BIV (beschikbaarheid, integriteit en vertrouwelijkheid) van het algoritme of data kan worden aangetast.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/#bronnen","title":"Bronnen","text":"<ul> <li>Baseline Informatiebeveiliging Overheid, BIO 12.3.1.1, 12.3.1.4, 12.3.1.5</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk, IB.30</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 4.06</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-04-evalueer-bij-veranderingen-in-data/","title":"Monitor regelmatig op veranderingen in de data. Bij veranderingen evalueer je de prestaties en output van het algoritme.","text":"<p>mon-04Monitoring en beheerOntwikkelaarDataTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-04-evalueer-bij-veranderingen-in-data/#maatregel","title":"Maatregel","text":"<p>Monitor regelmatig op veranderingen in de inputdata. Bij geconstateerde veranderingen evalueer je de prestaties en de output van het algoritme.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-04-evalueer-bij-veranderingen-in-data/#toelichting","title":"Toelichting","text":"<p>De inputdata kan voortdurend veranderen.  Dat kan komen doordat de context waarin het algoritme wordt gebruikt verandert, of door een technische fout wanneer de data bijvoorbeeld niet goed is ingelezen of aangeleverd.  Het te laat opmerken van zo'n verandering kan grote gevolgen hebben.  Daarom is het belangrijk om regelmatig te controleren en evalueren of:</p> <ul> <li>de data van voldoende kwaliteit is voor de beoogde toepassing</li> <li>of het algoritme nog presteert in lijn met de vastgestelde doelen</li> <li>de gegevens op de juiste en volledige manier worden verwerkt. </li> </ul> <p>Zeker wanneer er gebruikt wordt gemaakt van informatie van derden, is het belangrijk om regelmatig te controleren of er veranderingen in de data zijn. Goede monitoring op datakwaliteit zorgt ervoor dat je voldoende controle hebt over de kwaliteit van de data, zelfs als je hiervoor afhankelijk bent van andere partijen. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-04-evalueer-bij-veranderingen-in-data/#risico","title":"Risico","text":"<p>Door veranderingen in de data presteert het model niet meer zoals verwacht.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-04-evalueer-bij-veranderingen-in-data/#bronnen","title":"Bronnen","text":"<ul> <li>Onderzoekskader Auditdienst Rijk, DM.8</li> <li>Toetsingskader Algoritmes Algemene Rekenkamer, 1.02, 1.08, 2.06, 2.08, 2.13 </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-04-evalueer-bij-veranderingen-in-data/#voorbeeld","title":"Voorbeeld","text":"<p>Heb jij een goed voorbeeld? Laat het ons weten!</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/","title":"Meten, monitoren en rapporteren van milieu-impact van algoritmes","text":"<p>mon-05OntwerpMonitoring en beheerOntwikkelaarBeleid en adviesProjectleiderDuurzaamheid</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/#maatregel","title":"Maatregel","text":"<p>Inventariseer en monitor de milieu-impact van algoritmes (bijvoorbeeld door het doen van een impact-assessment), zowel tijdens ontwerp als bij het gebruik, en rapporteer deze om duurzame keuzes mogelijk te maken.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/#toelichting","title":"Toelichting","text":"<p>Tref bijvoorbeeld de volgende maatregelen, wanneer je de milieu-impact van algoritmes gaat inventariseren of monitoren:</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/#digital-product-passports","title":"Digital Product Passports","text":"<p>De milieu-impact van algoritmes kan worden gemeten en geoptimaliseerd door een Digital Product Passport (DPP) te overwegen. DPP's bieden een platform voor duurzame rapportage door middel van real-time informatie over onder andere CO\u2082-uitstoot, herkomst en energiegebruik, wat kan helpen om de ecologische voetafdruk van een algoritme transparant te maken. Door deze gegevens structureel te verzamelen en te delen, kunnen gebruikers en bedrijven inzicht krijgen in de duurzaamheidsprestaties. De milieu-impact van verschillende algoritmes/modellen kan een rol spelen bij het kiezen van een model in de ontwerpfase. Ook kan het ervoor zorgen dat je later kiest om een ander model te gebruiken, of het gebruik van een model of systeem zelfs te be\u00ebindigen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/#milieu-impact-assessments","title":"Milieu-impact assessments","text":"<p>Wanneer de milieu-impact (in bepaalde mate) inzichtelijk is, kan er een milieu-impact assessment worden gedaan. Ga na of je organisatie die een heeft of overweeg deze te ontwikkelen.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/#periodieke-monitoring","title":"Periodieke monitoring","text":"<p>Probeer ook periodieke monitoringsrapporten op te stellen waarin de milieu-impact van algoritmes wordt bijgehouden. Hiermee vergroot je de duurzaamheid door tijdig verbeteringen te signaleren en door te voeren. Hierbij kan ook een onderscheid worden gemaakt in de impact tijdens de trainingsfase van het algoritme en de gebruiksfase. </p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/#risico","title":"Risico","text":"<p>Wanneer in de ontwerpfase niet wordt nagedacht over milieu-impact kan onbewust voor een algoritme of model worden gekozen dat meer energie verbruikt (en wellicht hogere kosten met zich mee brengt) dan een model dat misschien even goed presteert voor het gekozen doel. Zonder structurele monitoring van de milieu-impact kan de organisatie onbewust bijdragen aan een hoge CO\u2082-uitstoot en hoge energieverbruikskosten.</p>"},{"location":"voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/#bronnen","title":"Bronnen","text":"<ul> <li>Coalitie Duurzame Digitalisering - Digital Product Passport</li> <li>Onderzoekskader Algoritmes Auditdienst Rijk - DM.24</li> <li>Ethische richtsnoeren voor betrouwbare KI, Hoofdstuk II 1.6: Maatschappelijk en milieuwelzijn</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/","title":"Vereisten","text":"<p>Overzicht van de belangrijkste vereisten voor overheden die algoritmes of AI-systemen ontwikkelen of gebruiken. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/#wetten-en-regels","title":"Wetten en regels","text":"<p>De vereisten zijn gebaseerd op de wetten en regels voor het uitvoeren van wettelijke taken, zoals de:</p> <ul> <li>AI-verordening</li> <li>Algemene verordening gegevensbescherming (AVG)</li> <li>Algemene wet bestuursrecht (Awb)</li> <li>Algemene wet gelijke behandeling (Awgb) </li> <li>Auteurswet</li> <li>Baseline Informatiebeveiliging Overheid (BIO)</li> <li>Grondwet</li> </ul> <p>Bij elke vereiste staat de bron er duidelijk bij.</p> <p>Let op!</p> <p>Het Algoritmekader biedt een overzicht van de belangrijkste vereisten. Dit is niet volledig. Sectorspecifieke wetgeving is bijvoorbeeld niet meegenomen. Hierdoor kan het zijn dat er meer regelgeving van geldt voor jouw toepassing. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/#aantal-vereisten-verschilt-per-situatie","title":"Aantal vereisten verschilt per situatie","text":"<p>Welke vereisten gelden voor jouw organisatie, hangt af van:</p> <ul> <li>de technologie die je gebruikt: rekenregels, machinelearning of generatieve AI</li> <li>de risicoclassificatie van het algoritme dat je gebruikt</li> <li>je rol: ben je ontwikkelaar of alleen gebruiker van het algoritme?</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/#voorbeeld","title":"Voorbeeld","text":"<p>Impactvolle algoritmes en AI-systemen worden gepubliceerd in het Nederlandse algoritmeregister.</p> <p>Deze vereiste geldt alleen voor impactvolle algoritmes en hoog-risico-AI-systemen. Een niet-impactvolle rekenregel hoef je niet te registreren.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/#help-ons-deze-pagina-te-verbeteren","title":"Help ons deze pagina te verbeteren","text":"<p>Deel je idee, suggestie of opmerking via GitHub of mail ons via algoritmes@minbzk.nl.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/","title":"Personeel en gebruikers zijn voldoende AI-geletterd.","text":"<p>aia-01OrganisatieverantwoordelijkhedenProjectleiderMenselijke controleGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/#vereiste","title":"Vereiste","text":"<p>Personeel en gebruikers zijn voldoende AI-geletterd.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/#toelichting","title":"Toelichting","text":"<p>Aanbieders en gebruiksverantwoordelijken van AI-systemen nemen maatregelen om, zoveel als mogelijk, te zorgen voor een toereikend niveau van AI-geletterdheid bij hun personeel en andere personen die namens hen AI-systemen exploiteren en gebruiken.</p> <p>Zij houden daarbij rekening met hun technische kennis, ervaring, onderwijs en opleiding en de context waarin de AI-systemen zullen worden gebruikt, evenals met de personen of groepen personen ten aanzien van wie de AI-systemen zullen worden gebruikt.</p> <p>De AI-kennisplicht betekent bijvoorbeeld dat een HR-medewerker moet begrijpen dat een AI-systeem vooroordelen kan bevatten of essenti\u00eble informatie kan negeren, waardoor een sollicitant onterecht wel of juist niet wordt voorgedragen. En een baliemedewerker bij een gemeente die een AI-systemen gebruikt om de burgers te helpen, moet beseffen dat deze systemen vaak niet even goed werken voor iedereen. En dat diegene de uitkomsten van dit soort AI-systemen niet blindelings kan volgen.  </p> <p>Het doel is om een adequaat niveau van begrip en vaardigheden te waarborgen, wat bijdraagt aan een verantwoord gebruik van AI en het minimaliseren van risico's.</p> <p>Vanaf februari 2025 treedt deze vereiste in werking. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/#bronnen","title":"Bronnen","text":"<p>Artikel 4 Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAI-model voor algemene doeleindenhoog risico AI-systeemverboden AIgeen hoog risico AI-systeemAanbiederGebruiksverantwoordelijke</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/#risico","title":"Risico","text":"<p>Onvoldoende AI-geletterdheid kan leiden tot misbruik of onjuist gebruik van AI-systemen en tot situaties waarin AI-systemen verkeerd worden ingezet, onbedoeld gebruikt worden voor taken waar ze niet geschikt voor zijn, of dat de veiligheid en effectiviteit van de systemen in het gedrang komt.</p> <p>Dit kan leiden tot ineffici\u00ebntie, fouten, en mogelijk schade aan organisaties, gebruikers of betrokkenen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/","title":"Verboden AI-systemen mogen niet worden gebruikt.","text":"<p>aia-01OrganisatieverantwoordelijkhedenProbleemanalyseProjectleiderGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/#vereiste","title":"Vereiste","text":"<p>Verboden AI-systemen mogen niet worden gebruikt.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/#toelichting","title":"Toelichting","text":"<p>Afgezien van de vele nuttige toepassingen van AI kan zij ook worden misbruikt en nieuwe en krachtige instrumenten voor manipulatie, uitbuiting en sociale controle opleveren.  Dergelijke praktijken zijn bijzonder schadelijk en abusief en moeten worden verboden omdat zij in strijd zijn met de waarden van de Unie, namelijk eerbied voor de menselijke waardigheid, vrijheid, gelijkheid, democratie en de rechtsstaat, en met de grondrechten van de Unie die zijn vastgelegd in het Handvest, waaronder het recht op non-discriminatie, gegevensbescherming en privacy, en de rechten van het kind.</p> <p>In de volgende gevallen gaat het om een verboden toepassing op grond van de AI-Verordening: - gebruik kan gaan maken van subliminale technieken om mensen onbewust of bewust kunnen manipuleren, waardoor ze beslissingen nemen die ze anders niet zouden hebben genomen? - gebruik kan gaan maken van kwetsbaarheden van individuen of specifieke groepen, zoals leeftijd, handicaps of sociale/economische omstandigheden, om het gedrag van die personen aanzienlijk te verstoren, wat kan leiden tot aanzienlijke schade bij henzelf of anderen? - gebruikt kan worden om natuurlijke personen of groepen gedurende een periode te evalueren of te classificeren op basis van hun sociale gedrag of afgeleide persoonlijke kenmerken? - gebruikt kan worden voor risicobeoordelingen van natuurlijke personen om het risico op crimineel gedrag te voorspellen, gebaseerd op profilering of persoonlijkheidskenmerken? (Dit geldt niet voor AI-systemen die worden gebruikt om menselijke beoordelingen te ondersteunen, gebaseerd op objectieve en verifieerbare feiten die rechtstreeks verband houden met criminele activiteiten) - gebruikt kan worden om databanken voor gezichtsherkenning aan te leggen of aan te vullen door willekeurige gezichtsafbeeldingen van internet of CCTV-beelden te scrapen? - gebruikt kan worden om emoties van een persoon op de werkplek of in het onderwijs af te leiden? (Dit is niet van toepassing als het gebruik van het AI-systeem is bedoeld voor medische- of veiligheidsdoeleinden) - gebruikt kan worden om natuurlijke personen individueel in categorie\u00ebn in te delen op basis van biometrische gegevens om ras, politieke opvattingen, lidmaatschap van een vakbond, religieuze of levensbeschouwelijke overtuigingen, seksleven of seksuele geaardheid af te leiden? (Dit verbod geldt niet voor het labelen of filteren van rechtmatig verkregen biometrische datasets, zoals afbeeldingen, op basis van biometrische gegevens, of voor categorisering van biometrische gegevens op het gebied van rechtshandhaving) - gebruikt kan worden als een biometrisch systeem in de publieke ruimte voor identificatie op afstand in real-time, met het oog op de rechtshandhaving?</p> <p>Er zijn een tweetal uitzonderingen voor het inzetten van verbonden AI-systemen. Deze zijn: - Er is sprake van een rechtshandhavingsactiviteit i.v.m. een specifiek misdrijf (terrorisme, mensenhandel, seksuele uitbuiting van kinderen en materiaal over seksueel misbruik van kinderen, illegale handel in verdovende middelen en psychotrope stoffen, illegale handel in wapens, munitie en explosieven, moord, zware mishandeling, illegale handel in menselijke organen en weefsels, illegale handel in nucleaire en radioactieve stoffen, ontvoering, wederrechtelijke vrijheidsberoving en gijzeling, misdrijven die onder de rechtsmacht van het Internationaal Strafhof vallen, kaping van vliegtuigen/schepen, verkrachting, milieucriminaliteit, georganiseerde of gewapende diefstal, sabotage, deelneming aan een criminele organisatie die betrokken is bij een of meer van de bovengenoemde misdrijven). - Er is sprake van gerichte opsporing van specifieke slachtoffers, ontvoering, mensenhandel en seksuele uitbuiting van mensen, vermiste personen; of het voorkomen van bedreigingen voor het leven of de fysieke veiligheid van personen of het reageren op de huidige of voorzienbare dreiging van een terreuraanslag.</p> <p>Bepaal in een vroege fase en bij het onderbouwen van het gebruik van een AI-systeem of de beoogde toepassing is toegestaan. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/#bronnen","title":"Bronnen","text":"<p>Artikel 5 Verordening Artifici\u00eble Intelligentie.</p> <p>Overweging 29 - 44 AI-Verordening.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemverboden AIAanbiederGebruiksverantwoordelijke</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/#risico","title":"Risico","text":"<p>Er ontstaat een onrechtmatige situatie voor een organisatie als deze AI inzet, die verboden is. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/","title":"Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd.","text":"<p>aia-02OntwerpProjectleiderGovernanceTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/#vereiste","title":"Vereiste","text":"<p>Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/#toelichting","title":"Toelichting","text":"<p>Een aanbieder die van mening is dat er geen sprake is van een in bijlage III bedoeld AI-systeem, documenteert zijn beoordeling voordat dat systeem in de handel wordt gebracht of in gebruik wordt gesteld. </p> <p>Die aanbieder is onderworpen aan de registratieverplichting van artikel 49, lid 2 AI-verordening. Op verzoek van de nationale bevoegde autoriteiten verstrekt de aanbieder de documentatie van de beoordeling.</p> <p>De aanbieder of in voorkomend geval de gemachtigd registreert zichzelf en het betreffende AI-systeem in de EU-databank (artikel 71 AI-verordening).</p> <p>AI-systemen met een hoog risico als bedoeld in punt 2 van bijlage III (kritieke infrastructuur) worden op nationaal niveau geregistreerd.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 6(4) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 49(2) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 71 Verordening Artifici\u00eble Intelligentie</li> <li>Bijlage III Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/#risico","title":"Risico","text":"<p>Gebrek aan transparantie en verantwoording bij risicobeoordeling kan leiden tot onrechtmatig in de markt brengen en onrechtmatig gebruik van (risicovolle) AI-systemen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/","title":"Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem","text":"<p>aia-03OrganisatieverantwoordelijkhedenProjectleiderGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/#vereiste","title":"Vereiste","text":"<p>Voor AI-systemen met een hoog risico wordt een systeem voor risicobeheer vastgesteld, uitgevoerd, gedocumenteerd en in stand gehouden.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/#toelichting","title":"Toelichting","text":"<p>Het systeem voor risicobeheer moet bestaan uit een gepland iteratief proces, dat tijdens de gehele levensduur van een hoog-risico AI-systeem wordt doorlopen. Een organisatie moet ervoor zorgen dat een risicobeheersysteem wordt ingericht in de organisatie. </p> <p>Het risicobeheersysteem moet gericht zijn op het vaststellen en beperken van de relevante risico\u2019s van AI-systemen voor de gezondheid, veiligheid en grondrechten met passende maatregelen. </p> <p>Het systeem voor risicobeheer moet periodiek worden ge\u00ebvalueerd en geactualiseerd om de blijvende doeltreffendheid ervan te waarborgen, alsook de motivering en de documentatie van eventuele significante besluiten en maatregelen die op grond van de AI-verordening zijn genomen.</p> <p>Dit proces moet ervoor zorgen dat de aanbieder de risico\u2019s of negatieve effecten vaststelt en risicobeperkende maatregelen uitvoert voor de bekende en de redelijkerwijs te voorziene risico\u2019s van AI-systemen voor de gezondheid, veiligheid en grondrechten.</p> <p>Hierin moeten ook maatregelen zitten voor redelijkerwijs te voorzien misbruik, met inbegrip van de mogelijke risico\u2019s die voortvloeien uit de wisselwerking tussen het AI-systeem en de omgeving waarin het werkt. De aanbieder moet aandacht hebben voor het gebruik van AI-systemen waarvan, hoewel zij niet rechtstreeks onder het beoogde doel vallen en niet in de gebruiksinstructies worden vermeld, mag worden verwacht dat zij kunnen voortvloeien uit gemakkelijk voorspelbaar menselijk gedrag.</p> <p>Bij het vaststellen van passende risicobeheersmaatregelen moet de aanbieder de gemaakte keuzes hebben gedocumenteerd en voorzien van een toelichting en, in voorkomend geval, deskundigen en externe belanghebbenden hierbij betrekken.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/#bronnen","title":"Bronnen","text":"<p>Artikel 9(1) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/#risico","title":"Risico","text":"<p>Het ontbreken van risicobeheer kan leiden tot schade aan gebruikers of derden en wettelijke aansprakelijkheid voor de aanbieder.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/","title":"Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen.","text":"<p>aia-04OntwerpMonitoring en beheerProjectleiderBeleid en adviesFundamentele rechtenBias en non discriminatie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/#vereiste","title":"Vereiste","text":"<p>Bij het doorlopen, het periodieke systematische toetsen en actualiseren van het risicosysteem nemen aanbieders in overweging of het beoogde doel van het AI-systeem negatieve effecten zal hebben op personen jonger dan 18 jaar of andere kwetsbare groepen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/#toelichting","title":"Toelichting","text":"<p>Bij de uitvoering van het in de leden 1 tot en met 7 van art. 9 AI-Verordening bedoelde systeem voor risicobeheer houden aanbieders rekening met de vraag of het beoogde doel van het AI-systeem met een hoog risico waarschijnlijk negatieve gevolgen zal hebben voor personen jonger dan 18 jaar en, in voorkomend geval, voor andere groepen kwetsbare personen.</p> <p>Er moet een grondige risicoanalyse plaatsvinden en worden vertaald naar mitigerende maatregelen om het risico te elimineren of te mitigeren.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/#bronnen","title":"Bronnen","text":"<p>Artikel 9(9) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/#risico","title":"Risico","text":"<p>Niet adequaat adresseren van risico's voor jongeren en kwetsbare groepen kan leiden tot ernstige ethische en maatschappelijke schade.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/","title":"Datasets voor hoog-risico-AI-systemen voldoen aan kwaliteitscriteria","text":"<p>aia-05Dataverkenning en datapreparatieVerificatie en validatieProjectleiderOntwikkelaarData</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/#vereiste","title":"Vereiste","text":"<p>AI-systemen met een hoog risico die technieken gebruiken die het trainen van AI-modellen met data omvatten, worden ontwikkeld op basis van datasets voor training, validatie en tests die voldoen aan de kwaliteitscriteria telkens wanneer dergelijke datasets worden gebruikt.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/#toelichting","title":"Toelichting","text":"<p>AI-systemen met een hoog risico die data gebruiken voor het trainen van AI-modellen, moeten gebaseerd zijn op datasets die voldoen aan specifieke kwaliteitscriteria. </p> <p>Deze criteria zorgen ervoor dat de data geschikt zijn voor training, validatie en tests, wat de betrouwbaarheid en nauwkeurigheid van het AI-systeem waarborgt. De kwaliteitscriteria zijn te vinden in leden 2 t/m 5 van artikel 10 van de AI-verordening. Bijvoorbeeld datasets moeten aan praktijken voor databeheer voldoen en moeten relevant, representatief, accuraat en volledig zijn.</p> <p>Deze vereiste houdt in dat de gebruikte datasets onder meer moeten voldoen aan:</p> <ul> <li>datasets voor training, validatie en tests worden onderworpen aan praktijken op het gebied van databeheer die stroken met het beoogde doel van het AI-systeem met een hoog risico. Dit heeft in het bijzonder betrekking op relevante ontwerpkeuzes, processen voor dataverzameling, verwerkingsactiviteiten voor datavoorbereiding, het opstellen van aannames met name betrekking tot de informatie die de data moeten meten en vertegenwoordigen, beschikbaarheid, kwantiteit en geschiktheid van de datasets en een beoordeling op mogelijke vooringenomenheid en passende maatregelen om deze vooringenomenheid op te sporen, te voorkomen en te beperken. </li> <li>datasets voor training, validatie en tests zijn relevant, voldoende representatief en zoveel mogelijk foutenvrij en volledig met het oog op het beoogde doel.</li> <li>Er wordt rekening gehouden met de eigenschappen of elementen die specifiek zijn voor een bepaalde geografische, contextuele, functionele of gedragsomgeving waarin het AI-systeem wordt gebruikt.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/#bronnen","title":"Bronnen","text":"<p>Artikel 10(1) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/#risico","title":"Risico","text":"<p>Gebruik van laagkwalitatieve of bevooroordeelde datasets kan leiden tot onbetrouwbare en oneerlijke AI-besluitvorming. Onvoldoende kwaliteitsborging van testdata kan leiden tot vertekende resultaten en gebrekkige prestaties van het AI-systeem bij gebruik in de praktijk.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/","title":"Hoog-risico-AI-systemen zijn voorzien van voldoende technische documentatie.","text":"<p>aia-06Dataverkenning en datapreparatieOntwikkelenVerificatie en validatieProjectleiderOntwikkelaarTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/#vereiste","title":"Vereiste","text":"<p>Hoog-risico-AI-systemen zijn voorzien van voldoende technische documentatie.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/#toelichting","title":"Toelichting","text":"<p>De technische documentatie van een AI-systeem met een hoog risico wordt voorafgaand aan het in de handel brengen of in gebruik nemen opgesteld en regelmatig bijgewerkt.</p> <p>Deze documentatie moet duidelijk aantonen dat het systeem voldoet aan de vereisten van AI-Verordening (afdeling 2), zodat nationale autoriteiten en aangemelde instanties de naleving kunnen beoordelen. Daarvoor moet de informatie op een heldere en begrijpelijke wijze zijn opgesteld. </p> <p>De documentatie bevat ten minste de elementen zoals uiteengezet in bijlage IV AI-Verordening:</p> <ol> <li>Een algemene beschrijving van het AI-syseem.</li> <li>Een gedetailleerde beschrijving van de elementen van het AI-systeem en het proces voor de ontwikkeling ervan.</li> <li>Gedetailleerde informatie over de monitoring, werking en controle van het AI-systeem.</li> <li>Een beschrijving van de geschiktheid van de prestatiestatistieken.</li> <li>Een gedetailleerde beschrijving van het systeem voor risicobeheer overeenkomstig artikel 9 van de AI verordening.</li> <li>Een beschrijving van de wijzigingen die tijdens de levensduur worden aangebracht.</li> <li>Een lijst van normen die worden toegepast.</li> <li>Een exemplaar van de EU-conformiteitsverklaring.</li> <li>Een gedetailleerde beschrijving voor evaluatie van prestaties nadat het systeem in handel is gebracht, in overeenstemming met artikel 72 van de AI-verordening.</li> </ol> <p>De documentatie kan opgevraagd worden door een bevoegde autoriteit met een met redenen omkleed verzoek, zoals toegelicht in artikel 21 van de AI-verordening.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 11 Verordening Artifici\u00eble Intelligentie</li> <li>Bijlage IV Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/#risico","title":"Risico","text":"<p>Het ontbreken van de benodigde informatie over de algoritmische toepassing of AI-systeem kan ertoe leiden dat de technische functionering onduidelijk is. Dat kan tot problemen leiden bij de verantwoording, controle, beheer en conformiteit met regelgeving.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/#voorbeeld","title":"Voorbeeld","text":"<ul> <li>Gemeente Amsterdam - Onderzoekswaardigheid Algoritme \u2018Slimme check\u2019. (Een tool die de medewerkers helpt om te bepalen of een aanvraag levensonderhoud onderzoekswaardig is, niet meer in gebruik!): Technische documentatie.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/","title":"Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.","text":"<p>aia-07OntwikkelenMonitoring en beheerOntwikkelaarProjectleiderTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/#vereiste","title":"Vereiste","text":"<p>Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/#toelichting","title":"Toelichting","text":"<p>AI-systemen met een hoog risico zijn ontworpen met functionaliteiten die gebeurtenissen gedurende hun levenscyclus automatisch registreren. Dit wordt vaak aangeduid als \"logs\".</p> <p>Deze logs bieden een traceerbaarheidsmechanisme waarmee gebruiksverantwoordelijken en autoriteiten incidenten en fouten kunnen analyseren, naleving kunnen controleren en mogelijke risico's kunnen identificeren en aanpakken.</p> <p>Het doel van deze registratie is om de transparantie en verantwoordingsplicht van AI-systemen te vergroten, waardoor het beheer van risico's en incidenten verbetert. Voor AI-systemen met een hoog-risico voorziet de loggingcapaciteit ten minste in: </p> <ol> <li>de registratie van de duur van elk gebruik van het systeem; </li> <li>de referentiedatabank aan de hand waarvan de inputdata zijn gecontroleerd door het systeem; </li> <li>de inputdata ten aanzien waarvan de zoekopdracht een match heeft opgeleverd; </li> <li>de identificatie van natuurlijke personen die betrokken zijn bij de verificatie van de resultaten. Specifiek voor gebruiksverantwoordelijken</li> </ol> <p>Voor AI-systemen die door bestuursorganen worden gebruikt of AI-systmen die persoonsgegevens verwerken leveren de BIO en AVG vergelijkbare verplichingen op die ook van toepassing zijn op AI-systemen die niet gezien worden als een AI-systeem met hoog risico. Daarbij komen nog verplichtingen om de logs doorlopend of periodiek te monitoren op incidenten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 12 Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 26(6) Verordening Artifici\u00eble Intelligentie, zie ook deze vereiste over logging door gebruiksverantwoordelijke.</li> <li>Hoofdstuk 12.4 Baseline Informatiebeveiliging Overheid </li> <li>Artikel 5 en 32 Algemene Verordening Gegevensbescherming</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenhoog risico AI-systeemAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/#risico","title":"Risico","text":"<p>Ontbreken van automatische logregistratie kan leiden tot een gebrek aan transparantie en traceerbaarheid van het AI-systeem, wat het vermogen om verantwoordelijkheid te nemen en eventuele problemen aan te pakken belemmert.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/","title":"Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.","text":"<p>aia-08OntwerpOntwikkelenMonitoring en beheerProjectleiderOntwikkelaarBeleid en adviesTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/#vereiste","title":"Vereiste","text":"<p>Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/#toelichting","title":"Toelichting","text":"<p>AI-systemen met een hoog risico worden ontworpen en ontwikkeld met een hoge mate van transparantie, zodat gebruikers de output van het systeem kunnen begrijpen en correct kunnen gebruiken. </p> <p>Dit zorgt ervoor dat de aanbieders en gebruikers kunnen voldoen aan de verplichtingen zoals uiteengezet in de relevante regelgeving, waardoor de betrouwbaarheid en verantwoordelijkheid van het gebruik van deze systemen worden verzekerd. </p> <p>In artikel 13 lid 3 is een overzicht gegeven van de informatie die gebruikersinstructies tenminste moeten bevatten. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/#bronnen","title":"Bronnen","text":"<p>Artikel 13(1) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/#risico","title":"Risico","text":"<p>Onvoldoende transparantie kan leiden tot een gebrek aan begrip over hoe het AI-systeem functioneert, wat de effectiviteit van de inzet ervan kan belemmeren en de naleving van wettelijke verplichtingen in gevaar kan brengen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/","title":"Hoog-risico-AI-systemen staan onder menselijk toezicht.","text":"<p>aia-09OntwerpOntwikkelenMonitoring en beheerProjectleiderMenselijke controle</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/#vereiste","title":"Vereiste","text":"<p>Hoog-risico-AI-systemen staan onder menselijk toezicht. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/#toelichting","title":"Toelichting","text":"<p>AI-systemen met een hoog risico worden zodanig ontworpen en ontwikkeld, met inbegrip van passende mens-machine-interface-hulpmiddelen, dat hierop tijdens de periode dat zij worden gebruikt, op doeltreffende wijze toezicht kan worden uitgeoefend door natuurlijke personen.</p> <p>Het menselijk toezicht is gericht op het voorkomen of beperken van de risico\u2019s voor de gezondheid, veiligheid of grondrechten die zich kunnen voordoen wanneer een AI-systeem met een hoog risico wordt gebruikt in overeenstemming met het beoogde doel ervan of in een situatie van redelijkerwijs te voorzien misbruik, met name wanneer dergelijke risico\u2019s blijven bestaan ondanks de toepassing van andere eisen van deze afdeling.</p> <p>De te treffen toezichtmaatregelen staan in verhouding met de risico's, de mate van autonomie en de gebruikscontext van het AI-systeem met een hoog risico. Hierbij kan het gaan om:</p> <ol> <li>door de aanbieder bepaalde maatregelen die waar technisch haalbaar in het AI-systeem met een hoog risico worden ingebouwd voordat dit systeem in de handel wordt gebracht of in gebruik wordt gesteld;</li> <li>door de aanbieder bepaalde maatregelen voordat het AI-systeem met een hoog risico in de handel wordt gebracht of in gebruik wordt gesteld en die passend zijn om door de gebruiksverantwoordelijke te worden uitgevoerd.</li> </ol> <p>De natuurlijke personen die verantwoordelijk zijn voor het menselijk toezicht, moeten in staat worden gesteld om waar passend en in verhouding tot de omstandigheden het volgende te kunnen doen:</p> <ol> <li>Goed kunnen begrijpen van de relevante capaciteiten en beperkingen van het AI-systeem met een hoog risico. Met het oog op het opsporen en aanpakken van onregelmatigheden, storingen en onverwachte prestaties moet de werking van het AI-systeem goed kunnen worden begrepen;</li> <li>Bewust blijven van de mogelijke neiging om automatisch of te veel te vertrouwen op de output van een AI-systeem met hoog risico (automation bias). Dit geldt in het bijzonder voor het gebruik van een hoog risico AI-systeem dat wordt gebruikt om informatie of aanbevelingen te versterkken voor beslisisngen die door natuurlijke personen moeten worden genomen;</li> <li>De output juist kunnen interpreteren, bijvoorbeeld met behulp van de juiste hulpmiddelen en methoden voor interpretatie;</li> <li>In alle specifieke situaties kunnen besluiten om het hoog risico AI-systeem niet te gebruiken of de output op een andere wijze te negeren, door een andere beslissing te vervangen of terug te draaien;</li> <li>ingrijpen in de werking van het hoog risico AI-systeem of het systeem onderbreken door middel van een stopknop of een vergelijkbare procedure waarmee het systeem op een veilige wijze kan worden stopgezet.</li> </ol> <p>In het geval van een hoog risico systeem als bedoeld in bijlage III, punt 1, a  (systemen voor biometrische identificatie op afstand) geldt het vereiste dat twee natuurlijke personen met de nodige bekwaamheid, opleiding en bevoegdheid apart de indentificatie van het systeem verifici\u00ebren en bevestigen, tenzij het wordt gebruikt voor rechtshandhaving, migratie, grenstoezicht of asiel, in gevallen waarin het Unierecht of het nationale recht de toepassing van dit vereiste onevenredig acht.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/#bronnen","title":"Bronnen","text":"<p>Artikel 14 verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/#risico","title":"Risico","text":"<p>Ontbreken van betekenisvol menselijk toezicht kan leiden tot gebrek aan controle en begrip over het functioneren van het AI-systeem, wat kan resulteren in ongewenste of onvoorspelbare uitkomsten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/","title":"Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.","text":"<p>aia-10OntwerpOntwikkelenMonitoring en beheerProjectleiderBeleid en adviesOntwikkelaarTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/#vereiste","title":"Vereiste","text":"<p>Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/#toelichting","title":"Toelichting","text":"<p>AI-systemen met een hoog risico worden zorgvuldig ontworpen en ontwikkeld om een hoog niveau van nauwkeurigheid, robuustheid en cyberbeveiliging te bieden.</p> <p>Dit garandeert consistente prestaties gedurende hun levensduur en minimaliseert risico's met betrekking tot deze aspecten, waardoor de betrouwbaarheid en veiligheid van het systeem worden gewaarborgd.</p> <p>Technische robuustheid is een essenti\u00eble eis voor AI-systemen met een hoog risico. Deze systemen moeten bestand zijn tegen schadelijk of anderszins ongewenst gedrag dat kan voortvloeien uit de beperkingen binnen de systemen of de omgeving waarin de systemen opereren (bijvoorbeeld fouten, onregelmatigheden, onverwachte situaties).</p> <p>Er moeten technische en organisatorische maatregelen worden getroffen om de robuustheid van AI-systemen met een hoog risico te waarborgen. Een technische oplossing kan bijvoorbeeld bestaan uit mechanismen die het systeem in staat stellen zijn werking veilig te onderbreken (storingsbeveiligingsplannen) wanneer zich bepaalde anomalie\u00ebn voordoen of wanneer de werking buiten bepaalde vooraf bepaalde grenzen plaatsvindt.</p> <p>Cyberbeveiliging is cruciaal om te waarborgen dat AI-systemen bestand zijn tegen pogingen van kwaadwillige derden die gebruikmaken van de kwetsbaarheden van het systeem om het gebruik, het gedrag of de prestaties ervan te wijzigen of de veiligheidskenmerken ervan in gevaar te brengen.</p> <p>Bij cyberaanvallen tegen AI-systemen kunnen AI-specifieke activa worden gebruikt, zoals trainingsdatasets (bv. datavervuiling) of getrainde modellen (bv. vijandige aanvallen of membership inference), of kwetsbaarheden in de digitale activa van het AI-systeem of de onderliggende ICT-infrastructuur worden benut.</p> <p>Om te zorgen voor een niveau van cyberbeveiliging dat aansluit op de risico\u2019s, moeten aanbieders van AI-systemen met een hoog risico passende maatregelen zoals veiligheidscontroles nemen, waarbij ook rekening wordt gehouden met de onderliggende ICT infrastructuur.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/#bronnen","title":"Bronnen","text":"<p>Artikel 15 Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/#risico","title":"Risico","text":"<p>Gebrek aan nauwkeurigheid, robuustheid of cyberbeveiliging kan leiden tot onbetrouwbare prestaties, kwetsbaarheid voor storingen en blootstelling aan beveiligingsrisico's, wat de effectiviteit en veiligheid van het AI-systeem in gevaar kan brengen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/","title":"Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteem","text":"<p>aia-11OrganisatieverantwoordelijkhedenProjectleiderBeleid en adviesGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-systemen met een hoog risico voorzien in een systeem voor kwaliteitsbeheer dat de naleving van deze verordening waarborgt. Dit systeem wordt op systematische en ordelijke wijze gedocumenteerd in de vorm van schriftelijke beleidslijnen, procedures en instructies en omvat ten minste de aspecten vermeld in artikel 17 AI-verordening.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/#toelichting","title":"Toelichting","text":"<p>Aanbieders van AI-systemen met een hoog risico moeten een kwaliteitsbeheersysteem implementeren om te garanderen dat ze voldoen aan de AI-verordening. Dit systeem omvat gedocumenteerde beleidslijnen, procedures en instructies, en behandelt beknopt de volgende aspecten:</p> <ol> <li>een strategie voor de naleving van de regelgeving, inclusief de naleving van de conformiteitsbeoordelingsprocedures en de procedures voor het beheer van de wijzigingen van het AI-systeem met een hoog risico;</li> <li>technieken, procedures en systematische maatregelen die moeten worden toegepast voor het ontwerp, de controle van het ontwerp en de verificatie van het ontwerp van het AI-systeem met een hoog risico;</li> <li>technieken, procedures en systematische maatregelen die moeten worden toegepast voor de ontwikkeling, de kwaliteitscontrole en de kwaliteitsborging van het AI-systeem met een hoog risico;</li> <li>procedures voor het inspecteren, testen en valideren die v\u00f3\u00f3r, tijdens en na de ontwikkeling van het AI-systeem met een hoog risico moeten worden uitgevoerd en de regelmaat waarmee zij moeten worden uitgevoerd;</li> <li>technische specificaties, met inbegrip van normen, die moeten worden toegepast en, wanneer de relevante geharmoniseerde normen niet volledig worden toegepast of geen betrekking hebben op alle relevante eisen van afdeling 2, de middelen die worden gebruikt om ervoor te zorgen dat het AI-systeem met een hoog risico in overeenstemming is met deze eisen;</li> <li>systemen en procedures voor databeheer, met inbegrip van dataverwerving, - verzameling, -analyse, -labeling, -opslag, -zuivering, -aggregatie en -behoud en datamining en eventuele andere operaties met betrekking tot de data die worden uitgevoerd voorafgaand aan en met het oog op het in de handel brengen of in gebruik stellen van AI-systemen met een hoog risico;</li> <li>het systeem voor risicobeheer zoals bedoeld in artikel 9 van de AI-verordening;</li> <li>het opzetten, toepassen en onderhouden van een systeem voor monitoring na het in de handel brengen, overeenkomstig artikel 72 AI-verordening;</li> <li>procedures in verband met het melden van een ernstig incident in overeenstemming met artikel 73 van de AI-verordening;</li> </ol>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 17 Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 16(c) Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/#risico","title":"Risico","text":"<p>Zonder toepassing van een kwaliteitsbeheersysteem kunnen risico's ontstaan voor de veiligheid, betrouwbaarheid en naleving van het AI-systeem en conformiteit met wet- en regelgeving.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/","title":"Documentatie over hoog-risico-AI-systemen wordt 10 jaar bewaard door de aanbieder","text":"<p>aia-12OntwerpMonitoring en beheerUitfaserenProjectleiderTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/#vereiste","title":"Vereiste","text":"<p>De aanbieder houdt gedurende een periode van tien jaar nadat het AI-systeem met een hoog risico in de handel is gebracht of in gebruik is gesteld de volgende elementen ter beschikking van de nationale bevoegde autoriteiten: </p> <ol> <li>de technische documentatie als bedoeld in artikel 11 van de AI-verordening; </li> <li>de documentatie betreffende het in artikel 17 bedoelde systeem voor kwaliteitsbeheer; </li> <li>in voorkomend geval de documentatie betreffende de door aangemelde instanties goedgekeurde wijzigingen; </li> <li>in voorkomend geval de besluiten en andere documenten die door de aangemelde instanties zijn afgegeven; </li> <li>de EU-conformiteitsverklaring als bedoeld in artikel 47. </li> </ol>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/#toelichting","title":"Toelichting","text":"<p>De aanbieder moet gedurende tien jaar na het op de markt brengen of in gebruik nemen van het AI-systeem met een hoog risico de vereiste documentatie beschikbaar houden voor de nationale autoriteiten. Dit houdt in dat technische documentatie, documentatie over het kwaliteitsbeheersysteem, eventuele documentatie over besluiten en goedgekeurde wijzigingen door aangemelde instanties en de EU-conformiteitsverklaring beschikbaar moet zijn. Dit waarborgt dat de autoriteiten toegang hebben tot relevante informatie voor controle en naleving van de voorschriften gedurende deze periode.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 18(1) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 16(d) Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/#risico","title":"Risico","text":"<p>Niet voldoen aan de bewaartermijn kan leiden tot juridische consequenties en kan het vermogen van de autoriteiten om toezicht te houden op de naleving van de regelgeving belemmeren.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/","title":"Logs van hoog-risico-AI-systemen worden zes maanden bewaard door de aanbieder","text":"<p>aia-13OntwerpMonitoring en beheerUitfaserenProjectleiderTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-systemen met een hoog risico bewaren de in artikel 12, lid 1, bedoelde logs die automatisch worden gegenereerd door hun AI-systemen met een hoog risico voor zover dergelijke logs onder hun controle vallen. Onverminderd het toepasselijke Unie- of nationale recht worden deze logs bewaard gedurende een periode, die passend is voor het beoogde doel van het AI-systeem met een hoog risico, van ten minste zes maanden, tenzij anders is bepaald in het Unie- of nationaal recht, met name de Uniewetgeving inzake de bescherming van persoonsgegevens.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/#toelichting","title":"Toelichting","text":"<p>Aanbieders van AI-systemen met een hoog risico moeten de automatisch gegenereerde logs bewaren volgens de voorschriften van artikel 12, lid 1, zolang deze logs onder hun controle vallen. Deze logs moeten ten minste zes maanden worden bewaard, tenzij anders bepaald door Unie- of nationale wetgeving met betrekking tot gegevensbescherming, om te voldoen aan de relevante voorschriften en verantwoordingsplicht.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 19(1) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 16(e) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 12(1) Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/#risico","title":"Risico","text":"<p>Het niet of onvoldoende bewaren van logs kan het vermogen belemmeren om incidenten te analyseren, naleving te controleren en verantwoordelijkheid vast te stellen bij mogelijke problemen met het AI-systeem.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/","title":"Hoog-risico-AI-systemen worden pas geleverd of gebruikt na een conformiteitsbeoordelingsprocedure","text":"<p>aia-14Verificatie en validatieImplementatieJuristProjectleiderGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-systemen met een hoog risico zorgen ervoor dat voor het AI-systeem met een hoog risico een conformiteitsbeoordelingsprocedure wordt uitgevoerd voordat dit systeem in de handel wordt gebracht of in gebruik wordt gesteld</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/#toelichting","title":"Toelichting","text":"<p>Conformiteitsbeoordelingen dragen bij aan het kunnen vertrouwen op de kwaliteit van producten en diensten. Aanbieders van AI-systemen met een hoog risico moeten ervoor zorgen dat de conformiteitsbeoordelingsprocedure wordt uitgevoerd v\u00f3\u00f3rdat het systeem op de markt wordt gebracht of in gebruik wordt genomen. Hiervoor moet worden beoordeeld of het ontwikkelde hoog risico AI-systeem voldoet aan de vereisten die gelden voor deze systemen. Denk hierbij aan de vereisten van risicobeheer, technische documentatie, data en datagovernance en transparantie en informatieverstrekking aan gebruiksverantwoordelijken (Afdeling 2, AI-Verordening).  </p> <p>Een conformiteitbeoordeling kan worden uitgevoerd door middel van  - een interne controle (als bedoeld in bijlage VI van de AI-verordening) - of met betrokkenheid van een aangemelde instantie voor de beoordeling van het systeem voor kwaliteitsbeheer en de technische documentatie (als bedoeld in bijlage VII van de AI-verordening). Een conformiteitsbeoordeling door een aangemelde instatie wordt ookwel een conformiteitsbeoordeling door een derden genoemd. </p> <p>Als overheidsorganisaties hoog risico AI-systemen gebruiken van aanbieders of deze zelf ontwikkelen, zullen deze systemen veelal de conformiteitsbeoordeling middels een interne controle moeten doorlopen (bijlage VI). Let op! In het geval dat een hoog risico AI-systeem door een rechtshandhavingsinstantie, immigratie- of asielautoriteit wordt ingezet, dan zal de markttoezichtautoriteit als aangemelde instantie optreden die de conformiteitsbeoordeling zal uitvoeren.  </p> <p>AI-systemen met een hoog risico die al aan een conformiteitsbeoordelingsprocedure zijn onderworpen, ondergaan een nieuwe conformiteitsbeoordelingsprocedure telkens wanneer zij substantieel zijn gewijzigd, ongeacht of het gewijzigde systeem bedoeld is om verder te worden gedistribueerd of door de huidige gebruiksverantwoordelijke gebruikt blijft worden.</p> <p></p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 16(f) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 43 Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 76 Verordening Artifici\u00eble Intelligentie</li> <li>Bijlage VI Verordening Artifici\u00eble Intelligentie</li> <li>Bijlage VII Verordening Artifici\u00eble Intelligentie</li> <li>Hoe werkt het allemaal in de praktijk voor aanbieders van AI-systemen met een hoog risico</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/#risico","title":"Risico","text":"<p>Niet naleven van deze verplichtingen kan leiden tot juridische en operationele problemen, en kan de veiligheid en betrouwbaarheid van het AI-systeem in gevaar brengen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/","title":"Hoog-risico-AI-systemen zijn voorzien van een EU-conformiteitsverklaring","text":"<p>aia-15Verificatie en validatieImplementatieJuristProjectleiderGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-systemen met een hoog risico stellen een EU-conformiteitsverklaring op.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/#toelichting","title":"Toelichting","text":"<p>Een EU-conformiteitsverklaring is een verplicht document dat een fabrikant of gemachtigde vertegenwoordiger moet ondertekenen, waarmee wordt verklaard dat het product aan de EU-eisen voldoet. De aanbieder stelt voor elk AI-systeem met een hoog risico een schriftelijke machineleesbare, fysieke of elektronisch ondertekende EU-conformiteitsverklaring op en houdt deze verklaring tot tien jaar na het in de handel brengen of het in gebruik stellen van het AI-systeem met een hoog risico ter beschikking van de nationale bevoegde autoriteiten. De conformiteitsverklaring bevat de informatie zoals genoemd in bijlage V AI-verordening. Voorbeelden hiervan zijn de naam en type van het AI-systeem, naam en adres van de aanbieder, dat de EU-conformiteitsverklaring wordt versterkt onder verantwoordelijkheid van de aanbieder en de vermelding van eventuele toegepaste relevante geharmoniseerde normen of van andere gemeenschappelijke specificaties waarop de conformiteitsverklaring betrekking heeft.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 16(g) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 47(1) Verordening Artifici\u00eble Intelligentie</li> <li>Bijlage V Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/#risico","title":"Risico","text":"<p>Niet naleven van deze verplichtingen kan leiden tot juridische en operationele problemen, en kan de veiligheid en betrouwbaarheid van het AI-systeem in gevaar brengen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/","title":"Hoog-risico-AI-systemen zijn voorzien van een CE-markering","text":"<p>aia-16ImplementatieProjectleiderTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-systemen met een hoog risico moeten een CE-markering toevoegen aan het AI-systeem met een hoog risico of, wanneer dit niet mogelijk is, op de verpakking of in de bij het product gevoegde documentatie, om aan te geven dat aan de AI-verordening is voldaan.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/#toelichting","title":"Toelichting","text":"<p>Op AI-systemen met een hoog risico moet de CE-markering worden aangebracht om aan te geven dat zij in overeenstemming zijn met de AI-verordening, zodat het vrije verkeer ervan op de interne markt mogelijk is. Op AI-systemen met een hoog risico die in een product zijn ge\u00efntegreerd moet een fysieke CE-markering worden aangebracht, die kan worden aangevuld met een digitale CE-markering. Voor AI-systemen met een hoog risico die alleen digitaal worden verstrekt, moet een digitale CE-markering worden gebruikt. De lidstaten mogen het in de handel brengen en het in gebruik stellen van AI-systemen met een hoog risico die aan de in de AI-verordening vastgelegde eisen voldoen en waarop de CE-markering is aangebracht, niet op ongerechtvaardigde wijze belemmeren.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 16(h) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 48 Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/#risico","title":"Risico","text":"<p>Niet naleven van deze verplichtingen kan leiden tot juridische en operationele problemen, en kan de veiligheid en betrouwbaarheid van het AI-systeem in gevaar brengen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/","title":"Hoog-risico-AI-systemen zijn geregistreerd in de EU-databank","text":"<p>aia-17ImplementatieProjectleiderGovernanceTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-systemen met een hoog risico leven de registratieverplichtingen als bedoeld in artikel 49 na, wat betekent dat voor het in de handel brengen of in bedrijf te stellen van het hoog risico AI-systeem, de aanbieder of in voorkomende gevallen de gemachtigde het systeem registreert in de EU-databank.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/#toelichting","title":"Toelichting","text":"<p>V\u00f3\u00f3r de distributie of inbedrijfstelling van een AI-systeem met een hoog risico van bijlage III, met uitzondering van specifieke gevallen zoals beschreven in punt 2 van bijlage III, is het vereist dat de aanbieder of gemachtigde zichzelf en het systeem registreert in de EU-databank zoals genoemd in art. 71 AI-verordening.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 16(i) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 49(1) Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/#risico","title":"Risico","text":"<p>Niet naleven van deze verplichtingen kan leiden tot juridische en operationele problemen, en kan de veiligheid en betrouwbaarheid van het AI-systeem in gevaar brengen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/","title":"Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in","text":"<p>aia-18OrganisatieverantwoordelijkhedenMonitoring en beheerProjectleiderMenselijke controleTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-systemen met een hoog risico die van mening zijn of redenen hebben om aan te nemen dat een door hen in de handel gebracht of in gebruik gesteld AI systeem met een hoog risico niet in overeenstemming is met de AI-verordening, nemen onmiddellijk de nodige corrigerende maatregelen om dat systeem naargelang het geval in overeenstemming te brengen, uit de handel te nemen, te deactiveren of terug te roepen. Zij stellen de distributeurs van het betrokken AI-systeem met een hoog risico en, indien van toepassing, de gebruiksverantwoordelijken, de gemachtigden en importeurs dienovereenkomstig in kennis.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/#toelichting","title":"Toelichting","text":"<p>Aanbieders van AI-systemen met een hoog risico die constateren dat hun systeem niet aan de verordening voldoet, moeten onmiddellijk corrigerende acties ondernemen, zoals het terugroepen of uit de handel nemen van het systeem. Ze moeten ook alle relevante partijen, zoals distributeurs, gebruiksverantwoordelijken en importeurs, op de hoogte stellen van deze maatregelen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 20 Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 16(j) Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/#risico","title":"Risico","text":"<p>Niet reageren op non-conformiteit kan leiden tot risico's voor gebruikers en derden. Het kan leiden tot juridische procedures en reputatieschade voor organisaties.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/","title":"Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen","text":"<p>aia-19OntwerpProjectleiderOntwikkelaarMenselijke controleTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-systemen met een hoog risico zorgen ervoor dat het AI-systeem met een hoog risico voldoet aan de toegankelijkheidseisen overeenkomstig de Richtlijnen (EU) 2016/2102 en (EU) 2019/882</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/#toelichting","title":"Toelichting","text":"<p>Aanbieders van AI-systemen met een hoog risico moeten ervoor zorgen dat hun systeem toegankelijk is volgens de EU-richtlijnen 2016/2102 en 2019/882. In het kader van Richtlijn 2016/2102 moet onder toegankelijkheid worden verstaan het geheel van principes en technieken die in acht moeten worden genomen bij het ontwerpen, bouwen, beheren en bijwerken van websites en mobiele applicaties om hen voor gebruikers toegankelijker te maken, met name voor personen met een beperking. Bijlage 1 bevat de toegankelijkheidsvoorschriften voor producten en diensten die moeten worden toegepast op hoog-risico-AI-systemen.</p> <p>Richtlijn 2019/882 strekt ertoe een bijdrage te leveren tot het goed functioneren van de interne markt middels onderlinge  aanpassing van de wettelijke en bestuursrechtelijke bepalingen van de lidstaten inzake de toegankelijkheidsvoorschriften  voor bepaalde producten en diensten, in het bijzonder door het wegwerken en voorkomen van belemmeringen voor het vrije verkeer van onder deze richtlijn vallende producten en diensten ten gevolge van uiteenlopende toegankelijkheidsvoorschriften in de lidstaten</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 16(l) Verordening Artifici\u00eble Intelligentie</li> <li>EU-richtlijn 2016/2102</li> <li>EU-richtlijn 2019/882</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/#risico","title":"Risico","text":"<p>Niet naleven van deze verplichtingen kan leiden tot juridische en operationele problemen, en kan de veiligheid en betrouwbaarheid van het AI-systeem in gevaar brengen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/","title":"Hoog-risico-AI-systemen worden gebruikt volgens de gebruiksaanwijzing","text":"<p>aia-20OrganisatieverantwoordelijkhedenImplementatieProjectleiderOntwikkelaarGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/#vereiste","title":"Vereiste","text":"<p>Gebruiksverantwoordelijken van AI-systemen met een hoog risico nemen passende technische en organisatorische maatregelen om te waarborgen dat zij dergelijke systemen gebruiken in overeenstemming met de gebruiksaanwijzingen die bij de systemen zijn gevoegd, in overeenstemming met de leden 3 en 6 van artikel 26 van de AI-verordening.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/#toelichting","title":"Toelichting","text":"<p>Gebruiksverantwoordelijken van AI-systemen met een hoog risico moeten geschikte maatregelen nemen om ervoor te zorgen dat zij deze systemen gebruiken volgens de bijgevoegde instructies. De gebruiksverantwoordelijke zorgt ervoor dat de inputdata relevant en voldoende representatief zijn voor het beoogde doel van het AI-systeem met een hoog risico, voor zover hij daar controle over heeft.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/#bronnen","title":"Bronnen","text":"<p>Artikel 26(1) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenGebruiksverantwoordelijke</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/#risico","title":"Risico","text":"<p>Het niet naleven van deze maatregelen kan leiden tot onjuist gebruik van de AI-systemen, wat de effectiviteit en veiligheid ervan kan verminderen, en kan resulteren in risico's voor gebruikers en derden.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/","title":"Menselijke controle van hoog-risico-AI-systemen wordt uitgevoerd door mensen met voldoende kennis en mogelijkheden","text":"<p>aia-21OrganisatieverantwoordelijkhedenProjectleiderGovernanceMenselijke controle</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/#vereiste","title":"Vereiste","text":"<p>Gebruiksverantwoordelijken dragen het menselijk toezicht over een hoog risico AI-systeem op aan natuurlijke personen die over de nodige bekwaamheid, opleiding en autoriteit beschikken en de nodige ondersteuning krijgen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/#toelichting","title":"Toelichting","text":"<p>Het is van belang dat natuurlijke personen die het menselijk toezicht moeten uitvoeren over het AI-systeem met een hoog risico, daarvoor over de nodige bekwaamheid, opleiding en autoriteit beschikt. Daarbij kan het van belang zijn dat deze natuurlijke personen ondersteuning krijgen bij het uitvoeren van deze taak.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 26(2) Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenGebruiksverantwoordelijke</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/#risico","title":"Risico","text":"<p>Als de natuurlijke toezichthouder geen effectief toezicht kan houden op het hoog risico AI-systeem, kunnen ongewenste, negatieve effecten onstaan voor betrokkenen en de organisatie.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/","title":"De werking van hoog-risico-AI-systemen wordt gemonitord","text":"<p>aia-22Monitoring en beheerProjectleiderMenselijke controle</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/#vereiste","title":"Vereiste","text":"<p>Gebruiksverantwoordelijken monitoren de werking van het AI-systeem met een hoog risico op basis van de gebruiksaanwijzingen en stellen in voorkomend geval de aanbieders in kennis overeenkomstig artikel 72 AI Verordening</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/#toelichting","title":"Toelichting","text":"<p>Gebruiksverantwoordelijken moeten de werking van hoog risico AI-systemen monitoren. Dit is van belang om passende maatregelen te kunnen treffen als het systeem onbedoeld anders gaat functioneren.</p> <p>Wanneer gebruiksverantwoordelijken redenen hebben om aan te nemen dat het gebruik overeenkomstig de gebruiksaanwijzingen ertoe kan leiden dat dat AI-systeem een risico vormt in de zin van artikel 79, lid 1, stellen zij de aanbieder of distributeur en de betreffende markttoezichtautoriteit hiervan zonder onnodige vertraging in kennis en onderbreken zij het gebruik van dat systeem. Wanneer gebruiksverantwoordelijke een ernstig incident vaststellen, stellen zij ook onmiddellijk eerst de aanbieder hiervan in kennis, en vervolgens de importeur of distributeur en de betreffende markttoezichtautoriteiten van dat incident. Wanneer de gebruiksverantwoordelijke de aanbieder niet kan bereiken, is artikel 73 mutatis mutandis van toepassing. Deze verplichting geldt niet voor gevoelige operationele gegevens van gebruiksverantwoordelijke van AI-systemen die de hoedanigheid van rechtshandhavingsinstanties hebben.</p> <p>Voor gebruiksverantwoordelijke die in de hoedanigheid van financi\u00eble instellingen onderworpen zijn aan eisen met betrekking tot hun interne governance, regelingen of processen uit hoofde van het Unierecht inzake financi\u00eble diensten, wordt de monitoringsverplichting overeenkomstig de eerste alinea geacht te zijn vervuld door te voldoen aan de regels inzake interne governance, regelingen of processen en -mechanismen uit hoofde van het desbetreffende recht inzake financi\u00eble diensten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/#bronnen","title":"Bronnen","text":"<p>Artikel 26(5) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenGebruiksverantwoordelijke</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/#risico","title":"Risico","text":"<p>Zonder monitoring door gebruiksverantwoordelijken en (waar nodig) het informeren van aanbieder, distributeur of markttoezichtautoriteit, kan de foutieve werking van een hoog risico AI-systeem niet worden gesignaleerd en hersteld.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/","title":"Logs voor hoog-risico-AI-systemen worden bewaard door de gebruiksverantwoordelijke","text":"<p>aia-23OntwikkelenMonitoring en beheerProjectleiderTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/#vereiste","title":"Vereiste","text":"<p>Gebruiksverantwoordelijken van AI-systemen met een hoog risico bewaren de logs die automatisch worden gegenereerd door dat AI-systeem met een hoog risico voor zover dergelijke logs onder hun controle vallen gedurende een periode die passend is voor het beoogde doel van het AI-systeem met een hoog risico, of ten minste zes maanden, tenzij anders is bepaald in het toepasselijke Unie- of nationaal recht, meer in het bijzonder het Unierecht over de bescherming van persoonsgegevens</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/#toelichting","title":"Toelichting","text":"<p>Anders dan in artikel 16(e) AI-verordening, waar een vergelijkbare vereiste geldt voor aanbieders, gaat het hier om een vereiste specifiek voor de gebruiksverantwoordelijken. Het is van belang dat de gebruiksverantwoordelijken een zelfstandige beoordeling maakt wat moet worden gelogd en voor welke periode gezien de doelstelling van de inzet van het AI-systeem. Daarbij is het van belang om te beoordelen in hoeverre een gebruiksverantwoordelijke hier 'controle' over heeft. De gebruiksverantwoordelijke zal, al dan niet samen met de aanbieder, (technische) maatregelen moeten treffen om dit te realiseren.</p> <p>Gebruiksverantwoordelijken die in de hoedanigheid van financi\u00eble instellingen onderworpen zijn aan eisen met betrekking tot hun interne governance, regelingen of processen uit hoofde van het Unierecht inzake financi\u00eble diensten bewaren de logs als onderdeel van de documentatie die bewaard wordt krachtens het desbetreffende Unierecht inzake financi\u00eble diensten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/#bronnen","title":"Bronnen","text":"<p>Artikel 26(6) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenGebruiksverantwoordelijke</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/#risico","title":"Risico","text":"<p>Het niet of onvoldoende bewaren van logs kan het vermogen belemmeren om incidenten te analyseren, naleving te controleren en verantwoordelijkheid vast te stellen bij mogelijke problemen met het AI-systeem.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-24-informeren-werknemers/","title":"Werknemers weten dat hun organisatie een hoog-risico AI-systeem gebruikt","text":"<p>aia-24ImplementatieProjectleiderTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-24-informeren-werknemers/#vereiste","title":"Vereiste","text":"<p>Voordat een AI-systeem met een hoog risico op de werkplek in gebruik wordt gesteld of wordt gebruikt, delen gebruiksverantwoordelijken die werkgever zijn werknemersvertegenwoordigers en de betrokken werknemers mee dat zij zullen worden onderworpen aan het gebruik van het AI-systeem met een hoog risico. Deze informatie wordt, indien van toepassing, verstrekt in overeenstemming met de in het Unie- en nationaal recht vastgelegde regels en procedures en de praktijk inzake informatie van werknemers en hun vertegenwoordigers.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-24-informeren-werknemers/#toelichting","title":"Toelichting","text":"<p>Dit vereiste benadrukt het belang van het informeren van werknemersvertegenwoordigers en betrokken werknemers over de inzet van een hoog risico AI-systeem op de werkplaats. Dit dient voorafgaand aan de inzet van het systeem plaats te vinden. De gebruiksverantwoordelijke als werknemer dient hier zorg voor te dragen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-24-informeren-werknemers/#bronnen","title":"Bronnen","text":"<p>Artikel 26(7) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-24-informeren-werknemers/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenGebruiksverantwoordelijke</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-24-informeren-werknemers/#risico","title":"Risico","text":"<p>Als werknemersvertegenwoordigers en werknemers niet worden ge\u00efnformeerd over de inzet van een hoog risico AI-systeem, kunnen zij zich niet weren tegen mogelijk ongewenste en negatieve effecten van de inzet van het hoog risico AI-systeem.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/","title":"Gebruiksverantwoordelijken controleren de registratie van het hoog-risico AI-systeem in de EU-databank","text":"<p>aia-25OrganisatieverantwoordelijkhedenImplementatieMonitoring en beheerProjectleiderTransparantieGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/#vereiste","title":"Vereiste","text":"<p>Gebruiksverantwoordelijken van AI-systemen met een hoog risico die de hoedanigheid van overheidsinstanties of instellingen, organen of instanties van de Unie hebben, leven de in artikel 49 bedoelde registratieverplichtingen na. Wanneer deze gebruiksverantwoordelijke vaststellen dat het AI-systeem met een hoog risico dat zij voornemens zijn te gebruiken niet in de in artikel 71 bedoelde EU-databank is geregistreerd, gebruiken zij dat systeem niet en stellen zij de aanbieder of de distributeur daarvan in kennis.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/#toelichting","title":"Toelichting","text":"<p>Het is van belang dat gebruiksverantwoordelijken nagaan of het betreffende hoog risico AI-systeem door aanbieder is geregistreerd in de EU-databank (zoals omschreven in artikel 71 AI-verordening). Voordat het betreffende AI-systeem (bijlage III vermeld AI-systeem met een hoog risico) in gebruik te stellen of te gebruiken (met uitzondering van de in punt 2 van bijlage III vermelde AI-systemen met een hoog risico) registreren gebruiksverantwoordelijken die overheidsinstanties, instellingen, organen of instanties van de Unie, of personen die namens hen optreden, zichzelf en selecteren zij het systeem en registreren zij het gebruik ervan in de in artikel 71 bedoelde EU-databank.</p> <p>Heeft de aanbieder het betreffende hoog risico AI-systeem niet geregistreerd in de EU-Databank, dan mag het hoog risico AI-systeem niet worden gebruikt. De aanbieder of distributeur wordt door de gebruiksverantwoordelijke ge\u00efnformeerd dat het systeem niet is geregistreerd in de EU-databank.</p> <p>AI-systemen met een hoog risico als bedoeld in punt 2 van bijlage III (kritieke infrastructuur) worden op nationaal niveau geregistreerd.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 26(8) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 49 (3) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 71 Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenGebruiksverantwoordelijke</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/#risico","title":"Risico","text":"<p>Zonder registratie van het hoog risico AI-systeem en het registreren welke organisaties of personen hier gebruik van maken, is het negatieve negatieve van het mogelijk onjuist of ongewenst functioneren van het AI-systeem niet te overzien en onduidelijk welke betrokken dit raakt.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/","title":"Mensen over wie besluiten worden genomen door een hoog-risico-AI-systemen, krijgen op verzoek informatie over deze besluiten","text":"<p>aia-28OrganisatieverantwoordelijkhedenOntwerpMonitoring en beheerProjectleiderGovernanceFundamentele rechtenTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/#vereiste","title":"Vereiste","text":"<p>Elke getroffen persoon op wie een besluit van toepassing is dat door de gebruiksverantwoordelijke wordt genomen op basis van de output van een in bijlage III vermeld AI-systeem met een hoog risico, met uitzondering van systemen die in punt 2 van die bijlage zijn vermeld, en dat rechtsgevolgen heeft voor die persoon, of op deze op vergelijkbare wijze aanzienlijke invloed heeft die hij of zij als nadelige gevolgen voor zijn of haar gezondheid, veiligheid of grondrechten beschouwt, heeft het recht om van de gebruiksverantwoordelijke duidelijke, inhoudelijke toelichting te verkrijgen bij de rol van het AI-systeem in de besluitvormingsprocedure en de voornaamste elementen van het genomen besluit.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/#toelichting","title":"Toelichting","text":"<p>Getroffen personen moeten het recht hebben om uitleg te krijgen indien het besluit van een gebruiksverantwoordelijke voornamelijk is gebaseerd op de output van bepaalde AI-systemen met een hoog risico die binnen het toepassingsgebied van de AI-verordening vallen en indien dat besluit rechtsgevolgen of gelijkaardige aanzienlijke gevolgen heeft voor de gezondheid, veiligheid of grondrechten van die personen. Die uitleg moet duidelijk en zinvol zijn en moet de grondslag zijn waarop de getroffen personen zich kunnen baseren om hun rechten uit te oefenen. Het recht om uitleg te krijgen mag niet van toepassing zijn op het gebruik van AI-systemen waarvoor uitzonderingen of beperkingen voortvloeien uit het Unierecht of het nationale recht en moet alleen van toepassing zijn voor zover het Unierecht niet reeds in dit recht voorziet. Dit vereiste geldt bijvoorbeeld niet als het gaat om AI-systemen die bedoeld zijn om te worden gebruikt als veiligheidscomponent bij het beheer of de exploitatie van kritieke digitale infrastructuur, wegverkeer of bij de levering van water, gas, verwerking en electriciteit (punt 2 bij Bijlage III van AI-verordening).</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 86(1) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 26(11) Verordening Artifici\u00eble Intelligentie</li> <li>Bijlage III Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenGebruiksverantwoordelijke</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/#risico","title":"Risico","text":"<p>Als gebruiksverantwoordelijke geen duidelijke, inhoudelijke toelichting geeft over de rol van het AI-systeem in de besluitvormingsprocedure en de voornaamste elementen bij het genomen besluit, is het voor getroffen personen niet mogelijk zich te verdedigen tegen de rechtsgevolgen die hieruit voortkomen of de nadelige gevolgen voor gezondheid, veiligheid of diens grondrechten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/","title":"Hoog-risico-AI-systemen voor publieke taken worden beoordeeld op gevolgen voor grondrechten","text":"<p>aia-29OntwerpVerificatie en validatieProjectleiderBeleid en adviesFundamentele rechten</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/#vereiste","title":"Vereiste","text":"<p>Voordat een AI-systeem met een hoog risico als bedoeld in artikel 6, lid 2 AI-verordening, in gebruik wordt genomen, met uitzondering van AI-systemen met een hoog risico die bedoeld zijn om te worden gebruikt op het in punt 2 van bijlage III vermelde gebied, voeren operatoren die publiekrechtelijke instellingen zijn of particuliere entiteiten zijn die openbare diensten verlenen, en operatoren van AI-systemen met een hoog risico als bedoeld in bijlage III, punt 5, onder b) en c), een beoordeling uit van de gevolgen voor de grondrechten die het gebruik van een dergelijk systeem kan opleveren.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/#toelichting","title":"Toelichting","text":"<p>Voordat een AI-systeem met een hoog risico in gebruik wordt genomen, moeten publieke instellingen of particuliere entiteiten die openbare diensten leveren, en operators van bepaalde AI-systemen, een beoordeling uitvoeren van de impact op de grondrechten die het gebruik ervan kan hebben. Deze evaluatie is bedoeld om potenti\u00eble risico's te identificeren die kunnen voortvloeien uit het gebruik van dergelijke systemen en om passende maatregelen te nemen om deze risico's te beheersen. Het doel is om de bescherming van grondrechten te waarborgen bij het gebruik van AI-systemen met een hoog risico, met name in sectoren waar deze systemen cruciale diensten leveren aan het publiek.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 27(1) Verordening Artifici\u00eble Intelligentie</li> <li>Artikel 6.2 Verordening Artifici\u00eble Intelligentie</li> <li>Bijlage III.2 en III.5 Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenGebruiksverantwoordelijke</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/#risico","title":"Risico","text":"<p>Het niet uitvoeren van deze beoordeling kan leiden tot schendingen van de grondrechten, juridische complicaties en verlies van vertrouwen van het publiek in het gebruik van AI-systemen door overheids- en openbare dienstverlenende entiteiten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/#hulpmiddelen","title":"Hulpmiddelen","text":"HulpmiddelenImpact Assessment Mensenrechten en Algoritmes"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/","title":"AI-systemen worden zo ontworpen en gebruikt, dat mensen begrijpen wanneer zij met een AI-systeem communiceren en welke content gemaakt is door een AI-systeem","text":"<p>aia-28OntwikkelenImplementatieProjectleiderOntwikkelaarTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-systemen zorgen dat AI-sytemen zodanig worden ontworpen en ontwikkeld dat de betrokken natuurlijke personen worden ge\u00efnformeerd dat zij interacteren met een AI-systeem.  Gebruiksverantwoordelijken moeten betrokkenen informeren over de werking van het systeem en in het geval van een AI-systeem dat content gegenereert duidelijk kenbaar maken dat de content kunstmatig is gegenereerd of gemanipuleerd.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/#toelichting","title":"Toelichting","text":"<p>Dit geldt voor AI-systemen die:</p> <ul> <li>gebruikt worden voor directe interactie met natuurlijke personen (zoals chatbots). </li> <li>synthetische afbeeldingen, audio, video of tekst genereert en/of manipuleert (bijvoorbeeld deepfake).</li> <li>doen aan emotieherkenning of biometrische categorisatie.</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 50 Verordening Artifici\u00eble Intelligentie</li> <li>Overweging 132 Verordening Artifici\u00eble Intelligentie</li> <li>Overweging 134 Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenhoog risico AI-systeemgeen hoog risico AI-systeemAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/#risico","title":"Risico","text":"<p>Bepaalde AI-systemen die bedoeld zijn om met natuurlijke personen te interageren of om content te genereren, kunnen specifieke risico\u2019s op imitatie of misleiding met zich meebrengen, ongeacht of zij als systeem met een hoog risico gelden. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/","title":"AI-modellen voor algemene doeleinden zijn voorzien van voldoende technische documentatie en informatie","text":"<p>aia-29OntwerpOntwikkelenMonitoring en beheerProjectleiderTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-modellen voor algemene doeleinden moeten (technische) informatie en documentatie opstellen, up-to-date houden en beschikbaar stellen voor aanbieders van AI-systemen die het AI-model voor algemene doeleinden in hun AI-systemen willen integreren.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/#toelichting","title":"Toelichting","text":"<p>Aanbieders van AI-modellen voor algemene doeleinden hebben een bijzondere rol en verantwoordelijkheid. Zij leveren modellen die de basis kunnen vormen voor weer andere systemen en algoritmen, die vaak weer door andere partijen worden aangeboden dan de ontwikkelaar van het algemene systeem. Dit vraagt om een goed inzicht in de modellen en hun capaciteiten, zowel qua integratie van de modellen in producten als qua naleving van verplichtingen.</p> <p>Er zijn daarom evenredige transparantiemaatregelen nodig, zoals het opstellen en bijwerken van documentatie en verstrekken van informatie over het AI-model voor algemeen gebruik door de aanbieders van systemen die de algemene modellen gebruiken in hun product. De aanbieder van het AI-model voor algemene doeleinden dient technische documentatie op te stellen en bij te werken om deze op verzoek te kunnen overleggen aan het AI-bureau en de nationale bevoegde autoriteiten. De minimaal in de documentatie op te nemen elementen moeten worden vastgelegd volgens bijlage XII van de AI-Verordening. Hierbij is het ook van belang dat de aanbieder van AI-modellen voor algemene doelstelling beleid opstellen voor naleving van auteursrechten en naburige rechten (artikel 4, lid 3 Richtlijn (EU) 2019/790).</p> <p>In art. 53 lid 2 wordt een uitzondering gemaakt op deze vereisten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/#bronnen","title":"Bronnen","text":"<p>Artikel 53 Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-model voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/#risico","title":"Risico","text":"<p>Het niet voldoen aan deze verplichtingen kan leiden tot juridische en ethische complicaties, inclusief schendingen van auteursrechten en gebrek aan transparantie in het gebruik van AI-modellen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/","title":"Aanbieders van AI-modellen voor algemene doeleinden met een systeemrisico treffen extra maatregelen","text":"<p>aia-30OntwikkelenVerificatie en validatieMonitoring en beheerProjectleiderOntwikkelaarTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-modellen voor algemene doeleinden met een systeemrisico moeten modelevaluatie uitvoeren overeenkomstig gestandaardiseerde protocollen en instrumenten die de stand van de techniek weerspiegelen, met inbegrip van het uitvoeren en documenteren van tests gericht op het ontdekken van kwetsbaarheden van het model om systeemrisico\u2019s in kaart te brengen en te beperken.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/#toelichting","title":"Toelichting","text":"<p>De aanbieders van AI-modellen voor algemene doeleinden die systeemrisico\u2019s inhouden, moeten, naast de verplichtingen voor aanbieders van AI-modellen voor algemene doeleinden, onderworpen worden aan verplichtingen die gericht zijn op het identificeren en beperken van die risico\u2019s en op waarborging van een passend niveau van cyberbeveiliging, ongeacht of het model een op zichzelf staand model is of ingebed in een AI-systeem of in een product. Aanbieders van AI-modellen voor algemene doeleinden met een potentieel systeemrisico moeten modelevaluaties uitvoeren. Dit omvat het testen en documenteren van het model volgens de stand van de techniek, met specifieke aandacht voor het identificeren en beperken van kwetsbaarheden. Deze maatregelen zijn bedoeld om systematische risico's te adresseren en te verminderen. Deze vereiste is een aanvulling op de genoemde verplichtingen in artikel 53 van de AI-verordening.</p> <p>Systeemrisico betekent: een risico dat specifiek is voor de capaciteiten met een grote impact van AI-modellen voor algemene doeleienden, die aanzienlijke gevolgen hebben voor de markt van de Uniek vanwege hun bereik, of vanwege feitelijke of redelijkerwijs te voorziene negatieve gevolgen voor de gezondheid, de veiligheid, de openbare veiligheid, de grondrechten of de samenleving als geheel, en dat op grote schaal in de hele waardeketen kan worden verspreid.</p> <p>Systeemrisico\u2019s nemen logischerwijs toe naargelang de capaciteiten en het bereik van een model groter zijn, kunnen zich voordoen gedurende de gehele levenscyclus van het model en worden be\u00efnvloed door elementen als misbruik van het model, de betrouwbaarheid, billijkheid, beveiliging en mate van autonomie ervan. Ook worden ze be\u00efnvloed door de toegang van het model tot instrumenten, nieuwe of gecombineerde modaliteiten, introductie- en distributiestrategie\u00ebn, en door het potentieel om waarborgen te omzeilen en andere factoren.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 55 Verordening Artifici\u00eble Intelligentie</li> <li>[Overweging 110 Verordening Artifici\u00eble Intelligentie]</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-model voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/#risico","title":"Risico","text":"<p>Niet voldoen aan deze verplichtingen kan leiden tot negatieve gevolgen voor de gezondheid, veiligheid, de openbare veiligheid, de grondrechten of de samenleving als geheel.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/","title":"Als AI-modellen voor algemene doeleinden met systeemrisico\u2019s ernstige incidenten veroorzaken, wordt dit gedocumenteerd en gerapporteerd","text":"<p>aia-31Monitoring en beheerProjectleiderGovernanceTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-modellen voor algemene doeleinden met een systeemrisico moeten relevante informatie over ernstige incidenten en mogelijke corrigerende maatregelen bijhouden, documenteren en onverwijld rapporteren aan het AI bureau en, in voorkomend geval, aan de nationale bevoegde autoriteiten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/#toelichting","title":"Toelichting","text":"<p>Aanbieders van AI-modellen voor algemene doeleinden met een systeemrisico moeten ernstige incidenten documenteren en rapporteren. Deze informatie moet onmiddellijk worden gemeld aan het AI-bureau en eventueel aan nationale autoriteiten. Dit proces is cruciaal voor het waarborgen van de veiligheid en het nemen van passende corrigerende maatregelen. Dit vereiste is een aanvulling op de in artikel 53 AI-verordening genoemde verplichtingen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/#bronnen","title":"Bronnen","text":"<p>Artikel 55(1c) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-model voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/#risico","title":"Risico","text":"<p>Niet voldoen aan deze verplichtingen kan leiden tot risico's op veiligheidsincidenten, datalekken en schade aan de betrokken partijen en het publiek.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/","title":"AI-modellen voor algemene doeleinden met systeemrisico\u2019s zijn voldoende beveiligd tegen cyberaanvallen","text":"<p>aia-32OntwikkelenMonitoring en beheerOntwikkelaarGovernanceTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/#vereiste","title":"Vereiste","text":"<p>Aanbieders van AI-modellen voor algemene doeleinden met een systeemrisico zorgen voor een passend niveau van cyberbeveiligingsbescherming voor het AI-model voor algemene doeleinden met een systeemrisico en de fysieke infrastructuur van het model.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/#toelichting","title":"Toelichting","text":"<p>Aanbieders van AI-modellen met systeemrisico moeten zorgen voor passende cyberbeveiligingsmaatregelen. Dit omvat het beschermen van zowel het AI-model als de fysieke infrastructuur tegen potenti\u00eble cyberdreigingen. Het doel is om de integriteit en veiligheid van het model en de infrastructuur te waarborgen. Dit vereiste is een aanvulling op de in artikel 53 AI-verordening genoemde verplichtingen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/#bronnen","title":"Bronnen","text":"<p>Artikel 55(1d) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-model voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/#risico","title":"Risico","text":"<p>Niet voldoen aan deze verplichtingen kan leiden tot risico's op veiligheidsincidenten, datalekken en schade aan de betrokken partijen en het publiek.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/","title":"AI-testomgevingen die persoonsgegevens verwerken, voldoen aan strenge voorwaarden","text":"<p>aia-33OrganisatieverantwoordelijkhedenOntwikkelenDataverkenning en datapreparatieJuristOntwikkelaarProjectleiderPrivacy en gegevensbeschermingData</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/#vereiste","title":"Vereiste","text":"<p>Rechtmatig voor andere doeleinden verzamelde persoonsgegevens mogen uitsluitend in de AI-testomgeving voor regelgeving worden verwerkt ten behoeve van het ontwikkelen, trainen en testen van bepaalde AI-systemen en indien aan alle voorwaarden van art. 57 is voldaan.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/#toelichting","title":"Toelichting","text":"<p>De verwerking van persoonsgegevens voor AI-testdoeleinden is mogelijk maar het moet voldoen aan strikte voorwaarden die zijn opgenomen in artikel 57 AI-Verordening. Hierbij kan worden gedacht aan voorwaarden als het beschermen van persoonsgevens met passende technische en organisatorische maatregelen,  persoonsgegevens die in de testomgeving worden aangemaakt mogen niet buiten de testomgeving worden gedeeld en logbestanden worden bijgehouden voor de duur van de deelname aan de testomgeving. Voor toepassingen voor het verder verwerken van gegevens kan worden gedacht aan het ontwikkelen van een AI-systeem zodat een overheidsinstantie of een andere natuurlijke of rechtspersoon een aanzienlijk openbaar belang kan waarborgen, bijvoorbeeld op het gebied van kwaliteit van milieu, duurzaamheid, openbare veiligheid en gezondheid.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 57 Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-model voor algemene doeleindenAI-systeemAI-systeem voor algemene doeleindenAanbiederGebruiksverantwoordelijke</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/#risico","title":"Risico","text":"<p>Verdere verwerking van persoonsgegevens buiten een AI-testomgeving vergroot de kans op bijvoorbeeld het lekken van de persoonsgegevens, wat kan leiden tot een inbreuk op de privacyrechten van betrokken.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/","title":"Hoog-risico-AI-systemen zijn voorzien van een monitoringsysteem","text":"<p>aia-34Monitoring en beheerProjectleiderTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/#vereiste","title":"Vereiste","text":"<p>Aanbieders moeten een systeem voor monitoring na het in de handel brengen vaststellen en documenteren op een manier die evenredig is aan de aard van de AI-technologie\u00ebn en de risico\u2019s van het AI-systeem met een hoog risico.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/#toelichting","title":"Toelichting","text":"<p>Aanbieders moeten een monitoringssysteem opzetten voor het monitoren na het in de handel brengen. Dit systeem moet documenteren op een wijze die passend is bij de aard van de AI-technologie\u00ebn en de risico's van het betreffende AI-systeem met een hoog risico. Dit monitoringssysteem moet proportioneel zijn aan de complexiteit en potenti\u00eble impact van het AI-systeem.</p> <p>Het systeem voor monitoring na het in de handel brengen verzamelt, documenteert en analyseert actief en systematisch relevante data die door gebruiksverantwoordelijken kunnen zijn verstrekt of via andere bronnen kunnen zijn verzameld, over de prestaties van AI-systemen met een hoog risico gedurende hun hele levensduur. Dit stelt de aanbieder in staat na te gaan of AI-systemen blijvend voldoen aan de in hoofdstuk III, afdeling 2, van de AI-verordening vermelde voorschriften. In voorkomend geval omvat de monitoring na het in de handel brengen een analyse van de interactie met andere AI-systemen. Deze verplichting geldt niet voor gevoelige operationele gegevens van gebruiksverantwoordelijken die rechtshandhavingsinstanties zijn.</p> <p>Het systeem voor monitoring na het in de handel brengen is gebaseerd op een plan voor monitoring na het in de handel brengen. Het plan voor monitoring na het in de handel brengen maakt deel uit van de in bijlage IV bedoelde technische documentatie.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/#bronnen","title":"Bronnen","text":"<p>Artikel 72(1) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/#risico","title":"Risico","text":"<p>Zonder monitoringssysteem voor na het in handel brengen is er een risico dat verminderde pestaties van een AI-systeem met hoog risico ongedeteceerd blijven. Een aanbieder kan niet nagaan of een AI-systeem blijvend voldoet aan voorschriften.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/","title":"Ernstige incidenten door hoog-risico-AI-systemen worden gemeld aan de toezichthouder","text":"<p>aia-35OrganisatieverantwoordelijkhedenMonitoring en beheerProjectleiderGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/#vereiste","title":"Vereiste","text":"<p>Aanbieders van in de Europese Unie in de handel gebrachte AI-systemen met een hoog risico melden ernstige incidenten bij de markttoezichtautoriteiten van de lidstaten waarin dat incident heeft plaatsgevonden.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/#toelichting","title":"Toelichting","text":"<p>Aanbieders van AI-systemen met een hoog risico die binnen de EU worden verhandeld, moeten ernstige incidenten melden bij de markttoezichtautoriteiten van de lidstaten waar het incident heeft plaatsgevonden. Een 'ernstig incident' wordt in artikel 3 van de AI-verordening gedefinieerd als: een incident of gebrekkig functioneren van een AI-systeem dat direct of indirect leidt tot: </p> <ol> <li>het overlijden van een persoon of ernstige schade voor de gezondheid van een persoon;</li> <li>een ernstige en onomkeerbare verstoring van het beheer of de exploitatie van kritieke infrastructuur;</li> <li>een schending van de uit het recht van de Unie voortvloeiende verplichtingen ter bescherming van de grondrechten;</li> <li>ernstige schade aan eigendommen of het milieu.</li> </ol> <p>Dit meldingsproces is bedoeld om snel en adequaat te reageren op ernstige incidenten die zich voordoen bij het gebruik van deze AI-systemen, en om passende maatregelen te nemen ter bescherming van de consumenten en het publiek. Het doel is om de veiligheid en betrouwbaarheid van AI-systemen te waarborgen en mogelijke risico's voor gebruikers te minimaliseren.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/#bronnen","title":"Bronnen","text":"<p>Artikel 73(1) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/#risico","title":"Risico","text":"<p>Het niet melden van ernstige incidenten kan leiden tot vertraagde reactie op potenti\u00eble gevaren voor gebruikers en kan het vertrouwen in AI-systemen ondermijnen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/","title":"Klokkenluiders kunnen veilig melden dat een organisatie zich niet houdt aan de AI-verordening","text":"<p>aia-36OrganisatieverantwoordelijkhedenMonitoring en beheerProjectleiderGovernanceMenselijke controle</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/#vereiste","title":"Vereiste","text":"<p>Inbreuken op de AI verordening moeten gemeld kunnen worden en melders moeten dit op een veilige en vertrouwelijke manier kunnen doen, zoals beschreven in Richtlijn (EU) 2019/1937.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/#toelichting","title":"Toelichting","text":"<p>Personen die optreden als klokkenluiders bij inbreuken op de AI-verordening, moeten worden beschermd uit hoofde van het Unierecht. Richtlijn (EU) 2019/1937 (https://eur-lex.europa.eu/legal-content/NL/LSU/?uri=CELEX:32019L1937) van het Europees Parlement en de Raad moet daarom van toepassing zijn. De richtlijn biedt een kader voor het veilig en vertrouwelijk melden van schendingen van de verordening, terwijl het de melders (\"klokkenluiders\") beschermt tegen represailles of vervolging. Deze richtlijn bevordert transparantie en verantwoording binnen organisaties en draagt bij aan een cultuur van naleving en integriteit.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/#bronnen","title":"Bronnen","text":"<p>Artikel 87 Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAI-model voor algemene doeleindenAanbiederGebruiksverantwoordelijke</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/#risico","title":"Risico","text":"<p>Gebrek aan een veilige omgeving kan ertoe leiden dat klokkenluiders geen melding maken van inbreuk op de AI-verordening.  Dit schaadt het rapportagesysteem en heeft negatief effect op het maatschappelijk welzijn.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/","title":"Klachtrecht aanbieders verder in AI-waardeketen","text":"<p>aia-37OrganisatieverantwoordelijkhedenProjectleiderFundamentele rechten</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/#vereiste","title":"Vereiste","text":"<p>Aanbieders verder in de AI-waardeketen hebben het recht een klacht in te dienen wegens inbreuk op de AI verordening bij het AI-bureau.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/#toelichting","title":"Toelichting","text":"<p>Aanbieders verder in de AI-waardeketen hebben het recht om een klacht in te dienen bij het AI-bureau in het geval van een inbreuk op de AI-verordening. Dit biedt hen een mechanisme om actie te ondernemen bij schendingen van de regels met betrekking tot AI-modellen voor algemene doeleinden die zij ge\u00efntrigeerd hebben in AI-systemen. Het AI-bureau kan dan passende maatregelen nemen om de naleving van de verordening te handhaven en eventuele geschillen tussen aanbieders op te lossen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/#bronnen","title":"Bronnen","text":"<p>Artikel 89(2) Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/#risico","title":"Risico","text":"<p>Gebrek aan klachtrecht verhindert het AI-bureau om tijdig en zorgvuldig te kunnen ingrijpen bij overtreding van de AI-verordening.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/","title":"Hoog-risico-AI-systemen zijn getest.","text":"<p>aia-39OntwerpOntwikkelenMonitoring en beheerVerificatie en validatieProjectleiderOntwikkelaarTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/#vereiste","title":"Vereiste","text":"<p>Hoog-risico-AI-systemen zijn getest.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/#toelichting","title":"Toelichting","text":"<p>AI-systemen met een hoog risico worden getest met het oog op het vaststellen van passende en gerichte risicobeheersmaatregelen. De tests zorgen ervoor dat AI-systemen met een hoog risico consistent presteren ten aanzien van het doel ervan en in overeenstemming zijn met de geldende eisen.</p> <p>Het testen van AI-systemen met een hoog risico vindt, zoals passend, in de loop van het ontwikkelproces plaats en in ieder geval voordat het systeem in de handel wordt gebracht of in gebruik is gesteld. </p> <p>Er wordt getest aan de hand van vooraf vastgestelde beoordelingsmaatstaven en probabilistische drempels die passend zijn voor het beoogde doel van het AI-systeem met een hoog risico. De procedures voor testen zijn onderdeel van het kwaliteitsbeheer. </p> <p>Bij het verwerken van persoonsgegevens voor het ontwikkelen, trainen en testen van een AI-systeem in een AI-testomgeving, wordt een volledige en gedetailleerde beschrijving van het testproces en de testresultaten onderdeel van de technische documentatie.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/#testen-van-ai-systemen-met-een-hoog-risico-onder-reele-omstandigheden-buiten-ai-testomgevingen","title":"Testen van AI-systemen met een hoog risico onder re\u00eble omstandigheden buiten AI-testomgevingen","text":"<p>AI-systemen met een hoog risico kunnen onder re\u00eble omstandigheden buiten AI-testomgevingen voor regelgeving worden getest door aanbieders of potenti\u00eble aanbieders van in bijlage III vermelde AI-systemen met een hoog risico in overeenstemming met dit artikel en het in dit artikel bedoelde plan voor tests onder re\u00eble omstandigheden, onverminderd de verbodsbepalingen krachtens artikel 5 AI-Verordening.</p> <p>Aanbieders of potenti\u00eble aanbieders kunnen zelf of in samenwerking met een of meer gebruiksverantwoordelijken of potenti\u00eble gebruiksverantwoordelijken onder re\u00eble omstandigheden tests uitvoeren op in bijlage III bedoelde AI-systemen met een hoog risico op elk moment v\u00f3\u00f3r het in de handel brengen of in gebruik nemen van het AI-systeem.</p> <p>Aanbieders of potenti\u00eble aanbieders mogen alleen testen onder re\u00eble omstandigheden als is voldaan aan alle volgende voorwaarden:</p> <p>a) de aanbieder of potenti\u00eble aanbieder heeft een plan voor tests onder re\u00eble omstandigheden opgesteld en ingediend bij de markttoezichtautoriteit in de lidstaat waar onder re\u00eble omstandigheden moet worden getest;</p> <p>b) de markttoezichtautoriteit in de lidstaat waar onder re\u00eble omstandigheden moet worden getest, heeft het testen onder re\u00eble omstandigheden en het plan voor tests onder re\u00eble omstandigheden goedgekeurd; indien de markttoezichtautoriteit binnen dertig dagen geen antwoord heeft gegeven, worden het testen onder re\u00eble omstandigheden en het plan voor tests onder re\u00eble omstandigheden geacht te zijn goedgekeurd; indien het nationale recht niet voorziet in een stilzwijgende goedkeuring, blijft het testen onder re\u00eble omstandigheden onderworpen aan een toestemming;</p> <p>c) de aanbieder of potenti\u00eble aanbieder, met uitzondering van aanbieders of potenti\u00eble aanbieders van in de punten 1, 6 en 7 van bijlage III bedoelde AI-systemen met een hoog risico op de gebieden rechtshandhaving, migratie, asiel en grenstoezichtsbeheer en AI-systemen met een hoog risico als bedoeld in punt 2 van bijlage III, heeft het testen onder re\u00eble omstandigheden geregistreerd overeenkomstig artikel 71, lid 4, met een Uniebreed uniek identificatienummer en de in bijlage IX gespecificeerde informatie; de aanbieder of potenti\u00eble aanbieder van in de punten 1, 6 en 7 van bijlage III bedoelde AI-systemen met een hoog risico op de gebieden van rechtshandhaving, migratie, asiel en grenstoezichtsbeheer, heeft het testen onder re\u00eble omstandigheden geregistreerd in het beveiligde niet-openbare gedeelte van de EU-databank overeenkomstig artikel 49, lid 4, punt d), met een Uniebreed uniek identificatienummer en de daarin gespecificeerde informatie; de aanbieder of potenti\u00eble aanbieder van in punt 2 van bijlage III bedoelde AI-systemen met een hoog risico heeft het testen onder re\u00eble omstandigheden geregistreerd overeenkomstig artikel 49, lid 5;</p> <p>d) de aanbieder of potenti\u00eble aanbieder die onder re\u00eble omstandigheden test, is in de Unie gevestigd of heeft een in de Unie gevestigde wettelijke vertegenwoordiger aangewezen;</p> <p>e) gegevens die zijn verzameld en verwerkt met het oog op het testen onder re\u00eble omstandigheden mogen alleen aan derde landen worden doorgegeven mits er passende en toepasselijke waarborgen uit hoofde van het Unierecht worden toegepast;</p> <p>f) het testen onder re\u00eble omstandigheden duurt niet langer dan nodig is om de doelstellingen ervan te verwezenlijken en in geen geval langer dan zes maanden, met een mogelijke verlenging van nog eens zes maanden indien de aanbieder of potenti\u00eble aanbieder de markttoezichtautoriteit daar vooraf van in kennis stelt, met een uitleg waarom een dergelijke verlenging noodzakelijk is;</p> <p>g) proefpersonen die onder re\u00eble omstandigheden worden getest en die tot kwetsbare groepen behoren vanwege hun leeftijd of handicap, worden naar behoren beschermd;</p> <p>h) indien een aanbieder of potenti\u00eble aanbieder het testen onder re\u00eble omstandigheden organiseert in samenwerking met een of meer gebruiksverantwoordelijken of potenti\u00eble gebruiksverantwoordelijken, worden zij ge\u00efnformeerd over alle aspecten van het testen die relevant zijn voor hun beslissing om deel te nemen, en krijgen zij de relevante gebruiksinstructies van het AI-systeem als bedoeld in artikel 13; de aanbieder of potenti\u00eble aanbieder en de gebruiksverantwoordelijke of potenti\u00eble gebruiksverantwoordelijke sluiten een overeenkomst waarin hun taken en verantwoordelijkheden worden gespecificeerd teneinde te waarborgen dat de bepalingen voor het testen onder re\u00eble omstandigheden uit hoofde van deze verordening en ander toepasselijk Unie- en nationaal recht worden nageleefd;</p> <p>i) de proefpersonen die onder re\u00eble omstandigheden worden getest, hebben ge\u00efnformeerde toestemming gegeven overeenkomstig artikel 61, of, in het geval van rechtshandhaving, indien het vragen om ge\u00efnformeerde toestemming het testen van het AI-systeem onder re\u00eble omstandigheden onmogelijk zou maken, de test zelf en het resultaat van de test onder re\u00eble omstandigheden hebben geen negatieve gevolgen voor de proefpersonen en hun persoonsgegevens worden na de uitvoering van test gewist;</p> <p>j) op het testen onder re\u00eble omstandigheden wordt daadwerkelijk toezicht gehouden door de aanbieder of potenti\u00eble aanbieder, alsook door gebruiksverantwoordelijken of potenti\u00eble gebruiksverantwoordelijken via personen die voldoende zijn gekwalificeerd op het relevante gebied en beschikken over de nodige capaciteiten, opleiding en bevoegdheden om hun taken uit te voeren;</p> <p>k) de voorspellingen, aanbevelingen of beslissingen van het AI-systeem kunnen daadwerkelijk worden teruggedraaid en genegeerd.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/#bronnen","title":"Bronnen","text":"<p>Artikel 9(6 en 8) Verordening Artifici\u00eble Intelligentie</p> <p>Artikel 17(1 sub d) Verordening Artifici\u00eble Intelligentie</p> <p>Artikel 59(1 sub i) Verordening Artifici\u00eble Intelligentie</p> <p>Artikel 60 Verordening Artifici\u00eble Intelligentie</p> <p>Overweging 138 - 141 Verordening Artifici\u00eble Intelligentie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":"<p>AI-systeemAI-systeem voor algemene doeleindenAanbieder</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/#risico","title":"Risico","text":"<p>Zonder het testen van een AI-systeem, ontstaat het risico dat het AI-systeem inconsistent gaat presteren ten aanzien van het doel. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/#maatregelen","title":"Maatregelen","text":"<p>&lt;!-- list_maatregelen vereiste/aia-39-testen no-search no-onderwerp no-rol no-levenscyclus --</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/","title":"Informatie over algoritmes wordt gedocumenteerd volgens de Archiefwet","text":"<p>arc-01UitfaserenMonitoring en beheerOntwikkelenProjectleiderOntwikkelaarTransparantieData</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/#vereiste","title":"Vereiste","text":"<p>Overheidsorganen zijn verplicht de onder hen berustende archiefbescheiden in goede, geordende en toegankelijke staat te brengen en te bewaren, alsmede zorg te dragen voor de vernietiging van de daarvoor in aanmerking komende archiefbescheiden.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/#toelichting","title":"Toelichting","text":"<p>Volgens de Archiefwet moeten overheden informatie bewaren. Op basis van deze informatie moet gereconstrueerd kunnen worden hoe besluiten, ook in de context van algoritmes, tot stand zijn gekomen. Informatie over en van algoritmes moet daarom op basis van de selectielijst bewaard en vernietigd worden.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 3 Archiefwet 1995 </li> <li>Artikel 15 lid 2 Archiefwet 1995 </li> <li>Archiefbesluit 1995</li> <li>Archiefregeling</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/#risico","title":"Risico","text":"<p>Zonder goede toepassing van de Archiefwet is het voor betrokkene(n) of derden niet mogelijk om achteraf te reconstrueren en te controleren hoe besluiten, waar algoritmes aan hebben bijgedragen, tot stand zijn gekomen. Het nalaten om archiefbescheiden na verloop van tijd te verwijderen brengt risico's met zich mee op het gebied van privacy en informatiebeveiliging.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/","title":"Auteursrechten zijn beschermd","text":"<p>aut-01Dataverkenning en datapreparatieOntwerpJuristDataGovernance</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/#vereiste","title":"Vereiste","text":"<p>Auteursrechten mogen niet geschonden worden bij het ontwikkelen en gebruiken van algoritmes.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/#toelichting","title":"Toelichting","text":"<p>Bepaalde type algoritmes worden ontwikkeld op basis van grote hoeveelheden data. Deze data wordt gebruikt voor het trainen en testen van algoritmes. Het gebruiken van deze data mag geen inbreuk maken op auteursrechten van diegene die deze rechten heeft. Ook de gegenereerde output van algoritmes mag geen inbreuk maken op deze rechten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 1 Auteurswet </li> <li>Artikel 4-9 Auteurswet</li> <li>Artikel 10 Auteurswet</li> <li>Artikel 13 Auteurswet</li> <li>Artikel 15n jo. 15o Auteurswet</li> <li>Artikel 3 en 4 van de DSM-richtlijn (EU 2019/790)</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/#risico","title":"Risico","text":"<p>Het niet voldoen aan het auteursrecht kan leiden tot onrechtmatig gebruik van auteursrechtelijk beschermde inhoud, wat kan resulteren in mogelijke juridische geschillen, boetes en schadevergoedingen voor inbreuk op het auteursrecht. Bovendien kan het niet naleven van het auteursrecht het vertrouwen van gebruikers en belanghebbenden ondermijnen, wat kan leiden tot reputatieschade en gebrek aan vertrouwen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/","title":"Persoonsgegevens worden op een rechtmatige manier verwerkt","text":"<p>avg-01ProbleemanalyseOntwerpDataverkenning en datapreparatieProjectleiderJuristPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/#vereiste","title":"Vereiste","text":"<p>De verwerking van persoonsgegevens moet rechtmatig plaatsvinden.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/#toelichting","title":"Toelichting","text":"<p>De verwerking van persoonsgegevens moet rechtmatig plaatsvinden, wat betekent dat de verwerking gebaseerd moet zijn op \u00e9\u00e9n van de wettelijke grondslagen die zijn geformuleerd in artikel 6 Algemene Verordening Gegevensbescherming. Persoonsgegevens mogen alleen worden verzameld voor specifieke, duidelijk omschreven en gerechtvaardigde doeleinden. Het is niet toegestaan om deze gegevens verder te verwerken op een manier die niet verenigbaar is met deze oorspronkelijke doeleinden.</p> <p>Bij het verwerken van persoonsgegevens ten behoeve van de ontwikkeling en gebruik van algoritmes moet worden onderzocht of dit kan worden gebaseerd op \u00e9\u00e9n van de verwerkingsgrondslagen. Het is van belang dat wordt uitgewerkt welke persoonsgegevens waarvoor worden verwerkt en op basis van welke grondslag. Hierbij kan worden gedacht aan persoonsgegevens ten behoeve van trainingsdata, voor het genereren van output of, indien (juridisch) mogelijk, voor het uitvoeren van een onderzoek naar onbewuste vooringenomenheid.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 5 lid 1 onder a en b Algemene Verordening Gegevensbescherming</li> <li>Artikel 6 lid 1 onder b Algemene Verordening Gegevensbescherming</li> <li>Artikel 6 Algemene Verordening Gegevensbescherming</li> <li>Overweging 39 en 45 Algemene Verordening Gegevensbescherming</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/#risico","title":"Risico","text":"<p>Het risico wanneer persoonsgegevens niet op een rechtmatige manier worden verwerkt (verzamelen van gegevens valt hier ook onder), is dat er niet aan de AVG wordt voldaan. Er worden dan onrechtmatig persoonsgegevens verwerkt, waarmee privacy van personen in het geding komt. Ook kan het leiden tot hoge boetes voor organisaties, en kan een datalek plaatsvinden.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/","title":"Persoonsgegevens worden zo kort mogelijk bewaard","text":"<p>avg-02OntwerpDataverkenning en datapreparatieOntwikkelenUitfaserenOntwikkelaarBeleid en adviesPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/#vereiste","title":"Vereiste","text":"<p>Persoonsgegevens moeten worden bewaard in een vorm die het mogelijk maakt om de betrokkenen niet langer te identificeren dan nodig is voor de realisering van de doeleinden waarvoor de persoonsgegevens initieel worden verwerkt.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/#toelichting","title":"Toelichting","text":"<p>Persoonsgegevens dienen toereikend en ter zake dienend te zijn en beperkt te blijven tot wat noodzakelijk is voor de doeleinden waarvoor zij worden verwerkt. Dit vereist dat ervoor wordt gezorgd dat de opslagperiode van de persoonsgegevens tot een strikt minimum wordt beperkt. Het beginsel van opslagbeperking betekent dat persoonsgegevens moeten worden bewaard in een vorm die het mogelijk maakt om de betrokkenen niet langer te identificeren dan voor de realisering van de doeleinden waarvoor de persoonsgegevens worden verwerkt.</p> <p>In de context van algoritmes is het belangrijk dat, wanneer persoonsgegevens worden verwerkt, er onderzocht wordt op welke manieren identificatie van betrokkenen tegen kan worden gegaan. Hierbij kan worden gedacht aan maatregelen als pseudonomisering en anonimisering.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/#bronnen","title":"Bronnen","text":"<p>Artikel 5 lid 1 onder de AVG</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/#risico","title":"Risico","text":"<p>Het onnodig lang bewaren van persoonsgegevens levert een onrechtmatige situatie op. De privacyrechten van betrokken worden hierdoor aangetast. Er ontstaan aanvullende risico's bij bijvoorbeeld een datalek.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/","title":"Persoonsgegevens worden zo min mogelijk verwerkt","text":"<p>avg-03OntwerpDataverkenning en datapreparatieOntwikkelenJuristOntwikkelaarPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/#vereiste","title":"Vereiste","text":"<p>De verwerking van persoonsgegevens moet minimaal worden gehouden, dat wil zeggen dat die verwerking toereikend moet zijn, ter zake dienend en beperkt tot wat noodzakelijk is voor de doeleinden waarvoor zij worden verwerkt.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/#toelichting","title":"Toelichting","text":"<p>Het is van belang dat \u00e9nkel persoonsgegevens worden verwerkt die noodzakelijk zijn gezien de doeleinden van die vewerking. Er moet een beoordeling worden gemaakt welke persoonsgegevens dit wel en eventueel niet zijn. Voor het ontwikkelen en gebruiken van algoritmes is het van belang om te beoordelen welke persoonsgegevens noodzakelijk zijn om het beoogde doel te bereiken. Afhankelijk van de toepassing vraagt dit om een intensieve toets. Er moet voor worden gezorgd dat persoonsgegevens die niet als noodzakelijk worden beschouwd, buiten de verwerking blijven. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/#bronnen","title":"Bronnen","text":"<p>Artikel 5 lid 1 onder c Algemene Verordening Gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/#risico","title":"Risico","text":"<p>Het onnodig verwerken van persoonsgegevens kan een inbreuk maken op rechten van betrokkenen, en zou kunnen leiden tot een datalek.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/","title":"Persoonsgegevens en andere data verwerken gebeurt proportioneel en subsidiair","text":"<p>avg-04OntwerpDataverkenning en datapreparatieJuristOntwikkelaarFundamentele rechtenPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/#vereiste","title":"Vereiste","text":"<p>Gegevensverwerking moet in verhouding staan tot het beoogde doel en persoonsgegevens mogen alleen verwerkt worden als er geen minder ingrijpende manier is om het doel te bereiken. Voor zover het gaat om de verwerking van persoonsgegevens moet dit vereiste aantoonbaar zijn. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/#toelichting","title":"Toelichting","text":"<p>Proportionaliteit vereist dat de impact van gegevensverwerking op de persoonlijke levenssfeer voor de toepassing van een algoritme en voor het genereren van de benodigde output in balans is met het beoogde doel. Subsidiariteit vereist dat persoonsgegevens alleen moeten worden verwerkt als dit de minst inbreukmakende manier is om het doel te bereiken.  Deze principes waarborgen dat de privacy van individuen wordt gerespecteerd en dat gegevensverwerking niet verder gaat dan noodzakelijk is voor legitieme doeleinden. Het is van belang om deze principes te hanteren om te bepalen of en in welke vorm een algoritmes moet worden toegepast en om tot een passende mate van gegevensverwerking te komen om het doel te bereiken.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 5(1)(c) Algemene Verordening Gegevensbescherming </li> <li>Overweging 170 Algemene Verordening Gegevensbescherming </li> <li>Artikel 5(4) Verdrag betreffende de Europese Unie, Maastricht, 07-02-1992 |</li> <li>Artikel 52 Handvest van de Grondrechten van de Europese Unie </li> <li>Protocol betreffende de toepassing van de beginselen van subsidiariteit en evenredigheid Verdrag betreffende de Europese Unie, Maastricht, 07-02-1992 </li> <li>Artikel 1.10, 1.13 en 1.16 Aanbestedingswet 2012 </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/#risico","title":"Risico","text":"<p>Zonder toetsing aan het proportinaliteits- en subsidiariteitsbeginsel ontstaat het risico dat er een onnodig zware en daardoor onrechtmatige inbreuk wordt gemaakt op de privacyrechten van betrokkenen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/","title":"Persoonsgegevens zijn juist en actueel","text":"<p>avg-05Dataverkenning en datapreparatieOntwikkelaarProjectleiderPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/#vereiste","title":"Vereiste","text":"<p>De te verwerken persoonsgegevens zijn juist, nauwkeurig en worden zo nodig geactualiseerd of gewist.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/#toelichting","title":"Toelichting","text":"<p>De te verwerken persoonsgegevens moeten nauwkeurig, juist en zo nodig actueel zijn. Dit betekent dat alle maatregelen moeten worden genomen om ervoor te zorgen dat onjuiste persoonsgegevens worden gerectificeerd of gewist. Dat kan betekenen dat persoonsgegevens moeten worden geactualiseerd of verbeterd. In de context van algoritmes is het van belang dat ook daar wordt onderzocht welke maatregelen nodig zijn om die juistheid toe te passen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/#bronnen","title":"Bronnen","text":"<p>Artikel 5 lid 1 sub d Algemene Verordening Gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/#risico","title":"Risico","text":"<p>Als er geen rekening wordt gehouden met de juistheid, nauwkeurigheid en volledigheid van persoonsgegevens, kunnen kwaliteit en integriteit van data niet voldoende worden gewaarborgd.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/","title":"Organisaties kunnen bewijzen dat zij persoonsgegevens op de juiste manier verwerken","text":"<p>avg-06OntwerpDataverkenning en datapreparatieJuristGovernancePrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/#vereiste","title":"Vereiste","text":"<p>De verantwoordelijken moeten bij de verwerking van persoonsgegevens door algoritmes kunnen aantonen dat de verwerkingen rechtmatig plaatsvinden. Dit betekent concreet dat de volgende punten aangetoond kunnen worden:</p> <ul> <li>Rechtmatigheid, behoorlijkheid en transparantie</li> <li>Doelbinding</li> <li>Minimale gegevensverwerking</li> <li>Juistheid</li> <li>Opslagbeperking</li> <li>Integriteit en vertrouwelijkheid</li> </ul> <p>Een aandachtpunt daarbij is dat de rechtmatigheid van de verwerking ten opzichte van andere gerelateerde wetgeving zoals de AI Act en de Algemene wet gelijke behandeling ook moeten kunnen worden aangetoond voor zover de rechtmatigheid van de verwerking onder de AVG daarvan afhankelijk is.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/#toelichting","title":"Toelichting","text":"<p>Bij het verwerken van persoonsgegevens voor algoritmes moeten de verantwoordelijkheden duidelijk beschreven en toegewezen zijn. De verwerkingsverantwoordelijke is degene die ervoor zorgt dat deze verantwoordelijkheden worden nageleefd en kan dit aantonen, wat bekend staat als de verantwoordingsplicht. Deze maatregelen zijn essentieel om de naleving van regelgeving met betrekking tot gegevensbescherming te waarborgen en het vertrouwen van gebruikers in de verwerking van hun gegevens te vergroten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 5 lid 2 Algemene Verordening Gegevensbescherming</li> <li>Artikel 24 Algemene Verordening Gegevensbescherming</li> <li>Artikel 26 Algemene Verordening Gegevensbescherming</li> <li>Artikel 27 Algemene Verordening Gegevensbescherming</li> <li>Artikel 29 Algemene Verordening Gegevensbescherming</li> <li>Verantwoordingsplicht</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/#risico","title":"Risico","text":"<p>Het niet naleven van deze norm moet worden gekwalificeerd als een onrechtmatigheid, niet als een risico voor de rechten en vrijheden van betrokkenen onder de AVG. Maar het niet voldoen aan artikel 5 betekent in de praktijk vaak wel dat er onvoldoende zicht is op risico's voor de rechten en vrijheden van betrokkenen of dat er te grote risico's worden genomen. Deze gevolgen zijn echter indirect een gevolg van het niet naleven van artikel 5 AVG. Het moeten voldoen aan het aantoonbaarheidsvereiste kan wel risico's hebben voor de organisatie die een algortime inzet. Enkele risico's zijn:</p> <ul> <li>Aantoonbaarheidsvereisten vragen in de praktijk veel documentatie. Deze documentatie kan via de Woo opgevraagd worden. Het ontbreken van documentatie kan door externen vaak relatief makkelijk in verband worden gebracht met een overtreding van deze vereisten.</li> <li>Algoritmes die van nature slecht inzichtelijk en uitlegbaar zijn (zoals deep-learning) hebben een zeer hoge drempel om aan deze vereiste te voldoen. Aantonen van rechtmatigheid is voor een belangrijk deel afhankelijk van inzicht in de werking van het algoritme. De inzet van een algortime kan dus mogelijk tegengehouden worden door deze vereisten.</li> <li>Bij leveranciers die niet of gedeeltelijke transparant zijn over hun product of dienstverlening ontstaat een vergelijkbaar risico. Waar de Woo uitzonderingen heeft voor bedrijfsgeheimen heeft de AVG daar maar beperkte ruimte voor. Het is dus mogelijk dat leveranciers terughoudend zullen zijn met het delen van informatie die onder de AVG ook aan betrokkenen gecommuniceerd moeten worden.</li> <li>Samenwerkingsverbanden en externe leveranciers kunnen niet als argumenten worden gebruikt om de aantoonbaarheidsvereisten op af te schuiven. Onafhankelijk van de onderlinge afspraken daarover hebben alle verwerkingsverantwoordelijken de verplichting om aan deze vereisten te kunnen voldoen. </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/","title":"Organisaties zijn transparant over het verwerken van persoonsgegevens","text":"<p>avg-07ImplementatieMonitoring en beheerOntwikkelaarProjectleiderPrivacy en gegevensbeschermingTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/#vereiste","title":"Vereiste","text":"<p>De verwerking van persoonsgegevens moet transparant zijn.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/#toelichting","title":"Toelichting","text":"<p>Een betrokkene moet op de hoogte worden gesteld van het feit dat er verwerking plaatsvindt van diens persoonsgegevens en van de doeleinden daarvan (zoals ook is verwoord in het beginsel van transparante verwerking, artikel 5 AVG). Hierbij moeten de specifieke omstandigheden en de context waarin de persoonsgegevens worden verwerkt, worden meegenomen. In artikel 13 en 14 AVG wordt toegelicht welke informatie in welke gevallen moet worden verstrekt door de verwerkersverantwoordelijke. Als persoonsgegevens worden verwerkt ten behoeve van het ontwikkelen of gebruiken van algoritmes, zal deze informatie moeten worden verstrekt.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 5 lid 1 Algemene Verordening Gegevensbescherming</li> <li>Artikel 12 Algemene Verordening Gegevensbescherming</li> <li>Artikel 13 Algemene Verordening Gegevensbescherming</li> <li>Artikel 14 Algemene Verordening Gegevensbescherming</li> <li>Overweging 58 Algemene Verordening Gegevensbescherming</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/#risico","title":"Risico","text":"<p>Rechten van betrokken worden geschonden als er geen sprake is van transparantie over de verwerkingen van de persoonsgegevens.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/","title":"Gevoelige persoonsgegevens worden alleen gebruikt als hiervoor een wettelijke uitzondering geldt","text":"<p>avg-08OntwerpDataverkenning en datapreparatieProjectleiderJuristBeleid en adviesPrivacy en gegevensbeschermingBias en non discriminatie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/#vereiste","title":"Vereiste","text":"<p>Bijzondere categorie\u00ebn van persoonsgegevens mogen alleen worden verwerkt op basis van een wettelijke uitzondering.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/#toelichting","title":"Toelichting","text":"<p>Persoonsgegevens die door hun aard bijzonder gevoelig zijn wat betreft de grondrechten en fundamentele vrijheden, verdienen specifieke bescherming. Dit komt doordat de context van de verwerking ervan significante risico's kan meebrengen voor de grondrechten en de fundamentele vrijheden. Denk hierbij aan persoonsgegevens als ras, ethnische afkomst, politieke opvattingen of religieuze of levenschouwelijke overtuigingen.</p> <p>Bijzondere categorie\u00ebn persoonsgegevens mogen alleen worden verwerkt als er hier een wettelijke uitzondering voor is (artikel 9 AVG en artikel 30 UAVG). Deze vereiste is ook van toepassing bij het ontwikkelen en gebruiken van algoritmes en stelt daarmee beperkingen aan het mogen verwerken van deze categorie\u00ebn persoonsgegevens, bv. ten behoeve van trainingsdata of het genereren van de beoogde output.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 9 AVG</li> <li>Overweging 51 - 54 AVG</li> <li>Artikel 22 - 30 UAVG</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/#risico","title":"Risico","text":"<p>Het (onrechtmatige) verwerken van bijzondere categorie\u00ebn persoonsgegevens brengt risico's met zich mee op het gebied van respecteren van de persoonlijke levenssfeer en discriminatie.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/","title":"Betrokkenen kunnen een beroep doen op hun privacyrechten","text":"<p>avg-09OrganisatieverantwoordelijkhedenOntwikkelenOntwikkelaarPrivacy en gegevensbeschermingData</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/#vereiste","title":"Vereiste","text":"<p>Betrokkenen kunnen een beroep doen op hun privacyrechten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/#toelichting","title":"Toelichting","text":"<p>Mensen hebben het recht om hun privacyrechten uit te oefenen door een beroep te doen op verschillende wettelijke bepalingen, zoals het recht op inzage, correctie, verwijdering en bezwaar tegen de verwerking van hun persoonsgegevens. Dit betekent dat individuen controle hebben over hoe hun gegevens worden gebruikt en kunnen verzoeken om toegang te krijgen tot hun gegevens of om wijzigingen aan te brengen indien nodig.</p> <p>Het kunnen uitoefenen van privacyrechten is essentieel voor het beschermen van de privacy van individuen, het waarborgen van transparantie en controle uitvoeren over persoonsgegevens. Als persoonsgegevens worden verwerkt voor het ontwikkelen en gebruiken van algoritmes, is het van belang dat maatregelen worden getroffen om deze rechten te eerbiedigen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/#bronnen","title":"Bronnen","text":"<p>Artikel 15 - 21 Algemene Verordening Gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/#risico","title":"Risico","text":"<p>Betrokkenen hebben geen controle over hun persoonsgegevens wanneer ze geen beroep kunnen doen op hun privacyrechten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/","title":"Besluiten die levens kunnen be\u00efnvloeden, zijn niet volledig geautomatiseerd","text":"<p>avg-10OntwerpImplementatieProjectleiderBeleid en adviesPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/#vereiste","title":"Vereiste","text":"<p>Betrokkenen hebben het recht om niet onderworpen te worden aan een enkel op geautomatiseerde verwerking, waaronder proflering, gebaseerd besluit, wanneer dit rechtsgevolgen heeft voor hen of het hen anderszins in aanzienlijke mate treft. Dit verbod geldt niet indien de geautomatiseerde individuele besluitvorming, anders dan op basis van profilering, noodzakelijk is om te voldoen aan een wettelijke verplichting die op de verwerkingsverantwoordelijke rust of noodzakelijk is voor de vervulling van een taak van algemeen belang.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/#toelichting","title":"Toelichting","text":"<p>Overheidsorganisaties zijn vaak belast met de uitvoering van wettelijke taken waarbij zij 'besluiten' moeten nemen, bijvoorbeeld als een burger vraagt om een uitkering, toeslag of een subsidie. Hiervoor moeten gegevens worden verwerkt om te kunnen bepalen of een burger hier ook recht op heeft. Om deze gegevens snel en accuraat te verwerken, zetten overheidsorganisaties vaak algoritmes in. Deze gegevens worden dan vaak 'geautomatiseerd' door deze algoritmes verwerkt, zonder dat een ambtenaar dit werk controleert. Soms wordt het proces voor het nemen van een besluit volledig geautomatiseerd ingericht. Denk hierbij aan het opleggen van een boete voor een snelheidsovertreding. Hierdoor kan in korte tijd en op een effici\u00ebnte wijze, een grote hoeveelheid besluiten worden genomen. </p> <p>Het geautomatiseerd verwerken van gegevens voor de totstandkoming van een besluit brengt risico's met zich mee. Zeker als hierbij persoonsgegevens van individuen worden verwerkt en er sprake is van profilering. Hierdoor ontstaat bijvoorbeeld het risico op discriminatie. Daarom is in art. 22 AVG het recht voor betrokkenen gecre\u00eberd om niet te worden onderworpen aan een uitsluitend op geautomatiseerde verwerking, waaronder profilering, gebaseerd besluit. </p> <p>Dit verbod geldt voor besluiten die 'rechtsgevolgen' hebben voor een betrokkene, bijvoorbeeld een burger die een boete ontvangt voor de snelheidsovertreding, of hem anderzijds in aanmerkelijke mate treft. Het besluit mag in die gevallen niet geautomatiseerd worden genomen. Een individu moet namelijk kunnen rekenen op voldoende 'menselijke tussenkomst' bij de beoordeling van belangrijke beslissingen die deze persoon treffen.</p> <p>Bij het geautomatiseerd uitvoeren van processen dient altijd te worden voldaan aan de voorwaarden uit wetgeving, waaronder in het bijzonder de Algemene Verordening Gegevensbescherming (AVG) en de Algemene wet bestuursrecht(Awb). Bestuursorganen dienen dan ook te handelen conform de algemene beginselen van behoorlijk bestuur. Dit samenstel van regels moet de rechten van betrokkenen borgen. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/#algemene-eisen-aan-geautomatiseerde-besluitvorming-door-overheden","title":"Algemene eisen aan geautomatiseerde besluitvorming door overheden","text":"<p>De Nederlandse wetgever heeft in artikel 40 lid 1 UAVG gebruik gemaakt van de mogelijkheid een uitzondering te maken op het verbod van art. 22 lid 1 AVG. In Nederland is geautomatiseerde besluitvorming toegestaan, als het gaat om besluitvorming waarbij menselijke tussenkomst geen toegevoegde waarde heeft. Dit is het geval als er sprake is van een gebonden karakter waarbij weinig of geen beoordelingsruimte is waarin tot een andere conclusie kan worden gekomen. Hierbij kan worden gedacht aan het toekennen van kinderbijslag of de hoogte van het recht op studiefinanciering. Deze uitzondering geldt niet voor 'profilering', tenzij er specifieke (sectorale) wetgeving het verbod opheft.</p> <p>Om deze uitzondering toe te kunnen passen, moet er op grond van artikel 22 AVG een 'passende maatregel' in de vorm van wetgeving zijn die personen voldoende bescherming biedt. In Nederland moet de Algemene wet bestuursrecht deze bescherming aan burgers bieden als bestuursorganen besluiten nemen. De Awb bevat vereisten en algemene beginselen waaraan besluitvorming moet voldoen. </p> <p>Bij het toepassen van geautomatiseerde besluitvorming, moet aan de hand van een DPIA wordt vastgesteld of er bij toepassing van de Awb daadwerkelijk voldoende bescherming wordt geboden. Een verwerkersverantwoordelijke zal dus, naast het toepassen van vereisten uit de AVG en specifieke (sectorale) wetgeving, beginselen uit de Awb moeten vertalen naar concrete maatregelen om geautomatiseerde besluitvorming op een rechtmatige wijze toe te passen. Hierbij kan worden gedacht aan het toepassen van motiveringsbeginsel of het zorgvuldigheidsbeginsel.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/#begrippen","title":"Begrippen","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/#profilering","title":"Profilering","text":"<p>Profilering is bijzonder gevoelig. Bij profilering gaat het om elke vorm van een geautomatiseerde verwerking van persoonsgegevens, waarbij aan de hand van persoonsgegevens bepaalde persoonlijke aspecten van een natuurlijke persoon worden ge\u00ebvalueerd. Daarbij gaat het voornamelijk om het analyseren of verspellen van zaken als beroepsprestaties, economische situatie, gezondheid, persoonlijke voorkeuren, interesses, betrouwbaarheid, gedrag, locatie of een verplaatsingen. </p> <p>Volgens deze definitie gaat het om een verwerking door een computersysteem waarbij het systeem algemene aanname(s) toegepast in een concreet geval. Dit doet het door een individu, met gebruikmaking van diens persoonsgegevens, in te delen in een categorie(profiel). Een dergelijk categorie(profiel) wordt vaak in verband gebracht met bepaalde risico's, bijvoorbeeld het risico op het misbruiken van bepaalde publieke voorzieningen. De gevoeligheid is dat nog niet is vastgesteld dat, in dit voorbeeld, de betreffende natuurlijke persoon ook daadwerkelijk misbruik heeft gemaakt van bepaalde voorzieningen. Als daar wel automatisch gevolgen aan worden verbonden, ontstaat het risico op een onrechtmatige behandeling van een natuurlijk persoon. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/#besluit","title":"Besluit","text":"<p>In deze context moet het begrip 'besluit' worden gehanteerd zoals dit is bedoeld in artikel 22 AVG. Het begrip 'besluit' krijgt in de AVG een ruimere betekenis dan het geval is in artikel 1:3 Algemene wet bestuursrecht (Awb). In de Algemene wet bestuursrecht moet er sprake zijn van een 'rechtsgevolg', maar onder het besluitbegrip van de AVG kunnen ook situaties vallen waarin een individu \u2018slechts\u2019 feitelijke gevolgen ervaart als een besluit wordt genomen. Daarmee biedt de AVG dus bescherming voor meerdere situaties. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/#rechtsgevolgen","title":"Rechtsgevolgen","text":"<p>Het begrip 'rechtsgevolg' duidt op wijziging in de rechtspositie van betrokkene. Het betekent, juridisch uitgedrukt, een verandering in het geheel van de rechten, aanspraken, bevoegdheden en verplichtingen van \u00e9\u00e9n of meer natuurlijke personen of rechtspersonen. In deze context wijzigt de rechtspositie van een individu door een keuze van het systeem, bijvoorbeeld doordat deze een boete ontvangt. Rechtsgevolgen kwalificeren altijd als relevant. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/#aanmerkelijke-mate-treffen","title":"Aanmerkelijke mate treffen","text":"<p>De Europese wetgever heeft weinig richting gegeven aan hoe dit begrip moet worden ge\u00efnterpreteerd. Er zijn wel aanknopingspunten om te duiden wanneer hier sprake van is. De EDPB spreekt van ernstige, aanzienlijke effecten, groot of belangrijk genoeg zijn om aandacht te verdienen. Dat is in ieder geval zo als het besluit het potentieel heeft om de omstandigheden, het gedrag of de keuze van de betrokken personen in aanmerkelijke mate te treffen; een langdurig of blijvend effect op de betrokkene te hebben; of in het uiterste geval, tot uitsluiting of discriminatie te leiden. Dit vraagt per geval om een analyse welke 'keuzes' van het systeem welke gevolgen hebben voor een individu en of die gevolgen rechtsgevolgen zijn of alleen een feitelijk gevolg. Zie voor een nadere toelichting hiervoor het advies van de Autoriteit Persoonsgegevens inzake geautomatiseerde selectietechnieken.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/#toepassing","title":"Toepassing","text":"<p>Volledig geautomatiseerde vaststelling van een publiekrechtelijk besluit zoals een aanslag, een boete of een vergunning heeft rechtsgevolgen. Een beslissing dat een bepaalde aanvraag in aanmerking komt voor handmatige controle heeft op zichzelf geen rechtsgevolg - de rechtspositie van de betrokkene wijzigt (nog) niet. Wel moet beoordeeld worden of de betrokkene door dat besluit anderszins (dus feitelijk) in aanmerkelijke mate wordt getroffen. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 22 Algemene Verordening Gegevensbescherming</li> <li>Artikel 40 Uitvoeringswet AVG </li> <li>Artikel 1:3 Algemene wet bestuursrecht</li> <li>Advies landsadvocaat over geautomatiseerde selectietechnieken</li> <li>Advies artikel 22 AVG en geautomatiseerde selectie-instrumenten</li> <li>[Kamerbrief met kabinetsreactie AP-advies over geautomatiseerde selectie-instrumenten](Kamerbrief met kabinetsreactie AP-advies over geautomatiseerde selectie-instrumenten0</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/#risico","title":"Risico","text":"<p>Bij geautomatiseerde besluitvorming kan het risico ontstaan dat kenmerken van een bepaalde groep ten onrechte worden tegengeworpen aan een individu die deze kenmerken niet hoeft te bezitten.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/","title":"Ontwerp en standaardinstellingen (defaults) zijn zo gunstig mogelijk voor de privacy van betrokkenen","text":"<p>avg-11OntwerpDataverkenning en datapreparatieBeleid en adviesProjectleiderJuristOntwikkelaarPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/#vereiste","title":"Vereiste","text":"<p>Privacy en gegevensbescherming door goed ontwerp en door standaardinstellingen</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/#toelichting","title":"Toelichting","text":"<p>Gegevensbescherming door ontwerp en standaardinstellingen houdt in dat privacy- en gegevensbescherming vanaf het begin worden ge\u00efntegreerd in de ontwikkeling van systemen en processen (ook wel privacy-by-design genoemd). Door al bij het ontwerp rekening te houden met privacyaspecten en door standaardinstellingen die privacy bevorderen, wordt de bescherming van persoonsgegevens versterkt. Hierbij kan worden gedacht een het pseudonimiseren van persoonsgegevens of dataminimalisatie.</p> <p>Deze aanpak zorgt ervoor dat privacy-overwegingen een integraal onderdeel zijn van alle aspecten van gegevensverwerking en draagt bij aan het vertrouwen van individuen in de veilige omgang met hun gegevens. Dit is eveneens van toepassing als persoonsgegevens worden verwerkt bij het ontwikkelen en gebruiken van algoritmes.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 25 Algemene Verordening Gegevensbescherming</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/#risico","title":"Risico","text":"<p>Door privacy en gegevensbescherming door ontwerp en standaardinstellingen niet toe te passen, kan een inbreuk op rechten van betrokkenen ontstaan.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/","title":"Data zoals persoonsgegevens zijn voldoende beveiligd tegen ongelukken en cyberaanvallen","text":"<p>avg-12OrganisatieverantwoordelijkhedenJuristOntwikkelaarPrivacy en gegevensbeschermingTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/#vereiste","title":"Vereiste","text":"<p>Rekening houdend met de stand van de techniek, de uitvoeringskosten, alsook met de aard, de omvang, de context en de verwerkingsdoeleinden en de qua waarschijnlijkheid en ernst uiteenlopende risico's voor de rechten en vrijheden van personen, treffen de verwerkingsverantwoordelijke en de verwerker passende technische en organisatorische maatregelen om een op het risico afgestemd beveiligingsniveau te waarborgen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/#toelichting","title":"Toelichting","text":"<p>Voor de ontwikkeling en gebruik van algoritmes is data nodig. Deze data kan persoonsgegevens bevatten die moeten worden beschermd. De organisatie zal technische en organisatorische maatregelen moeten treffen om de data en het algoritme voldoende te beschermen. Hierbij kan worden gedacht aan dataminimalisatie, het pseudonimiseren of aggregeren van persoonsgegevens. Per toepassing moet worden onderzocht welke maatregelen hiervoor geschikt zijn.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/#bronnen","title":"Bronnen","text":"<p>Artikel 32 Algemene Verordening Gegevensbescherming|</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/#risico","title":"Risico","text":"<p>Er kunnen risico's ontstaan zoals potenti\u00eble cyberaanvallen en datalekken. Dit kan leiden bijvoorbeeld tot verlies of diefstal van gevoelige gegevens, verstoring van organisatieprocessen,ongeautoriseerde toegang, vernietiging en onrechtmatige verwerking.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/","title":"Een Data Protection Impact Assessment (DPIA) wordt uitgevoerd wanneer de verwerking van persoonsgegevens waarschijnlijk een hoog risico met zich meebrengt voor de rechten en vrijheden van natuurlijke personen","text":"<p>avg-13OntwerpDataverkenning en datapreparatieVerificatie en validatieJuristProjectleiderPrivacy en gegevensbescherming</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/#vereiste","title":"Vereiste","text":"<p>Een gegevensbeschermingseffectbeoordeling (DPIA) is verplicht, indien een verwerking van persoonsgegevens waarschijnlijk een hoog risico inhoudt voor de rechten en vrijheden van natuurlijke personen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/#toelichting","title":"Toelichting","text":"<p>Een Gegevensbeschermingseffectbeoordeling (GEB) of Data Protection Impact Assessment (DPIA) is verplicht wanneer de verwerking van persoonsgegevens waarschijnlijk een hoog risico met zich meebrengt voor de rechten en vrijheden van natuurlijke personen.  Deze beoordeling identificeert en beperkt potenti\u00eble risico's en zorgt ervoor dat passende maatregelen worden genomen om de privacy van individuen te beschermen.  Deze verplichting draagt bij aan een zorgvuldige en verantwoorde omgang met persoonsgegevens in algoritmes, waardoor de privacy van individuen wordt gewaarborgd.</p> <p>Let op: de DPIA verplichting is niet gebaseerd op de hoog-risico criteria uit de AI-act. Volgens Besluit lijst verwerkingen persoonsgegevens waarvoor een gegevensbeschermingseffectbeoordeling (DPIA) verplicht is, Autoriteit Persoonsgegevens moet voor het uitvoeren van een DPIA in ieder geval uitgegaan worden van een hoog risico als er sprake is van \u00e9\u00e9n van de volgende voorwaarden:</p> <ol> <li>Evaluatie of scoretoekenning</li> <li>Geautomatiseerde besluitvorming met rechtsgevolg of vergelijkbaar wezenlijk gevolg</li> <li>Stelselmatige monitoring</li> <li>Gevoelige gegevens of gegevens van zeer persoonlijke aard</li> <li>Op grote schaal verwerkte gegevens</li> <li>Matching of samenvoeging van datasets</li> <li>Gegevens met betrekking tot kwetsbare betrokkenen</li> <li>Innovatief gebruik of innovatieve toepassing van nieuwe technologische of organisatorische oplossingen</li> <li>de situatie waarin als gevolg van de verwerking zelf \"betrokkenen [...] een recht niet kunnen uitoefenen of geen beroep kunnen doen op een dienst of een overeenkomst\";</li> </ol> <p>Het is mogelijk dat algoritmes die niet aan \u00e9\u00e9n of meer van deze eigenschappen voldoen toch voor een potentieel hoog risico zorgen. </p> <p>Gebruiksverantwoordelijken van AI-systemen met een hoog risico gebruiken die informatie op grond van artikel 13 AI Verordening om hun verplichting na te komen om een gegevensbeschermingseffectbeoordeling uit te voeren. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 35 Algemene Verordening Gegevensbescherming</li> <li>Artikel 26(9) Verordening Artifici\u00eble Intelligentie </li> <li>Besluit lijst verwerkingen persoonsgegevens waarvoor een gegevensbeschermingseffectbeoordeling (DPIA) verplicht is, Autoriteit Persoonsgegevens</li> <li>Data protection impact assessment (DPIA) Autoriteit Persoonsgegevens</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/#risico","title":"Risico","text":"<p>Het niet evalueren van de impact van het verwerking van persoonsgegevens in algoritmes kan resulteren in het niet onderkennen van de bijbehorende risico's  en het niet op tijd te mitigieren van deze risico's. Dit kan leiden tot potenti\u00eble schendingen van de rechten en vrijheden van betrokkenen en een onrechtmatige verwerking.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/#hulpmiddelen","title":"Hulpmiddelen","text":"HulpmiddelenData Protection Impact AssessmentToetsingskader Algoritmes Algemene Rekenkamer"},{"location":"voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/","title":"Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.","text":"<p>awb-01OntwerpOntwikkelenVerificatie en validatieProjectleiderBeleid en adviesFundamentele rechten</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/#vereiste","title":"Vereiste","text":"<p>Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/#toelichting","title":"Toelichting","text":"<p>Het zorgvuldigheidsvereiste eist dat een besluit met de nodige zorgvuldigheid wordt voorbereid en juist wordt genomen. Dit vraagt onder meer om een zorgvuldig onderzoek naar informatie, feiten, een zorgvuldige beslissingsprocedure en een deugdelijke besluitvorming. </p> <p>Dit betekent dat bij de ontwikkeling en gebruik van algoritmes informatie moet worden vastgelegd  over het algoritme. Hierbij kan worden gedacht aan: - Dat het doel en eventuele subdoelen van het algoritme of AI-systeem helder zijn gedefinieerd, ook in relatie tot het maatschappelijke resultaat (outcome). - Een bewuste afweging afmaken en vaststellen of het algoritme het juiste middel is om het probleem op doelmatige en doeltreffende wijze op te lossen. - Dat de werking van het algoritme is onderzocht en is vastgesteld dat dit passend is om te gebruiken in een besluitvormingsproces.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/#bronnen","title":"Bronnen","text":"<ul> <li>Afdeling 3.2 Algemene wet bestuursrecht</li> <li>Afdeling 3.4 Algemene wet bestuursrecht</li> <li>Advies artikel 22 AVG en geautomatiseerde selectie-instrumenten</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/#risico","title":"Risico","text":"<p>De werking van het algoritmes sluit niet of onvoldoende aan bij de juridische en ethische grenzen van de te ondersteunen wettelijke taak. Hierdoor kunnen ongewenste gevolgen ontstaan zoals een onjuist of onzorgvuldig genomen besluit.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/","title":"Organisaties kunnen duidelijk uitleggen waarom en hoe algoritmes leiden tot een besluit","text":"<p>awb-02OntwerpImplementatieMonitoring en beheerProjectleiderOntwikkelaarTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/#vereiste","title":"Vereiste","text":"<p>Een besluit berust op een deugdelijke en kenbare motivering.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/#toelichting","title":"Toelichting","text":"<p>De Awb eist dat een besluit een deugdelijke en kenbare motivering heeft. Dit geldt ook als algoritmes worden ingezet. Een betrokkene moet in staat zijn om te controleren of de overheid een besluit correct heeft genomen. Het motiveringsbeginsel draagt bij aan doelen als verantwoording kunnen afleggen en het bieden van rechtsbescherming. Het kan in samenhang worden gezien met transparantieverplichtingen die voortkomen uit de AVG. </p> <p>Het is van belang dat inzichtelijk wordt gemaakt in het besluit welke gegevens zijn verwerkt en welke 'aannames' een algoritme bevat. Dit speelt in het bijzonder als gebruik wordt gemaakt van geautomatiseerde besluitvormingsprocessen. Hierbij kan worden gedacht aan:</p> <ul> <li> <p>Dat een besluit tot stand is gekomen met behulp van een algoritme.</p> </li> <li> <p>Van welke feiten het bestuursorgaan is uitgegaan.</p> </li> <li> <p>Welke gegevens zijn verwerkt.</p> </li> <li> <p>Welke relevante belangen tegen elkaar zijn afgewogen en hoe die afweging is verlopen.</p> </li> <li> <p>Welke regels zijn gebruikt.</p> </li> <li> <p>Wat de hierachter is (kenbaarheid).</p> </li> <li> <p>Welke analytische technieken zijn gebruikt.</p> </li> <li> <p>Waarom deze regels en logica relevant zijn (uitleg)?</p> </li> <li> <p>Op welke wijze de regels en logica tot stand zijn gekomen en hoe deze regels worden gevalideerd.</p> </li> </ul> <p>Een besluit moet informatie hierover bevatten om als om als voldoende draagkrachtig gemotiveerd te gelden. Het motiveringsbeginsel op grond van de Awb is beperkt tot besluiten in de zin van de Awb. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 3:46 en 3:47 Awb</li> <li>Jurisprudentie over AERIUS (ABRvS 18 juli 2018, ECLI:NL:RVS:2018:2454), Hof van Justitie C-274/18</li> <li>Advies artikel 22 AVG en geautomatiseerde selectie-instrumenten</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/#risico","title":"Risico","text":"<p>Het is onduidelijk op wat voor manier het algoritmes heeft bijgedragen aan de totstandkoming van een besluit. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/","title":"Computersystemen zijn voldoende beveiligd tegen ongelukken en cyberaanvallen","text":"<p>bio-01OrganisatieverantwoordelijkhedenBeleid en adviesOntwikkelaarTechnische robuustheid en veiligheid</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/#vereiste","title":"Vereiste","text":"<p>Informatie en informatiesystemen moeten op de juiste manier worden beveiligd.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/#toelichting","title":"Toelichting","text":"<p>Informatiebeveiliging is het proces van vaststellen van de vereiste beveiliging van informatiesystemen in termen van vertrouwelijkheid, beschikbaarheid en integriteit alsmede het treffen, onderhouden en controleren van een samenhangend pakket van bijbehorende maatregelen. In Nederland is besloten dat overheidsinstellingen de Baseline Informatiebeveiliging Overheid (BIO) dienen toe te passen over hun informatie en informatiesystemen. De BIO beoogt de beveiliging van informatie(systemen) bij alle bestuurslagen en bestuursorganen van de overheid te bevorderen, zodat alle onderdelen erop kunnen vertrouwen dat onderling uitgewisselde gegevens, in lijn met wet- en regelgeving, passend beveiligd zijn.</p> <p>Algoritmes en hun output kunnen onderdeel worden van de informatie en informatiesystemen waar de BIO op van toepassing is. Het is van belang om algoritmische toepassingen en AI-systemen op de juiste manier te beveiligen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/#bronnen","title":"Bronnen","text":"<ul> <li>Baseline Informatiebeveiliging Overheid </li> <li>Besluit voorschrift informatiebeveiliging rijksdienst 2007</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/#risico","title":"Risico","text":"<p>Er kunnen risico's ontstaan zoals ongeautoriseerde toegang, vernietiging, verlies, wijziging of niet-toegestane verwerking van gegevens als de informatie en informatiesystemen onvoldoende zijn beveiligd.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/","title":"Impactvolle algoritmes en hoog-risico-AI-systemen staan in het Nederlandse Algoritmeregister","text":"<p>bzk-01ImplementatieMonitoring en beheerProjectleiderTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/#vereiste","title":"Vereiste","text":"<p>Bestuursorganen publiceren algoritmes met impact en hoog-risico-AI-systemen in het Nederlandse Algoritmeregister.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/#toelichting","title":"Toelichting","text":"<p>Het publiceren van algoritmes draagt bij aan transparantie voor belanghebbenden en derden over welke algoritmes worden gebruikt door de overheid. Het is vastgesteld beleid dat overheidsinstellingen, tenzij er uitsluitingsgronden zijn, de door hen gebruikte impactvolle algoritmes en hoogrisico AI-systemen publiceren in het algoritmeregister. Er wordt gewerkt aan wetgeving om het bij wet verplicht te stellen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/#bronnen-bestaand-beleid","title":"Bronnen (bestaand beleid)","text":"<ul> <li>Handreiking Algoritmeregister</li> <li>Geactualiseerde Werkagenda Waardengedreven Digitaliseren 2024</li> <li>Kamerbrieven</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/#risico","title":"Risico","text":"<p>Door het niet publiceren van impactvolle algoritmes of hoog risico AI -systemen in het Algoritmeregister, is het voor betrokkenen of belanghebbenden minder goed mogelijk om de overheid kritisch te volgen, te bevragen en te controleren op de inzet van deze technologie\u00ebn die hen kunnen raken.  Bij het onjuist of onvolledig publiceren in het Algortimeregister ontstaat er een risico dat betrokkenen en belanghebbenden onjuiste inschattingen maken over het gebruik van het algoritmes en daardoor in hun rechten worden beperkt.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/#hulpmiddelen","title":"hulpmiddelen","text":"HulpmiddelenAlgoritmeregister"},{"location":"voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/","title":"Databanken worden alleen gebruikt met toestemming van de databank-producent","text":"<p>dat-01Dataverkenning en datapreparatieJuristData</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/#vereiste","title":"Vereiste","text":"<p>Het is verboden om zonder goedkeuring van de producent een databank op te vragen en/of te hergebruiken.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/#toelichting","title":"Toelichting","text":"<p>De Databankrichtlijn en Databankenwet beschermt de producten/fabrikanten van databanken tegen onrechtmatige toe-eigening van een databank. Degene die een substanti\u00eble financi\u00eble en professionele investering heeft verricht om de inhoud van de databank te verkijgen en te verzamelen, krijgt een verbodsrecht en kan zo anderen verbieden de databank te gebruiken. Bij verkrijgen gaat het om \"het verzamelen van de werken, gegevens of andere zelfstandige elementen die tezamen de inhoud van de databank vormen\". Dit recht bestaat naast het recht op bescherming van de originele keuze of rangschikking van de inhoud van databanken (auteurswet).</p> <p>Voor het ontwikkelen van algoritme is data nodig. De data die hiervoor wordt gebruikt mag niet ongeoorloofd zijn verkregen uit een databank.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 1 en 2 Databankenwet</li> <li>Artikel 5a en 5b Databankenwet</li> <li>Artikel 7 Databankrichtlijn</li> <li>Overwegingen 39 - 41 Databankrichtlijn</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/#risico","title":"Risico","text":"<p>Als een ontwikkelaar onbevoegd gebruik heeft gemaakt van data uit een databank bij de ontwikkeling van algoritmes, wordt het databankenrecht geschonden van de eigenaar.  De eigenaar van de databank kan bijvoorbeeld ontrekking van de data uit het handelsverkeer, vernietiging en onbruikbaarmaking  eisen, wat vergaande gevolgen kan hebben voor het gebruik kunnen maken van de algoritmische toepassing of AI-systeem.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/","title":"Algoritmes schenden geen grondrechten of mensenrechten","text":"<p>grw-01ProbleemanalyseOntwerpVerificatie en validatieMonitoring en beheerProjectleiderJuristFundamentele rechten</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/#vereiste","title":"Vereiste","text":"<p>Fundamentele vrijheden, mensenrechten en grondrechten worden beschermd bij de inzet van algoritmes.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/#toelichting","title":"Toelichting","text":"<p>Mensenrechten gelden voor alle mensen op de wereld. De mensenrechten in Nederland zijn beschermd door nationale wetten en internationale verdragen. In Nederland staan veel mensenrechten in hoofdstuk 1 van de Grondwet. Deze rechten heten ook wel \u2019grondrechten\u2019. Een bekend voorbeeld is artikel 1 van de Grondwet. Om mensenrechten te beschermen zijn ze op Europees en internationaal niveau in verschillende verklaringen en verdragen vastgelegd.</p> <p>Mensenrechten kunnen soms onder druk komen te staan. De inzet van algoritmes kan bijvoorbeeld een bedreiging vormen voor de privacy van burgers, voor het  recht op gelijke behandeling en voor het recht op behoorlijk bestuur. Het is daarom belangrijk om tijdig te onderzoeken of er sprake is of kan zijn van een eventuele inbreuk op fundamentele rechten en vrijheden van burgers. Het is van belang dat maatregelen worden getroffen om een eventuele inbreuk te voorkomen.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/#bronnen","title":"Bronnen","text":"<ul> <li>Grondwet</li> <li>Europees Verdragvoor de Rechten van de Mens (EVRM)</li> <li>Handvest van de grondrechten van de Europese Unie</li> <li>Universele Verklaring van de Rechten van de Mens (UVRM)</li> <li>Internationaal Statuut van de Rechten van de Mens</li> <li>Internationale Verdrag inzake burgerrechten en politieke rechten (IVBPR)</li> <li>Internationale Verdrag inzake economische, sociale en culturele rechten (IVESCR)</li> <li>Internationaal Verdrag inzake de uitbanning van alle vormen van rassendiscriminatie (CERD)</li> <li>Internationaal Verdrag voor de rechten van het kind (CRC)</li> <li>Internationaal Verdrag voor de Rechten van Mensen met een Handicap (VN-verdrag Handicap)</li> <li>Artikel 27 Verordening Artifici\u00eble Intelligentie</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/#risico","title":"Risico","text":"<p>Grondrechten kunnen worden geraakt door de inzet van algoritmes met eventuele schadelijke gevolgen voor betrokkenen. </p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/#hulpmiddelen","title":"hulpmiddelen","text":"HulpmiddelenImpact Assessment Mensenrechten en AlgoritmesThe Fairness HandbookHandreiking non-discriminatie by designDiscriminatie door risicoprofielen - Een mensenrechtelijk toetsingskader"},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/","title":"Algoritmes discrimineren niet","text":"<p>grw-02Dataverkenning en datapreparatieVerificatie en validatieMonitoring en beheerProjectleiderBias en non discriminatie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/#vereiste","title":"Vereiste","text":"<p>Allen die zich in Nederland bevinden, worden in gelijke gevallen gelijk behandeld. Directe en indirecte discriminatie wegens godsdienst, levensovertuiging, politieke gezindheid, ras, geslacht, handicap, seksuele gerichtheid of op welke grond dan ook, is niet toegestaan.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/#toelichting","title":"Toelichting","text":"<p>Overheidsinstanties moeten zich bij het uitvoeren van hun taken onthouden van discriminatie, ook wanneer er gebruik wordt gemaakt van algoritmes. Wanneer er algoritmes worden gebruikt om selecties te maken van burgers, dienen we te streven naar een gelijke behandeling van personen of groepen ten opzichte van andere personen in een vergelijkbare situatie. Hierbij is het belangrijk te beseffen dat discriminatie ook op indirecte wijze kan ontstaan. Hiervan is sprake wanneer een ogenschijnlijk neutrale bepaling, maatstaf of handelwijze personen met een beschermd persoonskenmerk in vergelijking met andere personen in het bijzonder benadeelt, tenzij hiervoor een objectieve rechtvaardiging bestaat.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 1 Grondwet </li> <li>Artikel 14 Verdrag tot bescherming van de rechten van de mens en de fundamentele vrijheden, Rome, 04-11-1950</li> <li>Artikel 21 Handvest van de Grondrechten van de Europese Unie</li> <li>Artikel 1 Algemene wet gelijke behandeling </li> <li>Artikel 1 Protocol nr. 12 bij het Verdrag tot bescherming van de rechten van de mens en de fundamentele vrijheden, Rome, 04-11-2000 </li> <li>Artikel 9 Algemene Verordening Gegevensbescherming </li> <li>Artikel 2:4 Algemene wet bestuursrecht </li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/#risico","title":"Risico","text":"<p>Het risico bestaat dat het model onwenselijke systematische afwijkingen cre\u00ebert voor specifieke personen, groepen of andere eenheden, wat kan duiden op directe of indirecte discriminerende effecten van het algoritme.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/","title":"Iedereen kan openbare informatie over algoritmes vinden of aanvragen","text":"<p>woo-01OrganisatieverantwoordelijkhedenJuristProjectleiderTransparantie</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/#vereiste","title":"Vereiste","text":"<p>Een bestuursorgaan draagt er zorg voor dat de documenten die het ontvangt, vervaardigt of anderszins onder zich heeft, zich in goede, geordende en toegankelijke staat bevinden. Een bestuursorgaan draagt er zoveel mogelijk zorg voor dat de informatie die het overeenkomstig deze wet verstrekt, actueel, nauwkeurig en vergelijkbaar is.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/#toelichting","title":"Toelichting","text":"<p>Bij het ontwikkelen en gebruiken van algoritmes kunnen documenten en publieke informatie ontstaan die (op verzoek) in aanmerking komen voor openbaarmaking. Het kunnen openbaren van publieke informatie is in het belang van een democratische rechtstaat. De Wet open overheid gaat uit van een recht op openbaarheid van publieke informatie. Iedereenkan een verzoek tot openbaarmaking van publieke informatie doen bij een bestuursorgaan zonder daarbij een belang te stellen (artikel 4.1 Woo). De aan een verzoeker verstrekte informatie wordt openbaar voor iedereen. De Woo is niet van toepassing op informatie die al openbaar is (uitspraken van de Afdeling bestuursrechtspraak van de Raad van State van 1 december 2010 (ECLI:NL:RVS:2010:BNS6990) en 20 oktober 2010 (ECLI:NL:RVS:2010:BO1165)). Er kunnen uitsluitingsgronden bestaan voor het openbaarmaken van documenten (artikel 5.1 Woo).</p> <p>In de context van het ontwikkelen en gebruiken van algoritmes is het van belang dat tijdig wordt vastgesteld welke documenten in aanmerking komen voor openbaarmaking. Dit moet worden bekeken in het licht van wat 'actief' moet worden geopenbaard, dus proactief vanuit overheidsinstanties zelf, of wat op 'verzoek' van iemand moet worden geopenbaard.</p>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/#bronnen","title":"Bronnen","text":"<ul> <li>Artikel 1.1 Wet open overheid</li> <li>Artikel 2.5 Wet open overheid</li> <li>Artikel 4.1 Wet open overheid</li> <li>Artikel 5 Wet open overheid</li> </ul>"},{"location":"voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/#wanneer-van-toepassing","title":"Wanneer van toepassing?","text":""},{"location":"voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/#risico","title":"Risico","text":"<p>Zonder het openbaren van overheidsinformatie kan de overheid niet effectief worden gecontroleerd bij het uitvoeren van wettelijke taken.</p>"}]}
\ No newline at end of file
diff --git a/pr-preview/pr-480/sitemap.xml b/pr-preview/pr-480/sitemap.xml
index a86a6de069..3080981c14 100644
--- a/pr-preview/pr-480/sitemap.xml
+++ b/pr-preview/pr-480/sitemap.xml
@@ -2,802 +2,810 @@
 <urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/version/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/levenscyclus/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/levenscyclus/dataverkenning-en-datapreparatie/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/levenscyclus/implementatie/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/levenscyclus/monitoring-en-beheer/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/levenscyclus/ontwerp/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/levenscyclus/ontwikkelen/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/levenscyclus/organisatieverantwoordelijkheden/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
+    </url>
+    <url>
+         <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/levenscyclus/over-de-levenscyclus/</loc>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/levenscyclus/probleemanalyse/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/levenscyclus/uitfaseren/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/levenscyclus/verificatie-en-validatie/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/onderwerpen/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/onderwerpen/bias-en-non-discriminatie/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/onderwerpen/data/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/onderwerpen/duurzaamheid/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/onderwerpen/fundamentele-rechten/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/onderwerpen/governance/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/onderwerpen/menselijke-controle/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/onderwerpen/privacy-en-gegevensbescherming/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/onderwerpen/publieke-inkoop/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/onderwerpen/technische-robuustheid-en-veiligheid/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/onderwerpen/transparantie/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/overhetalgoritmekader/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/overhetalgoritmekader/CONTRIBUTING/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/overhetalgoritmekader/definities/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/overhetalgoritmekader/over-het-algoritmekader/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/overhetalgoritmekader/soorten-algoritmes/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/rollen/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/rollen/beleid-en-advies/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/rollen/jurist/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/rollen/ontwikkelaar/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/rollen/projectleider/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/ai-verordening/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/hulpmiddelen/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/hulpmiddelen/ALTAI/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/hulpmiddelen/BIO/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/hulpmiddelen/DEDA/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/hulpmiddelen/DPIA/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/hulpmiddelen/IAMA/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/hulpmiddelen/algoritmeregister/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/hulpmiddelen/fairness-handbook/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/hulpmiddelen/framework-meaningful-engagement/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/hulpmiddelen/inkoopvoorwaarden/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/hulpmiddelen/mensenrechtelijktoetsingskader/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/hulpmiddelen/onderzoekskader-adr/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/hulpmiddelen/toetsingskader-algemene-rekenkamer/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-01-benodigde-expertise-en-capaciteit/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-02-beleid_opstellen_inzet_algoritmes/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-03-toepassen_risicobeheer/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-04-politiek-bestuurlijke-verantwoordelijkheid/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-05-bestaande-governance/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-06-volwassenheidsmodel/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-07-intern-toezicht/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-08-beslismoment-levenscyclus/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-09-governance-per-risicocategorie/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-10-inrichten-taken-en-verantwoordelijkheden-algoritmegovernance/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-11-gebruikersbeheer/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-12-periodieke-evaluatie-kwaliteit/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-13-wachtwoordbeheer/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-14-wijzigingenproces/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/0-org-15-discriminatieprotocol/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-01-formuleren-probleemdefinitie/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-02-formuleren-doelstelling/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-03-onderbouwen-gebruik-algoritme/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-04-betrek-belanghebbenden/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/1-pba-05-wettelijke-grondslag/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-01-rollen-en-verantwoordelijkheden/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-02-data-beschikbaarheid/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-03-doel-verwerken-persoonsgegevens/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-04-gebruikte-techniek/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-05-soort-algoritme/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-06-afwegen-grondrechten/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-07-kwetsbare-groepen/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-08-archiveren-documenten/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-model-verwerkersovereenkomst-onderdeel-aanbesteding/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-09-multidisciplinair-inkoopteam/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-10-projectstartarchitectuur/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-duurzaam-inkopen/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-11-gebruikte-data/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-eenvoudigere-algoritmes/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-14-verwerkersovereenkomst-onderdeel-aanbesteding/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-15-leveren-bewijs_voldoen-aan-vereisten-algoritme-aanbieder/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-16-leveren-bewijs-door-aanbieder-niet-schenden-auteursrechten/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-17-beoordeel-aansprakelijkheidsvoorwaarden-van-aanbieder/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-18-maak-vereisten-onderdeel-van-subgunningscriteria/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-20-vaststellen-aanleveren-informatie-technische-documentatie/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-22-invloed-besluitvorming-algoritmes-aanbieders/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-24-risico-analyse-informatiebeveiliging-leverancier/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-27-contractuele-afspraken-data-en-artefacten/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-28-pas-vastgestelde-beleidskaders-zijn-nageleefd/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-29-informeer_betrokkenen/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-30-toepassen_uitlegbaarheidstechnieken/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-genereren-bronvermelding/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-31-toepassen_vastgestelde-beleidskaders/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-01-datakwaliteit/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-02-fair-data/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-04-bewaartermijnen-persoonsgegevens/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-05-pseudonimiseren-anonimiseren/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-06-schending-auteursrechten/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-duurzame-datacenters/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-07-training-validatie-en-testdata/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-08-eigenaarschap-data/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-09-dataminimalisatie/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-01-security-by-design/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-02-stopzetten-gebruik/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-03-privacyrisico/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-04-logging/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-05-energiezuinige-programmeermethoden/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/4-owk-06-optimaliseer-AI-training/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-01-functioneren-in-lijn-met-doeleinden/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-03-vertaling-wetgeving-naar-systeem/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-02-aselecte-steekproeven/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-03-menselijke-tussenkomst/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-04-publiceren-algoritmeregister/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-proces-privacyrechten/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-05-werkinstructies-medewerkers/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-06-vermelding-in-privacyverklaring/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-07-klacht-bezwaar-beroep/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-08-vermelding-in-verwerkingsregister/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-09-politiek-bestuurlijk-besluit/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-01-backups-maken/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-02-beveiliging-algoritme/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-03-informatiebeveiligingsincidenten/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-04-evalueer-bij-veranderingen-in-data/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/7-mon-05-meten-milieu-impact/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-verboden-AI-praktijken/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-20-gebruiksverantwoordelijken-maatregelen/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-21-gebruiksverantwoordelijken-menselijk-toezicht/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-22-gebruiksverantwoordelijken-monitoren-werking/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-23-gebruiksverantwoordelijken-bewaren-logs/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-24-informeren-werknemers/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-25-gebruiksverantwoordelijken-registratieverplichtingen/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-26-recht-op-uitleg-ai-besluiten/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-29-ai-modellen-algemene-doeleinden/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-30-ai-modellen-algemene-doeleinden-systeemrisico/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-31-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-32-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-33-verwerking-in-testomgeving/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-34-monitoring-na-het-in-de-handel-brengen/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-35-melding-ernstige-incidenten/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-36-melding-inbreuk-op-ai-verordening/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
+    </url>
+    <url>
+         <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/</loc>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
     <url>
          <loc>https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/</loc>
-         <lastmod>2024-12-16</lastmod>
+         <lastmod>2024-12-17</lastmod>
     </url>
 </urlset>
\ No newline at end of file
diff --git a/pr-preview/pr-480/sitemap.xml.gz b/pr-preview/pr-480/sitemap.xml.gz
index 1905097c81..7c9cb89e0c 100644
Binary files a/pr-preview/pr-480/sitemap.xml.gz and b/pr-preview/pr-480/sitemap.xml.gz differ
diff --git a/pr-preview/pr-480/version/index.html b/pr-preview/pr-480/version/index.html
index 09f354d492..2b35a41d4c 100644
--- a/pr-preview/pr-480/version/index.html
+++ b/pr-preview/pr-480/version/index.html
@@ -758,7 +758,7 @@
 
 <h2 id="-">---</h2>
 <h1 id="huidige-versie">Huidige versie</h1>
-<p>v1.6.1-35-geffb60f72</p>
+<p>v1.6.1-37-g8aaaa3218</p>
 
 
 
diff --git a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/hulpmiddelen/fairness-handbook/index.html b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/hulpmiddelen/fairness-handbook/index.html
index ba7e9c9239..eb5c624d50 100644
--- a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/hulpmiddelen/fairness-handbook/index.html
+++ b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/hulpmiddelen/fairness-handbook/index.html
@@ -873,7 +873,7 @@ <h2 id="relevantie">Relevantie</h2>
 <h2 id="auteurs-en-ontwikkeling">Auteurs en Ontwikkeling</h2>
 <p>Het Fairness Handbook is ontwikkeld in 2022 door de Gemeente Amsterdam, met als doel de eerlijkheid en transparantie van haar AI-systemen te verbeteren. Het project is tot stand gekomen in samenwerking met diverse stakeholders, waaronder datawetenschappers, ethici en <a href="../../../rollen/beleid-en-advies/">beleidsmakers</a>, om ervoor te zorgen dat het handboek aansluit bij de bredere maatschappelijke behoeften en regelgeving. Door deze samenwerking biedt het Fairness Handbook een gebalanceerd perspectief, met aandacht voor zowel technische oplossingen als ethische en <a href="../../../rollen/jurist/">juridische</a> overwegingen die nodig zijn voor verantwoorde AI-toepassingen.</p>
 <h2 id="bijbehorende-vereisten">Bijbehorende vereisten</h2>
-<table><thead><tr><th>Vereiste</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/">grw-01 - Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/">grw-02 - Algoritmes discrimineren niet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/">aia-04 - Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen</a></td></tr></tbody></table>
+<table><thead><tr><th>Vereiste</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/">grw-01 - Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/">grw-02 - Algoritmes discrimineren niet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/">aia-04 - Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen.</a></td></tr></tbody></table>
 
 <h2 id="bijbehorende-maatregelen">Bijbehorende maatregelen</h2>
 <table><thead><tr><th>Maatregel</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-01-datakwaliteit/">dat-01 - Controleer de datakwaliteit</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/">ver-01 - Toets het algoritme op bias</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-02-aselecte-steekproeven/">imp-02 - Doe aselecte steekproeven om algoritmes met 'risicogestuurde selectie’ te controleren</a></td></tr></tbody></table>
diff --git a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/index.html b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/index.html
index e40f109b5e..3fd45fbb9e 100644
--- a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/index.html
+++ b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/hulpmiddelen/handreiking-non-discriminatie/index.html
@@ -919,7 +919,7 @@ <h3 id="relatie-tot-het-fairness-handbook">Relatie tot het Fairness Handbook</h3
 <h3 id="relatie-tot-toetsingskader-risicoprofielen-van-college-voor-de-rechten-van-de-mens">Relatie tot Toetsingskader Risicoprofielen van College voor de Rechten van de Mens</h3>
 <p>Ook het <a href="https://publicaties.mensenrechten.nl/publicatie/61a734e65d726f72c45f9dce">toetsingskader voor discriminatie door risicoprofielen van het College voor de Rechten van de Mens</a> kan worden gebruikt om te bepalen of er discriminatie plaatsvindt. Dit kader is afkomstig uit 2021 en er wordt gewerkt aan een nieuwe versie, die waarschijnlijk eind 2024 zal verschijnen. De verschillende stappen die daarin gebruikt worden om te bepalen of een risicoprofiel tot discriminatie leidt op grond van ras of nationaliteit, zijn zeer relevant. Daarvoor hebben zij <a href="https://publicaties.mensenrechten.nl/file/6ac9f9ec-c837-23b1-0032-5c2e684db188.pdf">een beslisboom ontwikkeld</a>.</p>
 <h2 id="bijbehorende-vereisten">Bijbehorende vereisten</h2>
-<table><thead><tr><th>Vereiste</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/">grw-01 - Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/">grw-02 - Algoritmes discrimineren niet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/">aia-04 - Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen</a></td></tr></tbody></table>
+<table><thead><tr><th>Vereiste</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/">grw-01 - Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/">grw-02 - Algoritmes discrimineren niet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/">aia-04 - Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen.</a></td></tr></tbody></table>
 
 <h2 id="bijbehorende-maatregelen">Bijbehorende maatregelen</h2>
 <table><thead><tr><th>Maatregel</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/3-dat-01-datakwaliteit/">dat-01 - Controleer de datakwaliteit</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/5-ver-02-biasanalyse/">ver-01 - Toets het algoritme op bias</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-02-aselecte-steekproeven/">imp-02 - Doe aselecte steekproeven om algoritmes met 'risicogestuurde selectie’ te controleren</a></td></tr></tbody></table>
diff --git a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/index.html b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/index.html
index 6bce25e2d5..ab3917b0b9 100644
--- a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/index.html
+++ b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/index.html
@@ -847,29 +847,29 @@ <h1 id="voldoen-aan-wetten-en-regels">Voldoen aan wetten en regels</h1>
 <div class="grid cards" style="margin-top:32px;">
 <ul>
 <li>
-<p><a href="vereisten/"><strong>Vereisten</strong></a></p>
+<p><a href="vereisten/"><strong>Vereisten voor de overheid</strong></a></p>
 <hr />
 <p>Overzicht van de belangrijkste vereisten voor overheden die algoritmes of AI-systemen ontwikkelen of gebruiken.</p>
 </li>
 <li>
-<p><a href="maatregelen/"><strong>Maatregelen</strong></a></p>
+<p><a href="maatregelen/"><strong>Aanbevolen maatregelen</strong></a></p>
 <hr />
-<p>Overzicht van aanbevolen maatregelen voor verantwoord gebruik van algoritmes en AI-systemen. Het zijn adviezen om te voldoen aan de vereisten voor overheden. Andere maatregelen zijn ook mogelijk.</p>
+<p>Maatregelen waarmee je kunt voldoen aan de vereisten voor overheden. Deze maatregelen zijn niet verplicht.</p>
 </li>
 <li>
-<p><a href="hulpmiddelen/"><strong>Hulpmiddelen</strong></a></p>
+<p><a href="hulpmiddelen/"><strong>Aanbevolen hulpmiddelen</strong></a></p>
 <hr />
-<p>Overzicht van aanbevolen hulpmiddelen voor het verantwoord ontwikkelen, gebruiken, beoordelen en monitoren van algoritmes en AI-systemen.</p>
+<p>Hulpmiddelen waarmee je kunt voldoen aan de vereisten voor overheden. Deze hulpmiddelen zijn niet verplicht.</p>
 </li>
 <li>
-<p><a href="ai-verordering.md"><strong>AI-verordening in het kort</strong></a></p>
+<p><a href="ai-verordening/"><strong>AI-verordening in het kort</strong></a></p>
 <hr />
-<p>In de AI-verordening staan de Europese regels voor het verantwoord ontwikkelen en gebruiken van AI. Ongewenste AI is verboden vanaf 2 februari 2025. Andere AI-systemen moeten vanaf 2026 of vóór 2030 voldoen aan bepaalde vereisten.</p>
+<p>De Europese regels voor het verantwoord ontwikkelen en gebruiken van AI. Inclusief tijdlijn.</p>
 </li>
 <li>
 <p><a href="https://ai-act-decisiontree.apps.digilab.network"><strong>Beslishulp AI-verordening</strong></a></p>
 <hr />
-<p>Stel snel en gemakkelijk vast of de AI-verordening geldt voor jouw overheidsorganisatie. En aan welke vereisten je dan moet voldoen.</p>
+<p>Geldt de AI-verordening geldt voor jouw AI-product? En aan welke vereisten moet je dan voldoen?</p>
 </li>
 </ul>
 </div>
@@ -895,7 +895,7 @@ <h1 id="voldoen-aan-wetten-en-regels">Voldoen aan wetten en regels</h1>
     <span class="md-icon" title="Laatst geüpdatet">
       <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
     </span>
-    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">11 december 2024</span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
   </span>
 
     
diff --git a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-07-kwetsbare-groepen/index.html b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-07-kwetsbare-groepen/index.html
index d0de8ec7fa..139e52773b 100644
--- a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-07-kwetsbare-groepen/index.html
+++ b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-07-kwetsbare-groepen/index.html
@@ -875,7 +875,7 @@ <h2 id="toelichting">Toelichting</h2>
 <h2 id="bijbehorende-vereisten">Bijbehorende vereiste(n)</h2>
 <details class="expander">
 <summary>Bekijk alle vereisten</summary>
-<table><thead><tr><th>Vereiste</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/">grw-01 - Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/">aia-04 - Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen</a></td></tr></tbody></table>
+<table><thead><tr><th>Vereiste</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/">grw-01 - Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/">aia-04 - Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen.</a></td></tr></tbody></table>
 </details>
 <h2 id="risico">Risico</h2>
 <p>De impact van het algoritme op de besluitvorming en op personen, doelgroepen en/of de samenleving is niet inzichtelijk, waardoor onvoldoende maatregelen zijn getroffen om ongewenste effecten (zoals bias en discriminatie) te voorkomen. </p>
diff --git a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/index.html b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/index.html
index b40e6c5faa..d75c9d1f8f 100644
--- a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/index.html
+++ b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/index.html
@@ -866,7 +866,7 @@ <h2 id="bijbehorende-vereisten">Bijbehorende vereiste(n)</h2>
 <!-- Let op! onderstaande regel met 'list_vereisten_on_maatregelen_page' niet weghalen! Deze maakt automatisch een lijst van bijbehorende verseisten op basis van de metadata  -->
 <details class="expander">
 <summary>Bekijk alle vereisten</summary>
-<table><thead><tr><th>Vereiste</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/">aia-02 - Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/">aia-03 - Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/">aia-04 - Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/">aia-05 - Datasets voor hoog-risico-AI-systemen voldoen aan kwaliteitscriteria</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/">aia-06 - Hoog-risico-AI-systemen zijn voorzien van voldoende technische documentatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/">aia-07 - Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/">aia-08 - Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/">aia-09 - Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/">aia-10 - Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/">aia-11 - Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/">aia-12 - Documentatie over hoog-risico-AI-systemen wordt 10 jaar bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/">aia-13 - Logs van hoog-risico-AI-systemen worden zes maanden bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/">aia-14 - Hoog-risico-AI-systemen worden pas geleverd of gebruikt na een conformiteitsbeoordelingsprocedure</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/">aia-15 - Hoog-risico-AI-systemen zijn voorzien van een EU-conformiteitsverklaring</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/">aia-16 - Hoog-risico-AI-systemen zijn voorzien van een CE-markering</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/">aia-17 - Hoog-risico-AI-systemen zijn geregistreerd in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/">aia-18 - Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/">aia-19 - Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen</a></td></tr><tr><td>aia-20-verstrekken-van-informatie-op-verzoek</td></tr><tr><td>aia-21-aantoonbaarheid-vereisten-hoog-risico</td></tr><tr><td>aia-28-recht-op-uitleg-ai-besluiten</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/">aia-29 - Hoog-risico-AI-systemen voor publieke taken worden beoordeeld op gevolgen voor grondrechten</a></td></tr><tr><td>aia-30-transparantieverplichtingen</td></tr><tr><td>aia-31-ai-modellen-algemene-doeleinden</td></tr><tr><td>aia-32-ai-modellen-algemene-doeleinden-systeemrisico</td></tr><tr><td>aia-33-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten</td></tr><tr><td>aia-34-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging</td></tr><tr><td>aia-35-verwerking-in-testomgeving</td></tr><tr><td>aia-36-monitoring-na-het-in-de-handel-brengen</td></tr><tr><td>aia-37-melding-ernstige-incidenten</td></tr><tr><td>aia-38-melding-inbreuk-op-ai-verordening</td></tr><tr><td>aia-39-recht-klacht-indienen-bij-ai-bureau</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/">bzk-01 - Impactvolle algoritmes en hoog-risico-AI-systemen staan in het Nederlandse Algoritmeregister</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/">arc-01 - Informatie over algoritmes wordt gedocumenteerd volgens de Archiefwet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/">aut-01 - Auteursrechten zijn beschermd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/">avg-01 - Persoonsgegevens worden op een rechtmatige manier verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/">avg-02 - Persoonsgegevens worden zo kort mogelijk bewaard</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/">avg-03 - Persoonsgegevens worden zo min mogelijk verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/">avg-04 - Persoonsgegevens en andere data verwerken gebeurt proportioneel en subsidiair</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/">avg-05 - Persoonsgegevens zijn juist en actueel</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/">avg-06 - Organisaties kunnen bewijzen dat zij persoonsgegevens op de juiste manier verwerken</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/">avg-07 - Organisaties zijn transparant over het verwerken van persoonsgegevens</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/">avg-08 - Gevoelige persoonsgegevens worden alleen gebruikt als hiervoor een wettelijke uitzondering geldt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/">avg-09 - Betrokkenen kunnen een beroep doen op hun privacyrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/">avg-10 - Besluiten die levens kunnen beïnvloeden, zijn niet volledig geautomatiseerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/">avg-11 - Ontwerp en standaardinstellingen (defaults) zijn zo gunstig mogelijk voor de privacy van betrokkenen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/">avg-12 - Data zoals persoonsgegevens zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/">avg-13 - Een Data Protection Impact Assessment (DPIA) wordt uitgevoerd wanneer de verwerking van persoonsgegevens waarschijnlijk een hoog risico met zich meebrengt voor de rechten en vrijheden van natuurlijke personen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/">awb-01 - Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/">awb-02 - Organisaties kunnen duidelijk uitleggen waarom en hoe algoritmes leiden tot een besluit</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/">bio-01 - Computersystemen zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/">dat-01 - Databanken worden alleen gebruikt met toestemming van de databank-producent</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/">grw-01 - Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/">grw-02 - Algoritmes discrimineren niet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/">woo-01 - Iedereen kan openbare informatie over algoritmes vinden of aanvragen</a></td></tr></tbody></table>
+<table><thead><tr><th>Vereiste</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/">aia-02 - Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/">aia-03 - Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/">aia-04 - Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/">aia-05 - Datasets voor hoog-risico-AI-systemen voldoen aan kwaliteitscriteria</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/">aia-06 - Hoog-risico-AI-systemen zijn voorzien van voldoende technische documentatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/">aia-07 - Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/">aia-08 - Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/">aia-09 - Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/">aia-10 - Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/">aia-11 - Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/">aia-12 - Documentatie over hoog-risico-AI-systemen wordt 10 jaar bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/">aia-13 - Logs van hoog-risico-AI-systemen worden zes maanden bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/">aia-14 - Hoog-risico-AI-systemen worden pas geleverd of gebruikt na een conformiteitsbeoordelingsprocedure</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/">aia-15 - Hoog-risico-AI-systemen zijn voorzien van een EU-conformiteitsverklaring</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/">aia-16 - Hoog-risico-AI-systemen zijn voorzien van een CE-markering</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/">aia-17 - Hoog-risico-AI-systemen zijn geregistreerd in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/">aia-18 - Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/">aia-19 - Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen</a></td></tr><tr><td>aia-20-verstrekken-van-informatie-op-verzoek</td></tr><tr><td>aia-21-aantoonbaarheid-vereisten-hoog-risico</td></tr><tr><td>aia-28-recht-op-uitleg-ai-besluiten</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/">aia-29 - Hoog-risico-AI-systemen voor publieke taken worden beoordeeld op gevolgen voor grondrechten</a></td></tr><tr><td>aia-30-transparantieverplichtingen</td></tr><tr><td>aia-31-ai-modellen-algemene-doeleinden</td></tr><tr><td>aia-32-ai-modellen-algemene-doeleinden-systeemrisico</td></tr><tr><td>aia-33-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten</td></tr><tr><td>aia-34-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging</td></tr><tr><td>aia-35-verwerking-in-testomgeving</td></tr><tr><td>aia-36-monitoring-na-het-in-de-handel-brengen</td></tr><tr><td>aia-37-melding-ernstige-incidenten</td></tr><tr><td>aia-38-melding-inbreuk-op-ai-verordening</td></tr><tr><td>aia-39-recht-klacht-indienen-bij-ai-bureau</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/">bzk-01 - Impactvolle algoritmes en hoog-risico-AI-systemen staan in het Nederlandse Algoritmeregister</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/">arc-01 - Informatie over algoritmes wordt gedocumenteerd volgens de Archiefwet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/">aut-01 - Auteursrechten zijn beschermd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/">avg-01 - Persoonsgegevens worden op een rechtmatige manier verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/">avg-02 - Persoonsgegevens worden zo kort mogelijk bewaard</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/">avg-03 - Persoonsgegevens worden zo min mogelijk verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/">avg-04 - Persoonsgegevens en andere data verwerken gebeurt proportioneel en subsidiair</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/">avg-05 - Persoonsgegevens zijn juist en actueel</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/">avg-06 - Organisaties kunnen bewijzen dat zij persoonsgegevens op de juiste manier verwerken</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/">avg-07 - Organisaties zijn transparant over het verwerken van persoonsgegevens</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/">avg-08 - Gevoelige persoonsgegevens worden alleen gebruikt als hiervoor een wettelijke uitzondering geldt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/">avg-09 - Betrokkenen kunnen een beroep doen op hun privacyrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/">avg-10 - Besluiten die levens kunnen beïnvloeden, zijn niet volledig geautomatiseerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/">avg-11 - Ontwerp en standaardinstellingen (defaults) zijn zo gunstig mogelijk voor de privacy van betrokkenen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/">avg-12 - Data zoals persoonsgegevens zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/">avg-13 - Een Data Protection Impact Assessment (DPIA) wordt uitgevoerd wanneer de verwerking van persoonsgegevens waarschijnlijk een hoog risico met zich meebrengt voor de rechten en vrijheden van natuurlijke personen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/">awb-01 - Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/">awb-02 - Organisaties kunnen duidelijk uitleggen waarom en hoe algoritmes leiden tot een besluit</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/">bio-01 - Computersystemen zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/">dat-01 - Databanken worden alleen gebruikt met toestemming van de databank-producent</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/">grw-01 - Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/">grw-02 - Algoritmes discrimineren niet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/">woo-01 - Iedereen kan openbare informatie over algoritmes vinden of aanvragen</a></td></tr></tbody></table>
 </details>
 <h2 id="bronnen">Bronnen</h2>
 <!-- Vul hier de relevante bronnen in voor deze maatregel -->
diff --git a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/index.html b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/index.html
index e4abff10b2..a730a43b16 100644
--- a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/index.html
+++ b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/index.html
@@ -868,7 +868,7 @@ <h2 id="bijbehorende-vereisten">Bijbehorende vereiste(n)</h2>
 <!-- Let op! onderstaande regel met 'list_vereisten_on_maatregelen_page' niet weghalen! Deze maakt automatisch een lijst van bijbehorende verseisten op basis van de metadata  -->
 <details class="expander">
 <summary>Bekijk alle vereisten</summary>
-<table><thead><tr><th>Vereiste</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/">aia-02 - Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/">aia-03 - Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/">aia-04 - Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/">aia-05 - Datasets voor hoog-risico-AI-systemen voldoen aan kwaliteitscriteria</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/">aia-06 - Hoog-risico-AI-systemen zijn voorzien van voldoende technische documentatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/">aia-07 - Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/">aia-08 - Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/">aia-09 - Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/">aia-10 - Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/">aia-11 - Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/">aia-12 - Documentatie over hoog-risico-AI-systemen wordt 10 jaar bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/">aia-13 - Logs van hoog-risico-AI-systemen worden zes maanden bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/">aia-14 - Hoog-risico-AI-systemen worden pas geleverd of gebruikt na een conformiteitsbeoordelingsprocedure</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/">aia-15 - Hoog-risico-AI-systemen zijn voorzien van een EU-conformiteitsverklaring</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/">aia-16 - Hoog-risico-AI-systemen zijn voorzien van een CE-markering</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/">aia-17 - Hoog-risico-AI-systemen zijn geregistreerd in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/">aia-18 - Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/">aia-19 - Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen</a></td></tr><tr><td>aia-20-verstrekken-van-informatie-op-verzoek</td></tr><tr><td>aia-21-aantoonbaarheid-vereisten-hoog-risico</td></tr><tr><td>aia-28-recht-op-uitleg-ai-besluiten</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/">aia-29 - Hoog-risico-AI-systemen voor publieke taken worden beoordeeld op gevolgen voor grondrechten</a></td></tr><tr><td>aia-30-transparantieverplichtingen</td></tr><tr><td>aia-31-ai-modellen-algemene-doeleinden</td></tr><tr><td>aia-32-ai-modellen-algemene-doeleinden-systeemrisico</td></tr><tr><td>aia-33-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten</td></tr><tr><td>aia-34-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging</td></tr><tr><td>aia-35-verwerking-in-testomgeving</td></tr><tr><td>aia-36-monitoring-na-het-in-de-handel-brengen</td></tr><tr><td>aia-37-melding-ernstige-incidenten</td></tr><tr><td>aia-38-melding-inbreuk-op-ai-verordening</td></tr><tr><td>aia-39-recht-klacht-indienen-bij-ai-bureau</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/">bzk-01 - Impactvolle algoritmes en hoog-risico-AI-systemen staan in het Nederlandse Algoritmeregister</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/">arc-01 - Informatie over algoritmes wordt gedocumenteerd volgens de Archiefwet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/">aut-01 - Auteursrechten zijn beschermd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/">avg-01 - Persoonsgegevens worden op een rechtmatige manier verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/">avg-02 - Persoonsgegevens worden zo kort mogelijk bewaard</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/">avg-03 - Persoonsgegevens worden zo min mogelijk verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/">avg-04 - Persoonsgegevens en andere data verwerken gebeurt proportioneel en subsidiair</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/">avg-05 - Persoonsgegevens zijn juist en actueel</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/">avg-06 - Organisaties kunnen bewijzen dat zij persoonsgegevens op de juiste manier verwerken</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/">avg-07 - Organisaties zijn transparant over het verwerken van persoonsgegevens</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/">avg-08 - Gevoelige persoonsgegevens worden alleen gebruikt als hiervoor een wettelijke uitzondering geldt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/">avg-09 - Betrokkenen kunnen een beroep doen op hun privacyrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/">avg-10 - Besluiten die levens kunnen beïnvloeden, zijn niet volledig geautomatiseerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/">avg-11 - Ontwerp en standaardinstellingen (defaults) zijn zo gunstig mogelijk voor de privacy van betrokkenen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/">avg-12 - Data zoals persoonsgegevens zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/">avg-13 - Een Data Protection Impact Assessment (DPIA) wordt uitgevoerd wanneer de verwerking van persoonsgegevens waarschijnlijk een hoog risico met zich meebrengt voor de rechten en vrijheden van natuurlijke personen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/">awb-01 - Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/">awb-02 - Organisaties kunnen duidelijk uitleggen waarom en hoe algoritmes leiden tot een besluit</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/">bio-01 - Computersystemen zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/">dat-01 - Databanken worden alleen gebruikt met toestemming van de databank-producent</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/">grw-01 - Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/">grw-02 - Algoritmes discrimineren niet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/">woo-01 - Iedereen kan openbare informatie over algoritmes vinden of aanvragen</a></td></tr></tbody></table>
+<table><thead><tr><th>Vereiste</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/">aia-02 - Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/">aia-03 - Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/">aia-04 - Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/">aia-05 - Datasets voor hoog-risico-AI-systemen voldoen aan kwaliteitscriteria</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/">aia-06 - Hoog-risico-AI-systemen zijn voorzien van voldoende technische documentatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/">aia-07 - Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/">aia-08 - Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/">aia-09 - Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/">aia-10 - Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/">aia-11 - Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/">aia-12 - Documentatie over hoog-risico-AI-systemen wordt 10 jaar bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/">aia-13 - Logs van hoog-risico-AI-systemen worden zes maanden bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/">aia-14 - Hoog-risico-AI-systemen worden pas geleverd of gebruikt na een conformiteitsbeoordelingsprocedure</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/">aia-15 - Hoog-risico-AI-systemen zijn voorzien van een EU-conformiteitsverklaring</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/">aia-16 - Hoog-risico-AI-systemen zijn voorzien van een CE-markering</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/">aia-17 - Hoog-risico-AI-systemen zijn geregistreerd in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/">aia-18 - Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/">aia-19 - Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen</a></td></tr><tr><td>aia-20-verstrekken-van-informatie-op-verzoek</td></tr><tr><td>aia-21-aantoonbaarheid-vereisten-hoog-risico</td></tr><tr><td>aia-28-recht-op-uitleg-ai-besluiten</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/">aia-29 - Hoog-risico-AI-systemen voor publieke taken worden beoordeeld op gevolgen voor grondrechten</a></td></tr><tr><td>aia-30-transparantieverplichtingen</td></tr><tr><td>aia-31-ai-modellen-algemene-doeleinden</td></tr><tr><td>aia-32-ai-modellen-algemene-doeleinden-systeemrisico</td></tr><tr><td>aia-33-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten</td></tr><tr><td>aia-34-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging</td></tr><tr><td>aia-35-verwerking-in-testomgeving</td></tr><tr><td>aia-36-monitoring-na-het-in-de-handel-brengen</td></tr><tr><td>aia-37-melding-ernstige-incidenten</td></tr><tr><td>aia-38-melding-inbreuk-op-ai-verordening</td></tr><tr><td>aia-39-recht-klacht-indienen-bij-ai-bureau</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/">bzk-01 - Impactvolle algoritmes en hoog-risico-AI-systemen staan in het Nederlandse Algoritmeregister</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/">arc-01 - Informatie over algoritmes wordt gedocumenteerd volgens de Archiefwet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/">aut-01 - Auteursrechten zijn beschermd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/">avg-01 - Persoonsgegevens worden op een rechtmatige manier verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/">avg-02 - Persoonsgegevens worden zo kort mogelijk bewaard</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/">avg-03 - Persoonsgegevens worden zo min mogelijk verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/">avg-04 - Persoonsgegevens en andere data verwerken gebeurt proportioneel en subsidiair</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/">avg-05 - Persoonsgegevens zijn juist en actueel</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/">avg-06 - Organisaties kunnen bewijzen dat zij persoonsgegevens op de juiste manier verwerken</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/">avg-07 - Organisaties zijn transparant over het verwerken van persoonsgegevens</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/">avg-08 - Gevoelige persoonsgegevens worden alleen gebruikt als hiervoor een wettelijke uitzondering geldt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/">avg-09 - Betrokkenen kunnen een beroep doen op hun privacyrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/">avg-10 - Besluiten die levens kunnen beïnvloeden, zijn niet volledig geautomatiseerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/">avg-11 - Ontwerp en standaardinstellingen (defaults) zijn zo gunstig mogelijk voor de privacy van betrokkenen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/">avg-12 - Data zoals persoonsgegevens zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/">avg-13 - Een Data Protection Impact Assessment (DPIA) wordt uitgevoerd wanneer de verwerking van persoonsgegevens waarschijnlijk een hoog risico met zich meebrengt voor de rechten en vrijheden van natuurlijke personen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/">awb-01 - Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/">awb-02 - Organisaties kunnen duidelijk uitleggen waarom en hoe algoritmes leiden tot een besluit</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/">bio-01 - Computersystemen zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/">dat-01 - Databanken worden alleen gebruikt met toestemming van de databank-producent</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/">grw-01 - Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/">grw-02 - Algoritmes discrimineren niet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/">woo-01 - Iedereen kan openbare informatie over algoritmes vinden of aanvragen</a></td></tr></tbody></table>
 </details>
 <h2 id="bronnen">Bronnen</h2>
 <!-- Vul hier de relevante bronnen in voor deze maatregel -->
diff --git a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-18-maak-vereisten-onderdeel-van-subgunningscriteria/index.html b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-18-maak-vereisten-onderdeel-van-subgunningscriteria/index.html
index e71df415ea..e46f092a13 100644
--- a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-18-maak-vereisten-onderdeel-van-subgunningscriteria/index.html
+++ b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-18-maak-vereisten-onderdeel-van-subgunningscriteria/index.html
@@ -860,7 +860,7 @@ <h2 id="bijbehorende-vereisten">Bijbehorende vereiste(n)</h2>
 
 <details class="expander">
 <summary>Bekijk alle vereisten</summary>
-<table><thead><tr><th>Vereiste</th></tr></thead><tbody><tr><td>aia-28-recht-op-uitleg-ai-besluiten</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/">aut-01 - Auteursrechten zijn beschermd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/">dat-01 - Databanken worden alleen gebruikt met toestemming van de databank-producent</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/">aia-04 - Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/">aia-01 - Personeel en gebruikers zijn voldoende AI-geletterd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/">aia-18 - Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/">avg-08 - Gevoelige persoonsgegevens worden alleen gebruikt als hiervoor een wettelijke uitzondering geldt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/">grw-01 - Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/">aia-11 - Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/">aia-05 - Datasets voor hoog-risico-AI-systemen voldoen aan kwaliteitscriteria</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/">aia-29 - Hoog-risico-AI-systemen voor publieke taken worden beoordeeld op gevolgen voor grondrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/">grw-02 - Algoritmes discrimineren niet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/">avg-03 - Persoonsgegevens worden zo min mogelijk verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/">avg-11 - Ontwerp en standaardinstellingen (defaults) zijn zo gunstig mogelijk voor de privacy van betrokkenen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/">avg-10 - Besluiten die levens kunnen beïnvloeden, zijn niet volledig geautomatiseerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/">aia-03 - Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/">aia-04 - Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/">aia-09 - Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/">aia-08 - Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/">avg-07 - Organisaties zijn transparant over het verwerken van persoonsgegevens</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/">aia-03 - Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/">aia-19 - Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen</a></td></tr><tr><td>aia-20-verstrekken-van-informatie-op-verzoek</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/">woo-01 - Iedereen kan openbare informatie over algoritmes vinden of aanvragen</a></td></tr></tbody></table>
+<table><thead><tr><th>Vereiste</th></tr></thead><tbody><tr><td>aia-28-recht-op-uitleg-ai-besluiten</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/">aut-01 - Auteursrechten zijn beschermd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/">dat-01 - Databanken worden alleen gebruikt met toestemming van de databank-producent</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/">aia-04 - Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/">aia-01 - Personeel en gebruikers zijn voldoende AI-geletterd.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/">aia-18 - Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/">avg-08 - Gevoelige persoonsgegevens worden alleen gebruikt als hiervoor een wettelijke uitzondering geldt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/">grw-01 - Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/">aia-11 - Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/">aia-05 - Datasets voor hoog-risico-AI-systemen voldoen aan kwaliteitscriteria</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/">aia-29 - Hoog-risico-AI-systemen voor publieke taken worden beoordeeld op gevolgen voor grondrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/">grw-02 - Algoritmes discrimineren niet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/">avg-03 - Persoonsgegevens worden zo min mogelijk verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/">avg-11 - Ontwerp en standaardinstellingen (defaults) zijn zo gunstig mogelijk voor de privacy van betrokkenen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/">avg-10 - Besluiten die levens kunnen beïnvloeden, zijn niet volledig geautomatiseerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/">aia-03 - Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/">aia-04 - Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/">aia-09 - Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/">aia-08 - Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/">avg-07 - Organisaties zijn transparant over het verwerken van persoonsgegevens</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/">aia-03 - Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/">aia-19 - Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen</a></td></tr><tr><td>aia-20-verstrekken-van-informatie-op-verzoek</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/">woo-01 - Iedereen kan openbare informatie over algoritmes vinden of aanvragen</a></td></tr></tbody></table>
 </details>
 <h2 id="bronnen">Bronnen</h2>
 <!-- Vul hier de relevante bronnen in voor deze maatregel -->
diff --git a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/index.html b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/index.html
index d1d64d2d24..07bd4aa82d 100644
--- a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/index.html
+++ b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/index.html
@@ -872,7 +872,7 @@ <h2 id="bijbehorende-vereisten">Bijbehorende vereiste(n)</h2>
 <!-- Let op! onderstaande regel met 'list_vereisten_on_maatregelen_page' niet weghalen! Deze maakt automatisch een lijst van bijbehorende verseisten op basis van de metadata  -->
 <details class="expander">
 <summary>Bekijk alle vereisten</summary>
-<table><thead><tr><th>Vereiste</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/">aia-02 - Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/">aia-03 - Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/">aia-04 - Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/">aia-05 - Datasets voor hoog-risico-AI-systemen voldoen aan kwaliteitscriteria</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/">aia-06 - Hoog-risico-AI-systemen zijn voorzien van voldoende technische documentatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/">aia-07 - Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/">aia-08 - Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/">aia-09 - Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/">aia-10 - Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/">aia-11 - Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/">aia-12 - Documentatie over hoog-risico-AI-systemen wordt 10 jaar bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/">aia-13 - Logs van hoog-risico-AI-systemen worden zes maanden bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/">aia-14 - Hoog-risico-AI-systemen worden pas geleverd of gebruikt na een conformiteitsbeoordelingsprocedure</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/">aia-15 - Hoog-risico-AI-systemen zijn voorzien van een EU-conformiteitsverklaring</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/">aia-16 - Hoog-risico-AI-systemen zijn voorzien van een CE-markering</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/">aia-17 - Hoog-risico-AI-systemen zijn geregistreerd in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/">aia-18 - Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/">aia-19 - Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen</a></td></tr><tr><td>aia-20-verstrekken-van-informatie-op-verzoek</td></tr><tr><td>aia-21-aantoonbaarheid-vereisten-hoog-risico</td></tr><tr><td>aia-28-recht-op-uitleg-ai-besluiten</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/">aia-29 - Hoog-risico-AI-systemen voor publieke taken worden beoordeeld op gevolgen voor grondrechten</a></td></tr><tr><td>aia-30-transparantieverplichtingen</td></tr><tr><td>aia-31-ai-modellen-algemene-doeleinden</td></tr><tr><td>aia-32-ai-modellen-algemene-doeleinden-systeemrisico</td></tr><tr><td>aia-33-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten</td></tr><tr><td>aia-34-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging</td></tr><tr><td>aia-35-verwerking-in-testomgeving</td></tr><tr><td>aia-36-monitoring-na-het-in-de-handel-brengen</td></tr><tr><td>aia-37-melding-ernstige-incidenten</td></tr><tr><td>aia-38-melding-inbreuk-op-ai-verordening</td></tr><tr><td>aia-39-recht-klacht-indienen-bij-ai-bureau</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/">bzk-01 - Impactvolle algoritmes en hoog-risico-AI-systemen staan in het Nederlandse Algoritmeregister</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/">arc-01 - Informatie over algoritmes wordt gedocumenteerd volgens de Archiefwet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/">aut-01 - Auteursrechten zijn beschermd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/">avg-01 - Persoonsgegevens worden op een rechtmatige manier verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/">avg-02 - Persoonsgegevens worden zo kort mogelijk bewaard</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/">avg-03 - Persoonsgegevens worden zo min mogelijk verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/">avg-04 - Persoonsgegevens en andere data verwerken gebeurt proportioneel en subsidiair</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/">avg-05 - Persoonsgegevens zijn juist en actueel</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/">avg-06 - Organisaties kunnen bewijzen dat zij persoonsgegevens op de juiste manier verwerken</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/">avg-07 - Organisaties zijn transparant over het verwerken van persoonsgegevens</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/">avg-08 - Gevoelige persoonsgegevens worden alleen gebruikt als hiervoor een wettelijke uitzondering geldt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/">avg-09 - Betrokkenen kunnen een beroep doen op hun privacyrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/">avg-10 - Besluiten die levens kunnen beïnvloeden, zijn niet volledig geautomatiseerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/">avg-11 - Ontwerp en standaardinstellingen (defaults) zijn zo gunstig mogelijk voor de privacy van betrokkenen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/">avg-12 - Data zoals persoonsgegevens zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/">avg-13 - Een Data Protection Impact Assessment (DPIA) wordt uitgevoerd wanneer de verwerking van persoonsgegevens waarschijnlijk een hoog risico met zich meebrengt voor de rechten en vrijheden van natuurlijke personen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/">awb-01 - Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/">awb-02 - Organisaties kunnen duidelijk uitleggen waarom en hoe algoritmes leiden tot een besluit</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/">bio-01 - Computersystemen zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/">dat-01 - Databanken worden alleen gebruikt met toestemming van de databank-producent</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/">grw-01 - Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/">grw-02 - Algoritmes discrimineren niet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/">woo-01 - Iedereen kan openbare informatie over algoritmes vinden of aanvragen</a></td></tr></tbody></table>
+<table><thead><tr><th>Vereiste</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/">aia-02 - Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/">aia-03 - Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/">aia-04 - Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/">aia-05 - Datasets voor hoog-risico-AI-systemen voldoen aan kwaliteitscriteria</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/">aia-06 - Hoog-risico-AI-systemen zijn voorzien van voldoende technische documentatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/">aia-07 - Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/">aia-08 - Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/">aia-09 - Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/">aia-10 - Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/">aia-11 - Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/">aia-12 - Documentatie over hoog-risico-AI-systemen wordt 10 jaar bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/">aia-13 - Logs van hoog-risico-AI-systemen worden zes maanden bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/">aia-14 - Hoog-risico-AI-systemen worden pas geleverd of gebruikt na een conformiteitsbeoordelingsprocedure</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/">aia-15 - Hoog-risico-AI-systemen zijn voorzien van een EU-conformiteitsverklaring</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/">aia-16 - Hoog-risico-AI-systemen zijn voorzien van een CE-markering</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/">aia-17 - Hoog-risico-AI-systemen zijn geregistreerd in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/">aia-18 - Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/">aia-19 - Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen</a></td></tr><tr><td>aia-20-verstrekken-van-informatie-op-verzoek</td></tr><tr><td>aia-21-aantoonbaarheid-vereisten-hoog-risico</td></tr><tr><td>aia-28-recht-op-uitleg-ai-besluiten</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/">aia-29 - Hoog-risico-AI-systemen voor publieke taken worden beoordeeld op gevolgen voor grondrechten</a></td></tr><tr><td>aia-30-transparantieverplichtingen</td></tr><tr><td>aia-31-ai-modellen-algemene-doeleinden</td></tr><tr><td>aia-32-ai-modellen-algemene-doeleinden-systeemrisico</td></tr><tr><td>aia-33-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten</td></tr><tr><td>aia-34-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging</td></tr><tr><td>aia-35-verwerking-in-testomgeving</td></tr><tr><td>aia-36-monitoring-na-het-in-de-handel-brengen</td></tr><tr><td>aia-37-melding-ernstige-incidenten</td></tr><tr><td>aia-38-melding-inbreuk-op-ai-verordening</td></tr><tr><td>aia-39-recht-klacht-indienen-bij-ai-bureau</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/">bzk-01 - Impactvolle algoritmes en hoog-risico-AI-systemen staan in het Nederlandse Algoritmeregister</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/">arc-01 - Informatie over algoritmes wordt gedocumenteerd volgens de Archiefwet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/">aut-01 - Auteursrechten zijn beschermd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/">avg-01 - Persoonsgegevens worden op een rechtmatige manier verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/">avg-02 - Persoonsgegevens worden zo kort mogelijk bewaard</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/">avg-03 - Persoonsgegevens worden zo min mogelijk verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/">avg-04 - Persoonsgegevens en andere data verwerken gebeurt proportioneel en subsidiair</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/">avg-05 - Persoonsgegevens zijn juist en actueel</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/">avg-06 - Organisaties kunnen bewijzen dat zij persoonsgegevens op de juiste manier verwerken</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/">avg-07 - Organisaties zijn transparant over het verwerken van persoonsgegevens</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/">avg-08 - Gevoelige persoonsgegevens worden alleen gebruikt als hiervoor een wettelijke uitzondering geldt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/">avg-09 - Betrokkenen kunnen een beroep doen op hun privacyrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/">avg-10 - Besluiten die levens kunnen beïnvloeden, zijn niet volledig geautomatiseerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/">avg-11 - Ontwerp en standaardinstellingen (defaults) zijn zo gunstig mogelijk voor de privacy van betrokkenen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/">avg-12 - Data zoals persoonsgegevens zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/">avg-13 - Een Data Protection Impact Assessment (DPIA) wordt uitgevoerd wanneer de verwerking van persoonsgegevens waarschijnlijk een hoog risico met zich meebrengt voor de rechten en vrijheden van natuurlijke personen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/">awb-01 - Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/">awb-02 - Organisaties kunnen duidelijk uitleggen waarom en hoe algoritmes leiden tot een besluit</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/">bio-01 - Computersystemen zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/">dat-01 - Databanken worden alleen gebruikt met toestemming van de databank-producent</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/">grw-01 - Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/">grw-02 - Algoritmes discrimineren niet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/">woo-01 - Iedereen kan openbare informatie over algoritmes vinden of aanvragen</a></td></tr></tbody></table>
 </details>
 <h2 id="bronnen">Bronnen</h2>
 <!-- Vul hier de relevante bronnen in voor deze maatregel -->
diff --git a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/index.html b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/index.html
index d7ad1bb5a9..8824f11898 100644
--- a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/index.html
+++ b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/index.html
@@ -865,7 +865,7 @@ <h2 id="bijbehorende-vereisten">Bijbehorende vereiste(n)</h2>
 <!-- Let op! onderstaande regel met 'list_vereisten_on_maatregelen_page' niet weghalen! Deze maakt automatisch een lijst van bijbehorende verseisten op basis van de metadata  -->
 <details class="expander">
 <summary>Bekijk alle vereisten</summary>
-<table><thead><tr><th>Vereiste</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/">aia-02 - Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/">aia-03 - Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/">aia-04 - Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/">aia-05 - Datasets voor hoog-risico-AI-systemen voldoen aan kwaliteitscriteria</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/">aia-06 - Hoog-risico-AI-systemen zijn voorzien van voldoende technische documentatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/">aia-07 - Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/">aia-08 - Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/">aia-09 - Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/">aia-10 - Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/">aia-11 - Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/">aia-12 - Documentatie over hoog-risico-AI-systemen wordt 10 jaar bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/">aia-13 - Logs van hoog-risico-AI-systemen worden zes maanden bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/">aia-14 - Hoog-risico-AI-systemen worden pas geleverd of gebruikt na een conformiteitsbeoordelingsprocedure</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/">aia-15 - Hoog-risico-AI-systemen zijn voorzien van een EU-conformiteitsverklaring</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/">aia-16 - Hoog-risico-AI-systemen zijn voorzien van een CE-markering</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/">aia-17 - Hoog-risico-AI-systemen zijn geregistreerd in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/">aia-18 - Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/">aia-19 - Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen</a></td></tr><tr><td>aia-20-verstrekken-van-informatie-op-verzoek</td></tr><tr><td>aia-21-aantoonbaarheid-vereisten-hoog-risico</td></tr><tr><td>aia-28-recht-op-uitleg-ai-besluiten</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/">aia-29 - Hoog-risico-AI-systemen voor publieke taken worden beoordeeld op gevolgen voor grondrechten</a></td></tr><tr><td>aia-30-transparantieverplichtingen</td></tr><tr><td>aia-31-ai-modellen-algemene-doeleinden</td></tr><tr><td>aia-32-ai-modellen-algemene-doeleinden-systeemrisico</td></tr><tr><td>aia-33-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten</td></tr><tr><td>aia-34-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging</td></tr><tr><td>aia-35-verwerking-in-testomgeving</td></tr><tr><td>aia-36-monitoring-na-het-in-de-handel-brengen</td></tr><tr><td>aia-37-melding-ernstige-incidenten</td></tr><tr><td>aia-38-melding-inbreuk-op-ai-verordening</td></tr><tr><td>aia-39-recht-klacht-indienen-bij-ai-bureau</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/">bzk-01 - Impactvolle algoritmes en hoog-risico-AI-systemen staan in het Nederlandse Algoritmeregister</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/">arc-01 - Informatie over algoritmes wordt gedocumenteerd volgens de Archiefwet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/">aut-01 - Auteursrechten zijn beschermd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/">avg-01 - Persoonsgegevens worden op een rechtmatige manier verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/">avg-02 - Persoonsgegevens worden zo kort mogelijk bewaard</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/">avg-03 - Persoonsgegevens worden zo min mogelijk verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/">avg-04 - Persoonsgegevens en andere data verwerken gebeurt proportioneel en subsidiair</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/">avg-05 - Persoonsgegevens zijn juist en actueel</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/">avg-06 - Organisaties kunnen bewijzen dat zij persoonsgegevens op de juiste manier verwerken</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/">avg-07 - Organisaties zijn transparant over het verwerken van persoonsgegevens</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/">avg-08 - Gevoelige persoonsgegevens worden alleen gebruikt als hiervoor een wettelijke uitzondering geldt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/">avg-09 - Betrokkenen kunnen een beroep doen op hun privacyrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/">avg-10 - Besluiten die levens kunnen beïnvloeden, zijn niet volledig geautomatiseerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/">avg-11 - Ontwerp en standaardinstellingen (defaults) zijn zo gunstig mogelijk voor de privacy van betrokkenen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/">avg-12 - Data zoals persoonsgegevens zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/">avg-13 - Een Data Protection Impact Assessment (DPIA) wordt uitgevoerd wanneer de verwerking van persoonsgegevens waarschijnlijk een hoog risico met zich meebrengt voor de rechten en vrijheden van natuurlijke personen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/">awb-01 - Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/">awb-02 - Organisaties kunnen duidelijk uitleggen waarom en hoe algoritmes leiden tot een besluit</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/">bio-01 - Computersystemen zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/">dat-01 - Databanken worden alleen gebruikt met toestemming van de databank-producent</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/">grw-01 - Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/">grw-02 - Algoritmes discrimineren niet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/">woo-01 - Iedereen kan openbare informatie over algoritmes vinden of aanvragen</a></td></tr></tbody></table>
+<table><thead><tr><th>Vereiste</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/">aia-02 - Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/">aia-03 - Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/">aia-04 - Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/">aia-05 - Datasets voor hoog-risico-AI-systemen voldoen aan kwaliteitscriteria</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/">aia-06 - Hoog-risico-AI-systemen zijn voorzien van voldoende technische documentatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/">aia-07 - Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/">aia-08 - Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/">aia-09 - Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/">aia-10 - Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/">aia-11 - Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/">aia-12 - Documentatie over hoog-risico-AI-systemen wordt 10 jaar bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/">aia-13 - Logs van hoog-risico-AI-systemen worden zes maanden bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/">aia-14 - Hoog-risico-AI-systemen worden pas geleverd of gebruikt na een conformiteitsbeoordelingsprocedure</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/">aia-15 - Hoog-risico-AI-systemen zijn voorzien van een EU-conformiteitsverklaring</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/">aia-16 - Hoog-risico-AI-systemen zijn voorzien van een CE-markering</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/">aia-17 - Hoog-risico-AI-systemen zijn geregistreerd in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/">aia-18 - Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/">aia-19 - Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen</a></td></tr><tr><td>aia-20-verstrekken-van-informatie-op-verzoek</td></tr><tr><td>aia-21-aantoonbaarheid-vereisten-hoog-risico</td></tr><tr><td>aia-28-recht-op-uitleg-ai-besluiten</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/">aia-29 - Hoog-risico-AI-systemen voor publieke taken worden beoordeeld op gevolgen voor grondrechten</a></td></tr><tr><td>aia-30-transparantieverplichtingen</td></tr><tr><td>aia-31-ai-modellen-algemene-doeleinden</td></tr><tr><td>aia-32-ai-modellen-algemene-doeleinden-systeemrisico</td></tr><tr><td>aia-33-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten</td></tr><tr><td>aia-34-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging</td></tr><tr><td>aia-35-verwerking-in-testomgeving</td></tr><tr><td>aia-36-monitoring-na-het-in-de-handel-brengen</td></tr><tr><td>aia-37-melding-ernstige-incidenten</td></tr><tr><td>aia-38-melding-inbreuk-op-ai-verordening</td></tr><tr><td>aia-39-recht-klacht-indienen-bij-ai-bureau</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/">bzk-01 - Impactvolle algoritmes en hoog-risico-AI-systemen staan in het Nederlandse Algoritmeregister</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/">arc-01 - Informatie over algoritmes wordt gedocumenteerd volgens de Archiefwet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/">aut-01 - Auteursrechten zijn beschermd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/">avg-01 - Persoonsgegevens worden op een rechtmatige manier verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/">avg-02 - Persoonsgegevens worden zo kort mogelijk bewaard</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/">avg-03 - Persoonsgegevens worden zo min mogelijk verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/">avg-04 - Persoonsgegevens en andere data verwerken gebeurt proportioneel en subsidiair</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/">avg-05 - Persoonsgegevens zijn juist en actueel</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/">avg-06 - Organisaties kunnen bewijzen dat zij persoonsgegevens op de juiste manier verwerken</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/">avg-07 - Organisaties zijn transparant over het verwerken van persoonsgegevens</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/">avg-08 - Gevoelige persoonsgegevens worden alleen gebruikt als hiervoor een wettelijke uitzondering geldt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/">avg-09 - Betrokkenen kunnen een beroep doen op hun privacyrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/">avg-10 - Besluiten die levens kunnen beïnvloeden, zijn niet volledig geautomatiseerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/">avg-11 - Ontwerp en standaardinstellingen (defaults) zijn zo gunstig mogelijk voor de privacy van betrokkenen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/">avg-12 - Data zoals persoonsgegevens zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/">avg-13 - Een Data Protection Impact Assessment (DPIA) wordt uitgevoerd wanneer de verwerking van persoonsgegevens waarschijnlijk een hoog risico met zich meebrengt voor de rechten en vrijheden van natuurlijke personen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/">awb-01 - Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/">awb-02 - Organisaties kunnen duidelijk uitleggen waarom en hoe algoritmes leiden tot een besluit</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/">bio-01 - Computersystemen zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/">dat-01 - Databanken worden alleen gebruikt met toestemming van de databank-producent</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/">grw-01 - Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/">grw-02 - Algoritmes discrimineren niet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/">woo-01 - Iedereen kan openbare informatie over algoritmes vinden of aanvragen</a></td></tr></tbody></table>
 </details>
 <h2 id="bronnen">Bronnen</h2>
 <!-- Vul hier de relevante bronnen in voor deze maatregel -->
diff --git a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/index.html b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/index.html
index 4dbdddd449..a4042acbe5 100644
--- a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/index.html
+++ b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/index.html
@@ -860,7 +860,7 @@ <h2 id="toelichting">Toelichting</h2>
 <h2 id="bijbehorende-vereisten">Bijbehorende vereiste(n)</h2>
 <details class="expander">
 <summary>Bekijk alle vereisten</summary>
-<table><thead><tr><th>Vereiste</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/">aia-01 - Personeel en gebruikers zijn voldoende AI-geletterd</a></td></tr></tbody></table>
+<table><thead><tr><th>Vereiste</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/">aia-01 - Personeel en gebruikers zijn voldoende AI-geletterd.</a></td></tr></tbody></table>
 </details>
 <h2 id="risico">Risico</h2>
 <!-- vul hier het specifieke risico in dat kan worden gemitigeerd met behulp van deze maatregel -->
diff --git a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/index.html b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/index.html
index 8f29c35c26..699c21e3ef 100644
--- a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/index.html
+++ b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/index.html
@@ -869,7 +869,7 @@ <h2 id="bijbehorende-vereisten">Bijbehorende vereiste(n)</h2>
 <!-- Let op! onderstaande regel met 'list_vereisten_on_maatregelen_page' niet weghalen! Deze maakt automatisch een lijst van bijbehorende verseisten op basis van de metadata  -->
 <details class="expander">
 <summary>Bekijk alle vereisten</summary>
-<table><thead><tr><th>Vereiste</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/">aia-02 - Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/">aia-03 - Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/">aia-04 - Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/">aia-05 - Datasets voor hoog-risico-AI-systemen voldoen aan kwaliteitscriteria</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/">aia-06 - Hoog-risico-AI-systemen zijn voorzien van voldoende technische documentatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/">aia-07 - Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/">aia-08 - Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/">aia-09 - Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/">aia-10 - Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/">aia-11 - Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/">aia-12 - Documentatie over hoog-risico-AI-systemen wordt 10 jaar bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/">aia-13 - Logs van hoog-risico-AI-systemen worden zes maanden bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/">aia-14 - Hoog-risico-AI-systemen worden pas geleverd of gebruikt na een conformiteitsbeoordelingsprocedure</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/">aia-15 - Hoog-risico-AI-systemen zijn voorzien van een EU-conformiteitsverklaring</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/">aia-16 - Hoog-risico-AI-systemen zijn voorzien van een CE-markering</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/">aia-17 - Hoog-risico-AI-systemen zijn geregistreerd in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/">aia-18 - Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/">aia-19 - Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen</a></td></tr><tr><td>aia-20-verstrekken-van-informatie-op-verzoek</td></tr><tr><td>aia-21-aantoonbaarheid-vereisten-hoog-risico</td></tr><tr><td>aia-28-recht-op-uitleg-ai-besluiten</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/">aia-29 - Hoog-risico-AI-systemen voor publieke taken worden beoordeeld op gevolgen voor grondrechten</a></td></tr><tr><td>aia-30-transparantieverplichtingen</td></tr><tr><td>aia-31-ai-modellen-algemene-doeleinden</td></tr><tr><td>aia-32-ai-modellen-algemene-doeleinden-systeemrisico</td></tr><tr><td>aia-33-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten</td></tr><tr><td>aia-34-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging</td></tr><tr><td>aia-35-verwerking-in-testomgeving</td></tr><tr><td>aia-36-monitoring-na-het-in-de-handel-brengen</td></tr><tr><td>aia-37-melding-ernstige-incidenten</td></tr><tr><td>aia-38-melding-inbreuk-op-ai-verordening</td></tr><tr><td>aia-39-recht-klacht-indienen-bij-ai-bureau</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/">bzk-01 - Impactvolle algoritmes en hoog-risico-AI-systemen staan in het Nederlandse Algoritmeregister</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/">arc-01 - Informatie over algoritmes wordt gedocumenteerd volgens de Archiefwet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/">aut-01 - Auteursrechten zijn beschermd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/">avg-01 - Persoonsgegevens worden op een rechtmatige manier verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/">avg-02 - Persoonsgegevens worden zo kort mogelijk bewaard</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/">avg-03 - Persoonsgegevens worden zo min mogelijk verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/">avg-04 - Persoonsgegevens en andere data verwerken gebeurt proportioneel en subsidiair</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/">avg-05 - Persoonsgegevens zijn juist en actueel</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/">avg-06 - Organisaties kunnen bewijzen dat zij persoonsgegevens op de juiste manier verwerken</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/">avg-07 - Organisaties zijn transparant over het verwerken van persoonsgegevens</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/">avg-08 - Gevoelige persoonsgegevens worden alleen gebruikt als hiervoor een wettelijke uitzondering geldt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/">avg-09 - Betrokkenen kunnen een beroep doen op hun privacyrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/">avg-10 - Besluiten die levens kunnen beïnvloeden, zijn niet volledig geautomatiseerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/">avg-11 - Ontwerp en standaardinstellingen (defaults) zijn zo gunstig mogelijk voor de privacy van betrokkenen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/">avg-12 - Data zoals persoonsgegevens zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/">avg-13 - Een Data Protection Impact Assessment (DPIA) wordt uitgevoerd wanneer de verwerking van persoonsgegevens waarschijnlijk een hoog risico met zich meebrengt voor de rechten en vrijheden van natuurlijke personen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/">awb-01 - Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/">awb-02 - Organisaties kunnen duidelijk uitleggen waarom en hoe algoritmes leiden tot een besluit</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/">bio-01 - Computersystemen zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/">dat-01 - Databanken worden alleen gebruikt met toestemming van de databank-producent</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/">grw-01 - Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/">grw-02 - Algoritmes discrimineren niet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/">woo-01 - Iedereen kan openbare informatie over algoritmes vinden of aanvragen</a></td></tr></tbody></table>
+<table><thead><tr><th>Vereiste</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/">aia-02 - Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/">aia-03 - Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/">aia-04 - Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/">aia-05 - Datasets voor hoog-risico-AI-systemen voldoen aan kwaliteitscriteria</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-06-technische-documentatie/">aia-06 - Hoog-risico-AI-systemen zijn voorzien van voldoende technische documentatie.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/">aia-07 - Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-08-transparantie-aan-gebruiksverantwoordelijken/">aia-08 - Hoog-risico-AI-systemen zijn op een transparante manier ontwikkeld en ontworpen.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/">aia-09 - Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-10-nauwkeurigheid-robuustheid-cyberbeveiliging/">aia-10 - Hoog-risico-AI-systemen zijn voldoende nauwkeurig, robuust en cyberveilig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/">aia-11 - Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-12-bewaartermijn-voor-documentatie/">aia-12 - Documentatie over hoog-risico-AI-systemen wordt 10 jaar bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-13-bewaartermijn-voor-gegenereerde-logs/">aia-13 - Logs van hoog-risico-AI-systemen worden zes maanden bewaard door de aanbieder</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-14-conformiteitsbeoordeling/">aia-14 - Hoog-risico-AI-systemen worden pas geleverd of gebruikt na een conformiteitsbeoordelingsprocedure</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-15-eu-conformiteitsverklaring/">aia-15 - Hoog-risico-AI-systemen zijn voorzien van een EU-conformiteitsverklaring</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-16-ce-markering/">aia-16 - Hoog-risico-AI-systemen zijn voorzien van een CE-markering</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-17-registratieverplichtingen/">aia-17 - Hoog-risico-AI-systemen zijn geregistreerd in de EU-databank</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/">aia-18 - Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/">aia-19 - Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen</a></td></tr><tr><td>aia-20-verstrekken-van-informatie-op-verzoek</td></tr><tr><td>aia-21-aantoonbaarheid-vereisten-hoog-risico</td></tr><tr><td>aia-28-recht-op-uitleg-ai-besluiten</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-27-beoordelen-gevolgen-grondrechten/">aia-29 - Hoog-risico-AI-systemen voor publieke taken worden beoordeeld op gevolgen voor grondrechten</a></td></tr><tr><td>aia-30-transparantieverplichtingen</td></tr><tr><td>aia-31-ai-modellen-algemene-doeleinden</td></tr><tr><td>aia-32-ai-modellen-algemene-doeleinden-systeemrisico</td></tr><tr><td>aia-33-ai-modellen-algemene-doeleinden-systeemrisico-ernstige-incidenten</td></tr><tr><td>aia-34-ai-modellen-algemene-doeleinden-systeemrisico-cyberbeveiliging</td></tr><tr><td>aia-35-verwerking-in-testomgeving</td></tr><tr><td>aia-36-monitoring-na-het-in-de-handel-brengen</td></tr><tr><td>aia-37-melding-ernstige-incidenten</td></tr><tr><td>aia-38-melding-inbreuk-op-ai-verordening</td></tr><tr><td>aia-39-recht-klacht-indienen-bij-ai-bureau</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bzk-01-algoritmeregister/">bzk-01 - Impactvolle algoritmes en hoog-risico-AI-systemen staan in het Nederlandse Algoritmeregister</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/">arc-01 - Informatie over algoritmes wordt gedocumenteerd volgens de Archiefwet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aut-01-auteursrechten/">aut-01 - Auteursrechten zijn beschermd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-01-persoonsgegevens-worden-rechtmatig-verwerkt/">avg-01 - Persoonsgegevens worden op een rechtmatige manier verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-02-beperkte-bewaartermijn-van-persoonsgegevens/">avg-02 - Persoonsgegevens worden zo kort mogelijk bewaard</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-03-minimale-verwerking-van-persoonsgegevens/">avg-03 - Persoonsgegevens worden zo min mogelijk verwerkt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-04-proportionaliteit-en-subsidiariteit/">avg-04 - Persoonsgegevens en andere data verwerken gebeurt proportioneel en subsidiair</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-05-juistheid-en-actualiteit-van-persoonsgegevens/">avg-05 - Persoonsgegevens zijn juist en actueel</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-06-verantwoordingsplicht-rechtmatigheid/">avg-06 - Organisaties kunnen bewijzen dat zij persoonsgegevens op de juiste manier verwerken</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/">avg-07 - Organisaties zijn transparant over het verwerken van persoonsgegevens</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-08-wettelijke-verwerking-van-gevoelige-gegevens/">avg-08 - Gevoelige persoonsgegevens worden alleen gebruikt als hiervoor een wettelijke uitzondering geldt</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-09-inroepen-privacyrecht-bij-verwerking-persoonsgegevens/">avg-09 - Betrokkenen kunnen een beroep doen op hun privacyrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-10-recht-op-niet-geautomatiseerde-besluitvorming/">avg-10 - Besluiten die levens kunnen beïnvloeden, zijn niet volledig geautomatiseerd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-11-privacy-bij-ontwerp-bij-verwerking-van-persoonsgegevens/">avg-11 - Ontwerp en standaardinstellingen (defaults) zijn zo gunstig mogelijk voor de privacy van betrokkenen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/">avg-12 - Data zoals persoonsgegevens zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-13-dpia-verplicht/">avg-13 - Een Data Protection Impact Assessment (DPIA) wordt uitgevoerd wanneer de verwerking van persoonsgegevens waarschijnlijk een hoog risico met zich meebrengt voor de rechten en vrijheden van natuurlijke personen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/">awb-01 - Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-02-motiveringsbeginsel/">awb-02 - Organisaties kunnen duidelijk uitleggen waarom en hoe algoritmes leiden tot een besluit</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/">bio-01 - Computersystemen zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/dat-01-databankenwet/">dat-01 - Databanken worden alleen gebruikt met toestemming van de databank-producent</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-01-fundamentele-rechten/">grw-01 - Algoritmes schenden geen grondrechten of mensenrechten</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/grw-02-non-discriminatie/">grw-02 - Algoritmes discrimineren niet</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/">woo-01 - Iedereen kan openbare informatie over algoritmes vinden of aanvragen</a></td></tr></tbody></table>
 </details>
 <h2 id="risico">Risico</h2>
 <!-- vul hier het specifieke risico in dat kan worden gemitigeerd met behulp van deze maatregel -->
diff --git a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/index.html b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/index.html
index 0dfbc4fdfd..2ed8a675f2 100644
--- a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/index.html
+++ b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/index.html
@@ -870,7 +870,7 @@ <h2 id="bijbehorende-vereisten">Bijbehorende vereiste(n)</h2>
 <!-- Let op! onderstaande regel met 'list_vereisten_on_maatregelen_page' niet weghalen! Deze maakt automatisch een lijst van bijbehorende verseisten op basis van de metadata  -->
 <details class="expander">
 <summary>Bekijk alle vereisten</summary>
-<table><thead><tr><th>Vereiste</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/">bio-01 - Computersystemen zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/">avg-12 - Data zoals persoonsgegevens zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td>aia-37-melding-ernstige-incidenten</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/">aia-07 - Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/">aia-01 - Personeel en gebruikers zijn voldoende AI-geletterd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/">aia-18 - Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/">aia-11 - Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/">aia-05 - Datasets voor hoog-risico-AI-systemen voldoen aan kwaliteitscriteria</a></td></tr><tr><td>aia-36-monitoring-na-het-in-de-handel-brengen</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/">aia-03 - Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/">aia-09 - Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/">avg-07 - Organisaties zijn transparant over het verwerken van persoonsgegevens</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/">aia-03 - Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/">aia-19 - Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen</a></td></tr><tr><td>aia-20-verstrekken-van-informatie-op-verzoek</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/">woo-01 - Iedereen kan openbare informatie over algoritmes vinden of aanvragen</a></td></tr></tbody></table>
+<table><thead><tr><th>Vereiste</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/bio-01-beveiliging-informatie-en-informatiesystemen/">bio-01 - Computersystemen zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-12-beveiliging-van-verwerking/">avg-12 - Data zoals persoonsgegevens zijn voldoende beveiligd tegen ongelukken en cyberaanvallen</a></td></tr><tr><td>aia-37-melding-ernstige-incidenten</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-07-automatische-logregistratie/">aia-07 - Hoog-risico-AI-systemen loggen automatisch bepaalde gegevens.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/">aia-01 - Personeel en gebruikers zijn voldoende AI-geletterd.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-18-corrigerende-maatregelen-voor-non-conforme-ai/">aia-18 - Als een hoog-risico-AI-systeem niet voldoet aan de AI-verordening, grijpt de aanbieder in</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-11-systeem-voor-kwaliteitsbeheer/">aia-11 - Hoog-risico-AI-systemen zijn voorzien van een kwaliteitsbeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/">aia-05 - Datasets voor hoog-risico-AI-systemen voldoen aan kwaliteitscriteria</a></td></tr><tr><td>aia-36-monitoring-na-het-in-de-handel-brengen</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/">aia-03 - Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/">aia-09 - Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/avg-07-transparantie-bij-verwerken-persoonsgegevens/">avg-07 - Organisaties zijn transparant over het verwerken van persoonsgegevens</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/">aia-03 - Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-19-toegankelijkheidseisen/">aia-19 - Hoog-risico-AI-systemen voldoen aan de toegankelijkheidseisen</a></td></tr><tr><td>aia-20-verstrekken-van-informatie-op-verzoek</td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/woo-01-recht-op-toegang-tot-publieke-informatie/">woo-01 - Iedereen kan openbare informatie over algoritmes vinden of aanvragen</a></td></tr></tbody></table>
 </details>
 <h2 id="risico">Risico</h2>
 <!-- vul hier het specifieke risico in dat kan worden gemitigeerd met behulp van deze maatregel -->
diff --git a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/index.html b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/index.html
index 6ec6637b7c..5f9bc8c0b2 100644
--- a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/index.html
+++ b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/index.html
@@ -870,7 +870,7 @@ <h2 id="toelichting">Toelichting</h2>
 <p>Denk hierbij na over het eventueel bijscholen van medewerkers als het kennisniveau nog onvoldoende is om de werkinstructies goed te begrijpen. </p>
 <h2 id="bijbehorende-vereisten">Bijbehorende vereiste(n)</h2>
 <!-- Let op! onderstaande regel met 'list_vereisten_on_maatregelen_page' niet weghalen! Deze maakt automatisch een lijst van bijbehorende verseisten op basis van de metadata  -->
-<table><thead><tr><th>Vereiste</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/">aia-01 - Personeel en gebruikers zijn voldoende AI-geletterd</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/">awb-01 - Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/">aia-28 - AI-systemen worden zo ontworpen en gebruikt, dat mensen begrijpen wanneer zij met een AI-systeem communiceren en welke content gemaakt is door een AI-systeem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/">aia-09 - Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr></tbody></table>
+<table><thead><tr><th>Vereiste</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/">aia-01 - Personeel en gebruikers zijn voldoende AI-geletterd.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/awb-01-zorgvuldigheidsbeginsel/">awb-01 - Organisaties die algoritmes gebruiken voor publieke taken nemen besluiten zorgvuldig.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-28-transparantieverplichtingen/">aia-28 - AI-systemen worden zo ontworpen en gebruikt, dat mensen begrijpen wanneer zij met een AI-systeem communiceren en welke content gemaakt is door een AI-systeem</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-09-menselijk-toezicht/">aia-09 - Hoog-risico-AI-systemen staan onder menselijk toezicht.</a></td></tr></tbody></table>
 
 <h2 id="bronnen">Bronnen</h2>
 <!-- Vul hier de relevante bronnen in voor deze maatregel -->
diff --git a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/index.html b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/index.html
index f281520fe9..fb7ad46bfb 100644
--- a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/index.html
+++ b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/index.html
@@ -27,7 +27,7 @@
     
     
       
-        <title>Personeel en gebruikers zijn voldoende AI-geletterd - Algoritmekader (bèta)</title>
+        <title>Personeel en gebruikers zijn voldoende AI-geletterd. - Algoritmekader (bèta)</title>
       
     
     
@@ -132,7 +132,7 @@
         <div class="md-header__topic" data-md-component="header-topic">
           <span class="md-ellipsis">
             
-              Personeel en gebruikers zijn voldoende AI-geletterd
+              Personeel en gebruikers zijn voldoende AI-geletterd.
             
           </span>
         </div>
@@ -849,23 +849,24 @@
   
 
 
-  <h1>Personeel en gebruikers zijn voldoende AI-geletterd</h1>
+  <h1>Personeel en gebruikers zijn voldoende AI-geletterd.</h1>
 
 <p><span class="mdx-badge" data-md-color-accent="blue"><span class="mdx-badge__icon"><a href="" title="Vereiste ID"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M5.5 7A1.5 1.5 0 0 1 4 5.5 1.5 1.5 0 0 1 5.5 4 1.5 1.5 0 0 1 7 5.5 1.5 1.5 0 0 1 5.5 7m15.91 4.58-9-9C12.05 2.22 11.55 2 11 2H4c-1.11 0-2 .89-2 2v7c0 .55.22 1.05.59 1.41l8.99 9c.37.36.87.59 1.42.59s1.05-.23 1.41-.59l7-7c.37-.36.59-.86.59-1.41 0-.56-.23-1.06-.59-1.42"/></svg></span></a></span><span class="mdx-badge__text">aia-01</span></span><span class="mdx-badge" data-md-color-accent="indigo"><span class="mdx-badge__icon"><a href="../../../levenscyclus/" title="Levencyclus"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M2 12a9 9 0 0 0 9 9c2.39 0 4.68-.94 6.4-2.6l-1.5-1.5A6.7 6.7 0 0 1 11 19c-6.24 0-9.36-7.54-4.95-11.95S18 5.77 18 12h-3l4 4h.1l3.9-4h-3a9 9 0 0 0-18 0"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../levenscyclus/organisatieverantwoordelijkheden/">Organisatieverantwoordelijkheden</a></span></span><span class="mdx-badge" data-md-color-accent="deep-orange"><span class="mdx-badge__icon"><a href="../../../rollen/" title="Rollen"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M12 4a4 4 0 0 1 4 4 4 4 0 0 1-4 4 4 4 0 0 1-4-4 4 4 0 0 1 4-4m0 10c4.42 0 8 1.79 8 4v2H4v-2c0-2.21 3.58-4 8-4"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../rollen/projectleider/">Projectleider</a></span></span><span class="mdx-badge" data-md-color-accent="teal"><span class="mdx-badge__icon"><a href="../../../onderwerpen/" title="Onderwerp"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M12 2a7 7 0 0 0-7 7c0 2.38 1.19 4.47 3 5.74V17a1 1 0 0 0 1 1h6a1 1 0 0 0 1-1v-2.26c1.81-1.27 3-3.36 3-5.74a7 7 0 0 0-7-7M9 21a1 1 0 0 0 1 1h4a1 1 0 0 0 1-1v-1H9z"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../onderwerpen/menselijke-controle/">Menselijke controle</a></span></span><span class="mdx-badge" data-md-color-accent="teal"><span class="mdx-badge__icon"><a href="../../../onderwerpen/" title="Onderwerp"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M12 2a7 7 0 0 0-7 7c0 2.38 1.19 4.47 3 5.74V17a1 1 0 0 0 1 1h6a1 1 0 0 0 1-1v-2.26c1.81-1.27 3-3.36 3-5.74a7 7 0 0 0-7-7M9 21a1 1 0 0 0 1 1h4a1 1 0 0 0 1-1v-1H9z"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../onderwerpen/governance/">Governance</a></span></span></p>
 <h2 id="vereiste">Vereiste</h2>
-<p>Aanbieders en gebruiksverantwoordelijken van AI-systemen nemen maatregelen om, zoveel als mogelijk, te zorgen voor een toereikend niveau van <abbr title="vaardigheden, kennis en begrip die aanbieders, gebruiksverantwoordelijken en betrokken personen, rekening houdend met hun respectieve rechten en plichten in het kader van de de AI-verordening, in staat stellen met kennis van zaken AI-systemen in te zetten en zich bewuster te worden van de kansen en risico’s van AI en de mogelijke schade die zij kan veroorzaken">AI-geletterdheid</abbr> bij hun personeel en andere personen die namens hen AI-systemen exploiteren en gebruiken, en houden daarbij rekening met hun technische kennis, ervaring, onderwijs en opleiding en de context waarin de AI-systemen zullen worden gebruikt, evenals met de personen of groepen personen ten aanzien van wie de AI-systemen zullen worden gebruikt.</p>
+<p>Personeel en gebruikers zijn voldoende AI-geletterd.</p>
 <h2 id="toelichting">Toelichting</h2>
-<p>Aanbieders en gebruiksverantwoordelijken van AI-systemen nemen maatregelen om ervoor te zorgen dat hun personeel en andere betrokkenen voldoende kennis hebben van AI.
-Dit omvat het bevorderen van kennis over de techniek, evenals kennis over de context waarin de AI-systemen worden gebruikt en de gebruikers van deze systemen. 
-Daarnaast moet er worden ingezet op het delen van ervaringen, passend onderwijs en opleiding van inidividuen.
-Het doel is om een adequaat niveau van begrip en vaardigheden te waarborgen, wat bijdraagt aan een verantwoord gebruik van AI en het minimaliseren van risico's.</p>
+<p>Aanbieders en gebruiksverantwoordelijken van AI-systemen nemen maatregelen om, zoveel als mogelijk, te zorgen voor een toereikend niveau van <abbr title="vaardigheden, kennis en begrip die aanbieders, gebruiksverantwoordelijken en betrokken personen, rekening houdend met hun respectieve rechten en plichten in het kader van de de AI-verordening, in staat stellen met kennis van zaken AI-systemen in te zetten en zich bewuster te worden van de kansen en risico’s van AI en de mogelijke schade die zij kan veroorzaken">AI-geletterdheid</abbr> bij hun personeel en andere personen die namens hen AI-systemen exploiteren en gebruiken.</p>
+<p>Zij houden daarbij rekening met hun technische kennis, ervaring, onderwijs en opleiding en de context waarin de AI-systemen zullen worden gebruikt, evenals met de personen of groepen personen ten aanzien van wie de AI-systemen zullen worden gebruikt.</p>
+<p>De AI-kennisplicht betekent bijvoorbeeld dat een HR-medewerker moet begrijpen dat een AI-systeem vooroordelen kan bevatten of essentiële informatie kan negeren, waardoor een sollicitant onterecht wel of juist niet wordt voorgedragen. En een baliemedewerker bij een gemeente die een AI-systemen gebruikt om de burgers te helpen, moet beseffen dat deze systemen vaak niet even goed werken voor iedereen. En dat diegene de uitkomsten van dit soort AI-systemen niet blindelings kan volgen.  </p>
+<p>Het doel is om een adequaat niveau van begrip en vaardigheden te waarborgen, wat bijdraagt aan een verantwoord gebruik van AI en het minimaliseren van risico's.</p>
+<p>Vanaf februari 2025 treedt deze vereiste in werking. </p>
 <h2 id="bronnen">Bronnen</h2>
 <p><a href="https://eur-lex.europa.eu/legal-content/NL/TXT/HTML/?uri=OJ:L_202401689#d1e2799-1-1">Artikel 4 Verordening Artificiële Intelligentie</a></p>
 <h2 id="wanneer-van-toepassing">Wanneer van toepassing?</h2>
 <p><span class="mdx-badge" data-md-color-accent="blue"><span class="mdx-badge__icon"><a href="../../../overhetalgoritmekader/soorten-algoritmes/" title="Soort toepassing"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M19.5 17c-.13 0-.26 0-.39.04l-1.61-3.25a2.5 2.5 0 0 0-1.75-4.29c-.13 0-.25 0-.39.04l-1.63-3.25c.48-.45.77-1.08.77-1.79a2.5 2.5 0 0 0-5 0c0 .71.29 1.34.76 1.79L8.64 9.54c-.14-.04-.26-.04-.39-.04a2.5 2.5 0 0 0-1.75 4.29l-1.61 3.25C4.76 17 4.63 17 4.5 17a2.5 2.5 0 0 0 0 5A2.5 2.5 0 0 0 7 19.5c0-.7-.29-1.34-.76-1.79l1.62-3.25c.14.04.26.04.39.04s.25 0 .39-.04l1.63 3.25c-.47.45-.77 1.09-.77 1.79a2.5 2.5 0 0 0 5 0A2.5 2.5 0 0 0 12 17c-.13 0-.26 0-.39.04L10 13.79c.46-.45.75-1.08.75-1.79s-.29-1.34-.75-1.79l1.61-3.25c.13.04.26.04.39.04s.26 0 .39-.04L14 10.21c-.45.45-.75 1.09-.75 1.79a2.5 2.5 0 0 0 2.5 2.5c.13 0 .25 0 .39-.04l1.63 3.25c-.47.45-.77 1.09-.77 1.79a2.5 2.5 0 0 0 5 0 2.5 2.5 0 0 0-2.5-2.5"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../overhetalgoritmekader/soorten-algoritmes/">AI-systeem</a></span></span><span class="mdx-badge" data-md-color-accent="blue"><span class="mdx-badge__icon"><a href="../../../overhetalgoritmekader/soorten-algoritmes/" title="Soort toepassing"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M19.5 17c-.13 0-.26 0-.39.04l-1.61-3.25a2.5 2.5 0 0 0-1.75-4.29c-.13 0-.25 0-.39.04l-1.63-3.25c.48-.45.77-1.08.77-1.79a2.5 2.5 0 0 0-5 0c0 .71.29 1.34.76 1.79L8.64 9.54c-.14-.04-.26-.04-.39-.04a2.5 2.5 0 0 0-1.75 4.29l-1.61 3.25C4.76 17 4.63 17 4.5 17a2.5 2.5 0 0 0 0 5A2.5 2.5 0 0 0 7 19.5c0-.7-.29-1.34-.76-1.79l1.62-3.25c.14.04.26.04.39.04s.25 0 .39-.04l1.63 3.25c-.47.45-.77 1.09-.77 1.79a2.5 2.5 0 0 0 5 0A2.5 2.5 0 0 0 12 17c-.13 0-.26 0-.39.04L10 13.79c.46-.45.75-1.08.75-1.79s-.29-1.34-.75-1.79l1.61-3.25c.13.04.26.04.39.04s.26 0 .39-.04L14 10.21c-.45.45-.75 1.09-.75 1.79a2.5 2.5 0 0 0 2.5 2.5c.13 0 .25 0 .39-.04l1.63 3.25c-.47.45-.77 1.09-.77 1.79a2.5 2.5 0 0 0 5 0 2.5 2.5 0 0 0-2.5-2.5"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../overhetalgoritmekader/soorten-algoritmes/"><abbr title="Een AI-systeem dat is gebaseerd op een AI- model voor algemene doeleinden en dat verschillende doeleinden kan dienen, zowel voor direct gebruik als voor integratie in andere AI-systemen">AI-systeem voor algemene doeleinden</abbr></a></span></span><span class="mdx-badge" data-md-color-accent="blue"><span class="mdx-badge__icon"><a href="../../../overhetalgoritmekader/soorten-algoritmes/" title="Soort toepassing"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M19.5 17c-.13 0-.26 0-.39.04l-1.61-3.25a2.5 2.5 0 0 0-1.75-4.29c-.13 0-.25 0-.39.04l-1.63-3.25c.48-.45.77-1.08.77-1.79a2.5 2.5 0 0 0-5 0c0 .71.29 1.34.76 1.79L8.64 9.54c-.14-.04-.26-.04-.39-.04a2.5 2.5 0 0 0-1.75 4.29l-1.61 3.25C4.76 17 4.63 17 4.5 17a2.5 2.5 0 0 0 0 5A2.5 2.5 0 0 0 7 19.5c0-.7-.29-1.34-.76-1.79l1.62-3.25c.14.04.26.04.39.04s.25 0 .39-.04l1.63 3.25c-.47.45-.77 1.09-.77 1.79a2.5 2.5 0 0 0 5 0A2.5 2.5 0 0 0 12 17c-.13 0-.26 0-.39.04L10 13.79c.46-.45.75-1.08.75-1.79s-.29-1.34-.75-1.79l1.61-3.25c.13.04.26.04.39.04s.26 0 .39-.04L14 10.21c-.45.45-.75 1.09-.75 1.79a2.5 2.5 0 0 0 2.5 2.5c.13 0 .25 0 .39-.04l1.63 3.25c-.47.45-.77 1.09-.77 1.79a2.5 2.5 0 0 0 5 0 2.5 2.5 0 0 0-2.5-2.5"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../overhetalgoritmekader/soorten-algoritmes/"><abbr title="Een AI-model, ook wanneer het is getraind met een grote hoeveelheid data met behulp van self-supervision op grote schaal, dat een aanzienlijk algemeen karakter vertoont en in staat is op competente wijze een breed scala aan verschillende taken uit te voeren, ongeacht de wijze waarop het model in de handel wordt gebracht, en dat kan worden geïntegreerd in een verscheidenheid aan systemen verder in de AI-waardeketen of toepassingen verder in de AI-waardeketen, met uitzondering van AI-modellen die worden gebruikt voor onderzoek, ontwikkeling of prototypingactiviteiten alvorens zij in de handel worden gebracht.">AI-model voor algemene doeleinden</abbr></a></span></span><span class="mdx-badge" data-md-color-accent="blue"><span class="mdx-badge__icon"><a href="../../../overhetalgoritmekader/soorten-algoritmes/#risicogroepen-ai-systemen" title="Risicogroep"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M13 14h-2V9h2m0 9h-2v-2h2M1 21h22L12 2z"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../overhetalgoritmekader/soorten-algoritmes/#risicogroepen-ai-systemen">hoog risico AI-systeem</a></span></span><span class="mdx-badge" data-md-color-accent="blue"><span class="mdx-badge__icon"><a href="../../../overhetalgoritmekader/soorten-algoritmes/#risicogroepen-ai-systemen" title="Risicogroep"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M13 14h-2V9h2m0 9h-2v-2h2M1 21h22L12 2z"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../overhetalgoritmekader/soorten-algoritmes/#risicogroepen-ai-systemen">verboden AI</a></span></span><span class="mdx-badge" data-md-color-accent="blue"><span class="mdx-badge__icon"><a href="../../../overhetalgoritmekader/soorten-algoritmes/#risicogroepen-ai-systemen" title="Risicogroep"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M13 14h-2V9h2m0 9h-2v-2h2M1 21h22L12 2z"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../overhetalgoritmekader/soorten-algoritmes/#risicogroepen-ai-systemen">geen hoog risico AI-systeem</a></span></span><span class="mdx-badge" data-md-color-accent="blue"><span class="mdx-badge__icon"><a href="../../../overhetalgoritmekader/soorten-algoritmes/" title="Rol AI-verordening"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M11 9c0 1.66-1.34 3-3 3s-3-1.34-3-3 1.34-3 3-3 3 1.34 3 3m3 11H2v-2c0-2.21 2.69-4 6-4s6 1.79 6 4m8-6v2h-9v-2m9-4v2h-9V8m9-4v2h-9V4Z"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../overhetalgoritmekader/soorten-algoritmes/">Aanbieder</a></span></span><span class="mdx-badge" data-md-color-accent="blue"><span class="mdx-badge__icon"><a href="../../../overhetalgoritmekader/soorten-algoritmes/" title="Rol AI-verordening"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M11 9c0 1.66-1.34 3-3 3s-3-1.34-3-3 1.34-3 3-3 3 1.34 3 3m3 11H2v-2c0-2.21 2.69-4 6-4s6 1.79 6 4m8-6v2h-9v-2m9-4v2h-9V8m9-4v2h-9V4Z"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../overhetalgoritmekader/soorten-algoritmes/">Gebruiksverantwoordelijke</a></span></span></p>
 <h2 id="risico">Risico</h2>
-<p>Onvoldoende <abbr title="vaardigheden, kennis en begrip die aanbieders, gebruiksverantwoordelijken en betrokken personen, rekening houdend met hun respectieve rechten en plichten in het kader van de de AI-verordening, in staat stellen met kennis van zaken AI-systemen in te zetten en zich bewuster te worden van de kansen en risico’s van AI en de mogelijke schade die zij kan veroorzaken">AI-geletterdheid</abbr> kan leiden tot misbruik of onjuist gebruik van AI-systemen en tot situaties waarin AI-systemen verkeerd worden ingezet, onbedoeld gebruikt worden voor taken waar ze niet geschikt voor zijn, of dat de veiligheid en effectiviteit van de systemen in het gedrang komt.
-Dit kan leiden tot inefficiëntie, fouten, en mogelijk schade aan organisaties, gebruikers of betrokkenen.</p>
+<p>Onvoldoende <abbr title="vaardigheden, kennis en begrip die aanbieders, gebruiksverantwoordelijken en betrokken personen, rekening houdend met hun respectieve rechten en plichten in het kader van de de AI-verordening, in staat stellen met kennis van zaken AI-systemen in te zetten en zich bewuster te worden van de kansen en risico’s van AI en de mogelijke schade die zij kan veroorzaken">AI-geletterdheid</abbr> kan leiden tot misbruik of onjuist gebruik van AI-systemen en tot situaties waarin AI-systemen verkeerd worden ingezet, onbedoeld gebruikt worden voor taken waar ze niet geschikt voor zijn, of dat de veiligheid en effectiviteit van de systemen in het gedrang komt.</p>
+<p>Dit kan leiden tot inefficiëntie, fouten, en mogelijk schade aan organisaties, gebruikers of betrokkenen.</p>
 <h2 id="maatregelen">Maatregelen</h2>
 <div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Maatregelen</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-18-maak-vereisten-onderdeel-van-subgunningscriteria/index.html">owp-18</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-18-maak-vereisten-onderdeel-van-subgunningscriteria/index.html">Maak vereisten onderdeel van (sub)gunningscriteria bij een aanbesteding.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/index.html">owp-23</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-23-kennisoverdracht-en-ondersteuning-aanbieder/index.html">Laat de aanbieder aangeven welke mate van opleiding en ondersteuning bij de implementatie nodig is om de beoogde algoritmes verantwoord te gebruiken.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/index.html">owp-26</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-26-maak-vereisten-onderdeel-van-service-level-agreement/index.html">Maak vereisten voor algoritmes onderdeel van de Service Level Agreement</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/index.html">imp-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/6-imp-01-werkinstructies-gebruikers/index.html">Stel een werkinstructie op voor gebruikers.</a></td></tr></tbody></table>
 
@@ -890,7 +891,7 @@ <h2 id="maatregelen">Maatregelen</h2>
     <span class="md-icon" title="Laatst geüpdatet">
       <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
     </span>
-    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">12 december 2024</span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
   </span>
 
     
diff --git a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/index.html b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/index.html
index 3b2db7c673..b92d7637c4 100644
--- a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/index.html
+++ b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/index.html
@@ -27,7 +27,7 @@
     
     
       
-        <title>Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd - Algoritmekader (bèta)</title>
+        <title>Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd. - Algoritmekader (bèta)</title>
       
     
     
@@ -132,7 +132,7 @@
         <div class="md-header__topic" data-md-component="header-topic">
           <span class="md-ellipsis">
             
-              Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd
+              Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd.
             
           </span>
         </div>
@@ -849,18 +849,16 @@
   
 
 
-  <h1>Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd</h1>
+  <h1>Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd.</h1>
 
 <p><span class="mdx-badge" data-md-color-accent="blue"><span class="mdx-badge__icon"><a href="" title="Vereiste ID"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M5.5 7A1.5 1.5 0 0 1 4 5.5 1.5 1.5 0 0 1 5.5 4 1.5 1.5 0 0 1 7 5.5 1.5 1.5 0 0 1 5.5 7m15.91 4.58-9-9C12.05 2.22 11.55 2 11 2H4c-1.11 0-2 .89-2 2v7c0 .55.22 1.05.59 1.41l8.99 9c.37.36.87.59 1.42.59s1.05-.23 1.41-.59l7-7c.37-.36.59-.86.59-1.41 0-.56-.23-1.06-.59-1.42"/></svg></span></a></span><span class="mdx-badge__text">aia-02</span></span><span class="mdx-badge" data-md-color-accent="indigo"><span class="mdx-badge__icon"><a href="../../../levenscyclus/" title="Levencyclus"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M2 12a9 9 0 0 0 9 9c2.39 0 4.68-.94 6.4-2.6l-1.5-1.5A6.7 6.7 0 0 1 11 19c-6.24 0-9.36-7.54-4.95-11.95S18 5.77 18 12h-3l4 4h.1l3.9-4h-3a9 9 0 0 0-18 0"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../levenscyclus/ontwerp/">Ontwerp</a></span></span><span class="mdx-badge" data-md-color-accent="deep-orange"><span class="mdx-badge__icon"><a href="../../../rollen/" title="Rollen"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M12 4a4 4 0 0 1 4 4 4 4 0 0 1-4 4 4 4 0 0 1-4-4 4 4 0 0 1 4-4m0 10c4.42 0 8 1.79 8 4v2H4v-2c0-2.21 3.58-4 8-4"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../rollen/projectleider/">Projectleider</a></span></span><span class="mdx-badge" data-md-color-accent="teal"><span class="mdx-badge__icon"><a href="../../../onderwerpen/" title="Onderwerp"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M12 2a7 7 0 0 0-7 7c0 2.38 1.19 4.47 3 5.74V17a1 1 0 0 0 1 1h6a1 1 0 0 0 1-1v-2.26c1.81-1.27 3-3.36 3-5.74a7 7 0 0 0-7-7M9 21a1 1 0 0 0 1 1h4a1 1 0 0 0 1-1v-1H9z"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../onderwerpen/governance/">Governance</a></span></span><span class="mdx-badge" data-md-color-accent="teal"><span class="mdx-badge__icon"><a href="../../../onderwerpen/" title="Onderwerp"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M12 2a7 7 0 0 0-7 7c0 2.38 1.19 4.47 3 5.74V17a1 1 0 0 0 1 1h6a1 1 0 0 0 1-1v-2.26c1.81-1.27 3-3.36 3-5.74a7 7 0 0 0-7-7M9 21a1 1 0 0 0 1 1h4a1 1 0 0 0 1-1v-1H9z"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../onderwerpen/transparantie/">Transparantie</a></span></span></p>
 <h2 id="vereiste">Vereiste</h2>
-<p>Een <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> die van mening is dat een in bijlage III bedoeld AI-systeem geen hoog risico inhoudt, documenteert zijn beoordeling voordat dat systeem in de handel wordt gebracht of in gebruik wordt gesteld.
-Die <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> is onderworpen aan de registratieverplichting van artikel 49, lid 2 AI-verordening.
-Op verzoek van de nationale bevoegde autoriteiten verstrekt de <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> de documentatie van de beoordeling.</p>
+<p>Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd.</p>
 <h2 id="toelichting">Toelichting</h2>
-<p>Een <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> die oordeelt dat een AI-systeem niet valt onder hoog-risico zoals gefedinieerd in bijlage III van de AI-verordening, documenteert deze beoordeling voorafgaand aan het <abbr title="Het voor het eerst in de Unie op de markt aanbieden van een AI-systeem of een AI-model voor algemene doeleinden">in de handel brengen</abbr> of in gebruik nemen van het systeem.
-Op verzoek van de nationale autoriteiten verstrekt de <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> de documentatie van de beoordeling.
-De <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> of in voorkomend geval de gemachtigd registreert zichzelf en het betreffende AI-systeem in de EU-databank (artikel 71 AI-verordening).
-AI-systemen met een hoog risico als bedoeld in punt 2 van bijlage III (<abbr title="kritieke infrastructuur zoals gedefinieerd in artikel 2, punt 4, van Richtlijn (EU) 2022/2557">kritieke infrastructuur</abbr>) worden op nationaal niveau geregistreerd.</p>
+<p>Een <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> die van mening is dat er geen sprake is van een in bijlage III bedoeld AI-systeem, documenteert zijn beoordeling voordat dat systeem in de handel wordt gebracht of in gebruik wordt gesteld. </p>
+<p>Die <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> is onderworpen aan de registratieverplichting van artikel 49, lid 2 AI-verordening. Op verzoek van de nationale bevoegde autoriteiten verstrekt de <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> de documentatie van de beoordeling.</p>
+<p>De <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> of in voorkomend geval de gemachtigd registreert zichzelf en het betreffende AI-systeem in de EU-databank (artikel 71 AI-verordening).</p>
+<p>AI-systemen met een hoog risico als bedoeld in punt 2 van bijlage III (<abbr title="kritieke infrastructuur zoals gedefinieerd in artikel 2, punt 4, van Richtlijn (EU) 2022/2557">kritieke infrastructuur</abbr>) worden op nationaal niveau geregistreerd.</p>
 <h2 id="bronnen">Bronnen</h2>
 <ul>
 <li><a href="https://eur-lex.europa.eu/legal-content/NL/TXT/HTML/?uri=OJ:L_202401689#d1e2986-1-1">Artikel 6(4) Verordening Artificiële Intelligentie</a></li>
@@ -871,7 +869,7 @@ <h2 id="bronnen">Bronnen</h2>
 <h2 id="wanneer-van-toepassing">Wanneer van toepassing?</h2>
 <p><span class="mdx-badge" data-md-color-accent="blue"><span class="mdx-badge__icon"><a href="../../../overhetalgoritmekader/soorten-algoritmes/" title="Soort toepassing"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M19.5 17c-.13 0-.26 0-.39.04l-1.61-3.25a2.5 2.5 0 0 0-1.75-4.29c-.13 0-.25 0-.39.04l-1.63-3.25c.48-.45.77-1.08.77-1.79a2.5 2.5 0 0 0-5 0c0 .71.29 1.34.76 1.79L8.64 9.54c-.14-.04-.26-.04-.39-.04a2.5 2.5 0 0 0-1.75 4.29l-1.61 3.25C4.76 17 4.63 17 4.5 17a2.5 2.5 0 0 0 0 5A2.5 2.5 0 0 0 7 19.5c0-.7-.29-1.34-.76-1.79l1.62-3.25c.14.04.26.04.39.04s.25 0 .39-.04l1.63 3.25c-.47.45-.77 1.09-.77 1.79a2.5 2.5 0 0 0 5 0A2.5 2.5 0 0 0 12 17c-.13 0-.26 0-.39.04L10 13.79c.46-.45.75-1.08.75-1.79s-.29-1.34-.75-1.79l1.61-3.25c.13.04.26.04.39.04s.26 0 .39-.04L14 10.21c-.45.45-.75 1.09-.75 1.79a2.5 2.5 0 0 0 2.5 2.5c.13 0 .25 0 .39-.04l1.63 3.25c-.47.45-.77 1.09-.77 1.79a2.5 2.5 0 0 0 5 0 2.5 2.5 0 0 0-2.5-2.5"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../overhetalgoritmekader/soorten-algoritmes/">AI-systeem</a></span></span><span class="mdx-badge" data-md-color-accent="blue"><span class="mdx-badge__icon"><a href="../../../overhetalgoritmekader/soorten-algoritmes/" title="Soort toepassing"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M19.5 17c-.13 0-.26 0-.39.04l-1.61-3.25a2.5 2.5 0 0 0-1.75-4.29c-.13 0-.25 0-.39.04l-1.63-3.25c.48-.45.77-1.08.77-1.79a2.5 2.5 0 0 0-5 0c0 .71.29 1.34.76 1.79L8.64 9.54c-.14-.04-.26-.04-.39-.04a2.5 2.5 0 0 0-1.75 4.29l-1.61 3.25C4.76 17 4.63 17 4.5 17a2.5 2.5 0 0 0 0 5A2.5 2.5 0 0 0 7 19.5c0-.7-.29-1.34-.76-1.79l1.62-3.25c.14.04.26.04.39.04s.25 0 .39-.04l1.63 3.25c-.47.45-.77 1.09-.77 1.79a2.5 2.5 0 0 0 5 0A2.5 2.5 0 0 0 12 17c-.13 0-.26 0-.39.04L10 13.79c.46-.45.75-1.08.75-1.79s-.29-1.34-.75-1.79l1.61-3.25c.13.04.26.04.39.04s.26 0 .39-.04L14 10.21c-.45.45-.75 1.09-.75 1.79a2.5 2.5 0 0 0 2.5 2.5c.13 0 .25 0 .39-.04l1.63 3.25c-.47.45-.77 1.09-.77 1.79a2.5 2.5 0 0 0 5 0 2.5 2.5 0 0 0-2.5-2.5"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../overhetalgoritmekader/soorten-algoritmes/"><abbr title="Een AI-systeem dat is gebaseerd op een AI- model voor algemene doeleinden en dat verschillende doeleinden kan dienen, zowel voor direct gebruik als voor integratie in andere AI-systemen">AI-systeem voor algemene doeleinden</abbr></a></span></span><span class="mdx-badge" data-md-color-accent="blue"><span class="mdx-badge__icon"><a href="../../../overhetalgoritmekader/soorten-algoritmes/" title="Rol AI-verordening"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M11 9c0 1.66-1.34 3-3 3s-3-1.34-3-3 1.34-3 3-3 3 1.34 3 3m3 11H2v-2c0-2.21 2.69-4 6-4s6 1.79 6 4m8-6v2h-9v-2m9-4v2h-9V8m9-4v2h-9V4Z"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../overhetalgoritmekader/soorten-algoritmes/">Aanbieder</a></span></span></p>
 <h2 id="risico">Risico</h2>
-<p>Gebrek aan transparantie en verantwoording bij risicobeoordeling kan leiden tot onrechtmatig in de markt brengen en onrechtmatig gebruik van risicovolle AI-systemen.</p>
+<p>Gebrek aan transparantie en verantwoording bij risicobeoordeling kan leiden tot onrechtmatig in de markt brengen en onrechtmatig gebruik van (risicovolle) AI-systemen.</p>
 <h2 id="maatregelen">Maatregelen</h2>
 <div class="filter-container"></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Maatregelen</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/index.html">owp-12</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-12-bespreek-vereisten-met-aanbieders/index.html">Bespreek de vereisten die gelden voor een verantwoorde inzet van algoritmes met aanbieders.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/index.html">owp-13</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-13-vereisten-onderdeel-algemene-inkoopvoorwaarden-en-contractovereenkomst/index.html">Maak vereisten voor algoritmes onderdeel van algemene inkoopvoorwaarden en de contractovereenkomst.</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/index.html">owp-19</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-19-ruimte-voor-samenwerking-met-aanbieder/index.html">Creëer ruimte om met een aanbieder samen te gaan werken om specifieke vereisten te realiseren</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/index.html">owp-21</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-21-uitvoeren-audit-voor-naleving-vereisten/index.html">Neem het kunnen uitvoeren van een audit over de vereiste op in contractvoorwaarden en de contractovereenkomst</a></td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/index.html">owp-25</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/maatregelen/2-owp-25-maak-vereisten-onderdeel-van-programma-van-eisen/index.html">Maak vereisten onderdeel van het programma van eisen bij een aanbesteding</a></td></tr></tbody></table>
 
@@ -896,7 +894,7 @@ <h2 id="maatregelen">Maatregelen</h2>
     <span class="md-icon" title="Laatst geüpdatet">
       <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
     </span>
-    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">12 december 2024</span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
   </span>
 
     
diff --git a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/index.html b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/index.html
index 71e8f68f8c..88c696da81 100644
--- a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/index.html
+++ b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-03-risicobeheersysteem/index.html
@@ -855,14 +855,12 @@ <h1>Hoog-risico-AI-systemen zijn voorzien van een risicobeheersysteem</h1>
 <h2 id="vereiste">Vereiste</h2>
 <p>Voor AI-systemen met een hoog risico wordt een systeem voor risicobeheer vastgesteld, uitgevoerd, gedocumenteerd en in stand gehouden.</p>
 <h2 id="toelichting">Toelichting</h2>
-<p>Het systeem voor risicobeheer moet bestaan uit een tijdens de gehele levensduur van een AI-systeem met een hoog risico doorlopend en gepland iteratief proces.
-Dit proces moet gericht zijn op het vaststellen en beperken van de relevante risico’s van AI-systemen voor de gezondheid, veiligheid en grondrechten.
-Het systeem voor risicobeheer moet periodiek worden geëvalueerd en geactualiseerd om de blijvende doeltreffendheid ervan te waarborgen, alsook de motivering en de documentatie van eventuele significante besluiten en maatregelen die op grond van de AI-verordening zijn genomen.</p>
-<p>Dit proces moet ervoor zorgen dat de <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> de risico’s of negatieve effecten vaststelt en risicobeperkende maatregelen uitvoert voor de bekende en de redelijkerwijs te voorziene risico’s van AI-systemen voor de gezondheid, veiligheid en grondrechten.
-Hierin moeten ook maatregelen zitten voor <abbr title="Het gebruik van een AI-systeem op een wijze die niet in overeenstemming is met het beoogde doel, maar die kan voortvloeien uit redelijkerwijs te voorzien menselijk gedrag of redelijkerwijs te voorziene interactie met andere systemen, waaronder andere AI-systemen">redelijkerwijs te voorzien misbruik</abbr>, met inbegrip van de mogelijke risico’s die voortvloeien uit de wisselwerking tussen het AI-systeem en de omgeving waarin het werkt.
-Het systeem voor risicobeheer moet de passendste risicobeheersmaatregelen vaststellen.
-Bij het vaststellen van de passendste risicobeheersmaatregelen moet de <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> de gemaakte keuzes documenteren en toelichten en, in voorkomend geval, deskundigen en externe belanghebbenden betrekken.
-Bij het vaststellen van het <abbr title="Het gebruik van een AI-systeem op een wijze die niet in overeenstemming is met het beoogde doel, maar die kan voortvloeien uit redelijkerwijs te voorzien menselijk gedrag of redelijkerwijs te voorziene interactie met andere systemen, waaronder andere AI-systemen">redelijkerwijs te voorzien misbruik</abbr> van AI-systemen met een hoog risico moet de <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> aandacht hebben voor het gebruik van AI-systemen waarvan, hoewel zij niet rechtstreeks onder het beoogde doel vallen en niet in de <abbr title="de door de aanbieder verstrekte informatie om de gebruiksverantwoordelijke te informeren over met name het beoogde doel en juiste gebruik van een AI-systeem">gebruiksinstructies</abbr> worden vermeld, mag worden verwacht dat zij kunnen voortvloeien uit gemakkelijk voorspelbaar menselijk gedrag.</p>
+<p>Het systeem voor risicobeheer moet bestaan uit een gepland iteratief proces, dat tijdens de <a href="levenscyclus/index.md">gehele levensduur</a> van een hoog-risico AI-systeem wordt doorlopen. Een organisatie moet ervoor zorgen dat een risicobeheersysteem wordt ingericht in de organisatie. </p>
+<p>Het risicobeheersysteem moet gericht zijn op het vaststellen en beperken van de relevante risico’s van AI-systemen voor de gezondheid, veiligheid en grondrechten met passende maatregelen. </p>
+<p>Het systeem voor risicobeheer moet periodiek worden geëvalueerd en geactualiseerd om de blijvende doeltreffendheid ervan te waarborgen, alsook de motivering en de documentatie van eventuele significante besluiten en maatregelen die op grond van de AI-verordening zijn genomen.</p>
+<p>Dit proces moet ervoor zorgen dat de <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> de risico’s of negatieve effecten vaststelt en risicobeperkende maatregelen uitvoert voor de bekende en de redelijkerwijs te voorziene risico’s van AI-systemen voor de gezondheid, veiligheid en grondrechten.</p>
+<p>Hierin moeten ook maatregelen zitten voor <abbr title="Het gebruik van een AI-systeem op een wijze die niet in overeenstemming is met het beoogde doel, maar die kan voortvloeien uit redelijkerwijs te voorzien menselijk gedrag of redelijkerwijs te voorziene interactie met andere systemen, waaronder andere AI-systemen">redelijkerwijs te voorzien misbruik</abbr>, met inbegrip van de mogelijke risico’s die voortvloeien uit de wisselwerking tussen het AI-systeem en de omgeving waarin het werkt. De <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> moet aandacht hebben voor het gebruik van AI-systemen waarvan, hoewel zij niet rechtstreeks onder het beoogde doel vallen en niet in de <abbr title="de door de aanbieder verstrekte informatie om de gebruiksverantwoordelijke te informeren over met name het beoogde doel en juiste gebruik van een AI-systeem">gebruiksinstructies</abbr> worden vermeld, mag worden verwacht dat zij kunnen voortvloeien uit gemakkelijk voorspelbaar menselijk gedrag.</p>
+<p>Bij het vaststellen van passende risicobeheersmaatregelen moet de <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> de gemaakte keuzes hebben gedocumenteerd en voorzien van een toelichting en, in voorkomend geval, deskundigen en externe belanghebbenden hierbij betrekken.</p>
 <h2 id="bronnen">Bronnen</h2>
 <p><a href="https://eur-lex.europa.eu/legal-content/NL/TXT/HTML/?uri=OJ:L_202401689#d1e3241-1-1">Artikel 9(1) Verordening Artificiële Intelligentie</a></p>
 <h2 id="wanneer-van-toepassing">Wanneer van toepassing?</h2>
@@ -893,7 +891,7 @@ <h2 id="maatregelen">Maatregelen</h2>
     <span class="md-icon" title="Laatst geüpdatet">
       <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
     </span>
-    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">12 december 2024</span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
   </span>
 
     
diff --git a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html
index fe429195b1..80c76b0d44 100644
--- a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html
+++ b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html
@@ -27,7 +27,7 @@
     
     
       
-        <title>Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen - Algoritmekader (bèta)</title>
+        <title>Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen. - Algoritmekader (bèta)</title>
       
     
     
@@ -132,7 +132,7 @@
         <div class="md-header__topic" data-md-component="header-topic">
           <span class="md-ellipsis">
             
-              Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen
+              Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen.
             
           </span>
         </div>
@@ -849,13 +849,14 @@
   
 
 
-  <h1>Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen</h1>
+  <h1>Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen.</h1>
 
 <p><span class="mdx-badge" data-md-color-accent="blue"><span class="mdx-badge__icon"><a href="" title="Vereiste ID"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M5.5 7A1.5 1.5 0 0 1 4 5.5 1.5 1.5 0 0 1 5.5 4 1.5 1.5 0 0 1 7 5.5 1.5 1.5 0 0 1 5.5 7m15.91 4.58-9-9C12.05 2.22 11.55 2 11 2H4c-1.11 0-2 .89-2 2v7c0 .55.22 1.05.59 1.41l8.99 9c.37.36.87.59 1.42.59s1.05-.23 1.41-.59l7-7c.37-.36.59-.86.59-1.41 0-.56-.23-1.06-.59-1.42"/></svg></span></a></span><span class="mdx-badge__text">aia-04</span></span><span class="mdx-badge" data-md-color-accent="indigo"><span class="mdx-badge__icon"><a href="../../../levenscyclus/" title="Levencyclus"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M2 12a9 9 0 0 0 9 9c2.39 0 4.68-.94 6.4-2.6l-1.5-1.5A6.7 6.7 0 0 1 11 19c-6.24 0-9.36-7.54-4.95-11.95S18 5.77 18 12h-3l4 4h.1l3.9-4h-3a9 9 0 0 0-18 0"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../levenscyclus/ontwerp/">Ontwerp</a></span></span><span class="mdx-badge" data-md-color-accent="indigo"><span class="mdx-badge__icon"><a href="../../../levenscyclus/" title="Levencyclus"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M2 12a9 9 0 0 0 9 9c2.39 0 4.68-.94 6.4-2.6l-1.5-1.5A6.7 6.7 0 0 1 11 19c-6.24 0-9.36-7.54-4.95-11.95S18 5.77 18 12h-3l4 4h.1l3.9-4h-3a9 9 0 0 0-18 0"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../levenscyclus/monitoring-en-beheer/">Monitoring en beheer</a></span></span><span class="mdx-badge" data-md-color-accent="deep-orange"><span class="mdx-badge__icon"><a href="../../../rollen/" title="Rollen"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M12 4a4 4 0 0 1 4 4 4 4 0 0 1-4 4 4 4 0 0 1-4-4 4 4 0 0 1 4-4m0 10c4.42 0 8 1.79 8 4v2H4v-2c0-2.21 3.58-4 8-4"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../rollen/projectleider/">Projectleider</a></span></span><span class="mdx-badge" data-md-color-accent="deep-orange"><span class="mdx-badge__icon"><a href="../../../rollen/" title="Rollen"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M12 4a4 4 0 0 1 4 4 4 4 0 0 1-4 4 4 4 0 0 1-4-4 4 4 0 0 1 4-4m0 10c4.42 0 8 1.79 8 4v2H4v-2c0-2.21 3.58-4 8-4"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../rollen/beleid-en-advies/">Beleid en advies</a></span></span><span class="mdx-badge" data-md-color-accent="teal"><span class="mdx-badge__icon"><a href="../../../onderwerpen/" title="Onderwerp"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M12 2a7 7 0 0 0-7 7c0 2.38 1.19 4.47 3 5.74V17a1 1 0 0 0 1 1h6a1 1 0 0 0 1-1v-2.26c1.81-1.27 3-3.36 3-5.74a7 7 0 0 0-7-7M9 21a1 1 0 0 0 1 1h4a1 1 0 0 0 1-1v-1H9z"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../onderwerpen/fundamentele-rechten/">Fundamentele rechten</a></span></span><span class="mdx-badge" data-md-color-accent="teal"><span class="mdx-badge__icon"><a href="../../../onderwerpen/" title="Onderwerp"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M12 2a7 7 0 0 0-7 7c0 2.38 1.19 4.47 3 5.74V17a1 1 0 0 0 1 1h6a1 1 0 0 0 1-1v-2.26c1.81-1.27 3-3.36 3-5.74a7 7 0 0 0-7-7M9 21a1 1 0 0 0 1 1h4a1 1 0 0 0 1-1v-1H9z"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../onderwerpen/bias-en-non-discriminatie/">Bias en non discriminatie</a></span></span></p>
 <h2 id="vereiste">Vereiste</h2>
-<p>Bij het doorlopen, periodieke systematische toetsing en actualisatie van het risicosysteem nemen aanbieders in overweging of het beoogde doel van het AI-systeem negatieve effecten zal hebben op personen jonger dan 18 jaar of andere kwetsbare groepen.</p>
+<p>Bij het doorlopen, het periodieke systematische toetsen en actualiseren van het risicosysteem nemen aanbieders in overweging of het beoogde doel van het AI-systeem negatieve effecten zal hebben op personen jonger dan 18 jaar of andere kwetsbare groepen.</p>
 <h2 id="toelichting">Toelichting</h2>
-<p>Bij de uitvoering van het in de leden 1 tot en met 7 van art. 9 AI-Verordening bedoelde systeem voor risicobeheer houden aanbieders rekening met de vraag of het beoogde doel van het AI-systeem met een hoog risico waarschijnlijk negatieve gevolgen zal hebben voor personen jonger dan 18 jaar en, in voorkomend geval, voor andere groepen kwetsbare personen. Er moet een grondige risicoanalyse plaatsvinden en worden vertaald naar mitigerende maatregelen om het risico te elimineren of te mitigeren.</p>
+<p>Bij de uitvoering van het in de leden 1 tot en met 7 van art. 9 AI-Verordening bedoelde systeem voor risicobeheer houden aanbieders rekening met de vraag of het beoogde doel van het AI-systeem met een hoog risico waarschijnlijk negatieve gevolgen zal hebben voor personen jonger dan 18 jaar en, in voorkomend geval, voor andere groepen kwetsbare personen.</p>
+<p>Er moet een grondige risicoanalyse plaatsvinden en worden vertaald naar mitigerende maatregelen om het risico te elimineren of te mitigeren.</p>
 <h2 id="bronnen">Bronnen</h2>
 <p><a href="https://eur-lex.europa.eu/legal-content/NL/TXT/HTML/?uri=OJ:L_202401689#d1e3241-1-1">Artikel 9(9) Verordening Artificiële Intelligentie</a></p>
 <h2 id="wanneer-van-toepassing">Wanneer van toepassing?</h2>
@@ -886,7 +887,7 @@ <h2 id="maatregelen">Maatregelen</h2>
     <span class="md-icon" title="Laatst geüpdatet">
       <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
     </span>
-    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">12 december 2024</span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
   </span>
 
     
diff --git a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/index.html b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/index.html
index f474549791..854e0ec6ff 100644
--- a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/index.html
+++ b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-05-data-kwaliteitscriteria/index.html
@@ -855,8 +855,8 @@ <h1>Datasets voor hoog-risico-AI-systemen voldoen aan kwaliteitscriteria</h1>
 <h2 id="vereiste">Vereiste</h2>
 <p>AI-systemen met een hoog risico die technieken gebruiken die het trainen van AI-modellen met data omvatten, worden ontwikkeld op basis van datasets voor training, validatie en tests die voldoen aan de kwaliteitscriteria telkens wanneer dergelijke datasets worden gebruikt.</p>
 <h2 id="toelichting">Toelichting</h2>
-<p>AI-systemen met een hoog risico die data gebruiken voor het trainen van AI-modellen, moeten gebaseerd zijn op datasets die voldoen aan specifieke kwaliteitscriteria.
-Deze criteria zorgen ervoor dat de data geschikt zijn voor training, validatie en tests, wat de betrouwbaarheid en nauwkeurigheid van het AI-systeem waarborgt.</p>
+<p>AI-systemen met een hoog risico die data gebruiken voor het trainen van AI-modellen, moeten gebaseerd zijn op datasets die voldoen aan specifieke <a href="3-dat-01-datakwaliteit.md">kwaliteitscriteria</a>. </p>
+<p>Deze criteria zorgen ervoor dat de data geschikt zijn voor <a href="3-dat-07-training-validatie-en-testdata.md">training, validatie en tests</a>, wat de betrouwbaarheid en nauwkeurigheid van het AI-systeem waarborgt. De kwaliteitscriteria zijn te vinden in leden 2 t/m 5 van artikel 10 van de AI-verordening. Bijvoorbeeld datasets moeten aan praktijken voor databeheer voldoen en moeten relevant, representatief, accuraat en volledig zijn.</p>
 <p>Deze vereiste houdt in dat de gebruikte datasets onder meer moeten voldoen aan:</p>
 <ul>
 <li>datasets voor training, validatie en tests worden onderworpen aan praktijken op het gebied van databeheer die stroken met het beoogde doel van het AI-systeem met een hoog risico. Dit heeft in het bijzonder betrekking op relevante ontwerpkeuzes, processen voor dataverzameling, verwerkingsactiviteiten voor datavoorbereiding, het opstellen van aannames met name betrekking tot de informatie die de data moeten meten en vertegenwoordigen, beschikbaarheid, kwantiteit en geschiktheid van de datasets en een beoordeling op mogelijke vooringenomenheid en passende maatregelen om deze vooringenomenheid op te sporen, te voorkomen en te beperken. </li>
@@ -894,7 +894,7 @@ <h2 id="maatregelen">Maatregelen</h2>
     <span class="md-icon" title="Laatst geüpdatet">
       <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
     </span>
-    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">12 december 2024</span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
   </span>
 
     
diff --git a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/index.html b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/index.html
index 02afbf7131..f95ec59c46 100644
--- a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/index.html
+++ b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-37-recht-klacht-indienen-bij-ai-bureau/index.html
@@ -16,7 +16,7 @@
         <link rel="prev" href="../aia-36-melding-inbreuk-op-ai-verordening/">
       
       
-        <link rel="next" href="../arc-01-archiefwet/">
+        <link rel="next" href="../aia-39-testen/">
       
       
         
diff --git a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/index.html b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/index.html
new file mode 100644
index 0000000000..5d755e6a30
--- /dev/null
+++ b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/index.html
@@ -0,0 +1,1024 @@
+
+<!doctype html>
+<html lang="nl" class="no-js">
+  <head>
+    
+      <meta charset="utf-8">
+      <meta name="viewport" content="width=device-width,initial-scale=1">
+      
+        <meta name="description" content="Het Algoritmekader van het Ministerie van Binnenlandse Zaken en Koninkrijksrelaties">
+      
+      
+      
+        <link rel="canonical" href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/">
+      
+      
+        <link rel="prev" href="../aia-37-recht-klacht-indienen-bij-ai-bureau/">
+      
+      
+        <link rel="next" href="../arc-01-archiefwet/">
+      
+      
+        
+      
+      
+      <link rel="icon" href="../../../assets/favicon.ico">
+      <meta name="generator" content="mkdocs-1.6.1, mkdocs-material-9.5.44+insiders-4.53.14">
+    
+    
+      
+        <title>Hoog-risico-AI-systemen zijn getest. - Algoritmekader (bèta)</title>
+      
+    
+    
+      <link rel="stylesheet" href="../../../assets/stylesheets/main.12320a83.min.css">
+      
+        
+        <link rel="stylesheet" href="../../../assets/stylesheets/palette.ab4e12ef.min.css">
+      
+      
+
+  
+  
+  
+  
+  <style>:root{--md-annotation-icon:url('data:image/svg+xml;charset=utf-8,<svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 512 512"><!--! Font Awesome Free 6.6.0 by @fontawesome - https://fontawesome.com License - https://fontawesome.com/license/free (Icons: CC BY 4.0, Fonts: SIL OFL 1.1, Code: MIT License) Copyright 2024 Fonticons, Inc.--><path d="M256 512a256 256 0 1 0 0-512 256 256 0 1 0 0 512m-40-176h24v-64h-24c-13.3 0-24-10.7-24-24s10.7-24 24-24h48c13.3 0 24 10.7 24 24v88h8c13.3 0 24 10.7 24 24s-10.7 24-24 24h-80c-13.3 0-24-10.7-24-24s10.7-24 24-24m40-208a32 32 0 1 1 0 64 32 32 0 1 1 0-64"/></svg>');}</style>
+
+
+    
+    
+      
+    
+    
+      
+    
+    
+      <link rel="stylesheet" href="../../../stylesheets/navigation.css">
+    
+      <link rel="stylesheet" href="../../../stylesheets/filters.css">
+    
+      <link rel="stylesheet" href="../../../stylesheets/extra.css">
+    
+      <link rel="stylesheet" href="../../../stylesheets/footer.css">
+    
+      <link rel="stylesheet" href="https://cdnjs.cloudflare.com/ajax/libs/font-awesome/6.0.0-beta3/css/all.min.css">
+    
+      <link rel="stylesheet" href="https://cdn.jsdelivr.net/npm/choices.js/public/assets/styles/choices.min.css">
+    
+    <script>__md_scope=new URL("../../..",location),__md_hash=e=>[...e].reduce(((e,_)=>(e<<5)-e+_.charCodeAt(0)),0),__md_get=(e,_=localStorage,t=__md_scope)=>JSON.parse(_.getItem(t.pathname+"."+e)),__md_set=(e,_,t=localStorage,a=__md_scope)=>{try{t.setItem(a.pathname+"."+e,JSON.stringify(_))}catch(e){}}</script>
+    
+      
+
+    
+    
+   <link href="../../../assets/stylesheets/glightbox.min.css" rel="stylesheet"/><style>
+    html.glightbox-open { overflow: initial; height: 100%; }
+    .gslide-title { margin-top: 0px; user-select: text; }
+    .gslide-desc { color: #666; user-select: text; }
+    .gslide-image img { background: white; }
+    .gscrollbar-fixer { padding-right: 15px; }
+    .gdesc-inner { font-size: 0.75rem; }
+    body[data-md-color-scheme="slate"] .gdesc-inner { background: var(--md-default-bg-color);}
+    body[data-md-color-scheme="slate"] .gslide-title { color: var(--md-default-fg-color);}
+    body[data-md-color-scheme="slate"] .gslide-desc { color: var(--md-default-fg-color);}</style> <script src="../../../assets/javascripts/glightbox.min.js"></script></head>
+  
+  
+    
+    
+    
+    
+    
+    <body dir="ltr" data-md-color-scheme="default" data-md-color-primary="custom" data-md-color-accent="indigo">
+  
+    
+    <input class="md-toggle" data-md-toggle="drawer" type="checkbox" id="__drawer" autocomplete="off">
+    <input class="md-toggle" data-md-toggle="search" type="checkbox" id="__search" autocomplete="off">
+    <label class="md-overlay" for="__drawer"></label>
+    <div data-md-component="skip">
+      
+        
+        <a href="#vereiste" class="md-skip">
+          Ga naar inhoud
+        </a>
+      
+    </div>
+    <div data-md-component="announce">
+      
+    </div>
+    
+    
+      
+
+  
+
+<header class="md-header md-header--shadow md-header--lifted" data-md-component="header">
+  <nav class="md-header__inner md-grid" aria-label="Header">
+    <a href="../../.." title="Algoritmekader (bèta)" class="md-header__button md-logo" aria-label="Algoritmekader (bèta)" data-md-component="logo">
+      
+  <img src="../../../assets/logo.svg" alt="logo">
+
+    </a>
+    <label class="md-header__button md-icon" for="__drawer">
+      
+      <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M3 6h18v2H3zm0 5h18v2H3zm0 5h18v2H3z"/></svg>
+    </label>
+    <div class="md-header__title" data-md-component="header-title">
+      <div class="md-header__ellipsis">
+        <div class="md-header__topic">
+          <span class="md-ellipsis">
+            Algoritmekader (bèta)
+          </span>
+        </div>
+        <div class="md-header__topic" data-md-component="header-topic">
+          <span class="md-ellipsis">
+            
+              Hoog-risico-AI-systemen zijn getest.
+            
+          </span>
+        </div>
+      </div>
+    </div>
+    
+      
+    
+    
+    
+    
+      <label class="md-header__button md-icon" for="__search">
+        
+        <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M9.5 3A6.5 6.5 0 0 1 16 9.5c0 1.61-.59 3.09-1.56 4.23l.27.27h.79l5 5-1.5 1.5-5-5v-.79l-.27-.27A6.52 6.52 0 0 1 9.5 16 6.5 6.5 0 0 1 3 9.5 6.5 6.5 0 0 1 9.5 3m0 2C7 5 5 7 5 9.5S7 14 9.5 14 14 12 14 9.5 12 5 9.5 5"/></svg>
+      </label>
+      <div class="md-search" data-md-component="search" role="dialog">
+  <label class="md-search__overlay" for="__search"></label>
+  <div class="md-search__inner" role="search">
+    <form class="md-search__form" name="search">
+      <input type="text" class="md-search__input" name="query" aria-label="Zoeken" placeholder="Zoeken" autocapitalize="off" autocorrect="off" autocomplete="off" spellcheck="false" data-md-component="search-query" required>
+      <label class="md-search__icon md-icon" for="__search">
+        
+        <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M9.5 3A6.5 6.5 0 0 1 16 9.5c0 1.61-.59 3.09-1.56 4.23l.27.27h.79l5 5-1.5 1.5-5-5v-.79l-.27-.27A6.52 6.52 0 0 1 9.5 16 6.5 6.5 0 0 1 3 9.5 6.5 6.5 0 0 1 9.5 3m0 2C7 5 5 7 5 9.5S7 14 9.5 14 14 12 14 9.5 12 5 9.5 5"/></svg>
+        
+        <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M20 11v2H8l5.5 5.5-1.42 1.42L4.16 12l7.92-7.92L13.5 5.5 8 11z"/></svg>
+      </label>
+      <nav class="md-search__options" aria-label="Zoeken">
+        
+        <button type="reset" class="md-search__icon md-icon" title="Leegmaken" aria-label="Leegmaken" tabindex="-1">
+          
+          <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M19 6.41 17.59 5 12 10.59 6.41 5 5 6.41 10.59 12 5 17.59 6.41 19 12 13.41 17.59 19 19 17.59 13.41 12z"/></svg>
+        </button>
+      </nav>
+      
+        <div class="md-search__suggest" data-md-component="search-suggest"></div>
+      
+    </form>
+    <div class="md-search__output">
+      <div class="md-search__scrollwrap" tabindex="0" data-md-scrollfix>
+        <div class="md-search-result" data-md-component="search-result">
+          <div class="md-search-result__meta">
+            Zoeken initialiseren
+          </div>
+          <ol class="md-search-result__list" role="presentation"></ol>
+        </div>
+      </div>
+    </div>
+  </div>
+</div>
+    
+    
+      <div class="md-header__source">
+        <a href="https://github.com/MinBZK/Algoritmekader" title="Ga naar repository" class="md-source" data-md-component="source">
+  <div class="md-source__icon md-icon">
+    
+    <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 448 512"><!--! Font Awesome Free 6.6.0 by @fontawesome - https://fontawesome.com License - https://fontawesome.com/license/free (Icons: CC BY 4.0, Fonts: SIL OFL 1.1, Code: MIT License) Copyright 2024 Fonticons, Inc.--><path d="M439.55 236.05 244 40.45a28.87 28.87 0 0 0-40.81 0l-40.66 40.63 51.52 51.52c27.06-9.14 52.68 16.77 43.39 43.68l49.66 49.66c34.23-11.8 61.18 31 35.47 56.69-26.49 26.49-70.21-2.87-56-37.34L240.22 199v121.85c25.3 12.54 22.26 41.85 9.08 55a34.34 34.34 0 0 1-48.55 0c-17.57-17.6-11.07-46.91 11.25-56v-123c-20.8-8.51-24.6-30.74-18.64-45L142.57 101 8.45 235.14a28.86 28.86 0 0 0 0 40.81l195.61 195.6a28.86 28.86 0 0 0 40.8 0l194.69-194.69a28.86 28.86 0 0 0 0-40.81"/></svg>
+  </div>
+  <div class="md-source__repository">
+    GitHub
+  </div>
+</a>
+      </div>
+    
+  </nav>
+  
+    
+      
+<nav class="md-tabs" aria-label="Tabs" data-md-component="tabs">
+  <div class="md-grid">
+    <ul class="md-tabs__list">
+      
+        
+  
+  
+  
+    
+    
+      <li class="md-tabs__item">
+        <a href="../../../overhetalgoritmekader/" class="md-tabs__link">
+          
+  
+    
+  
+  Basiskennis algoritmes en AI
+
+        </a>
+      </li>
+    
+  
+
+      
+        
+  
+  
+  
+    
+    
+      
+  
+  
+  
+    
+    
+      <li class="md-tabs__item">
+        <a href="../../../onderwerpen/" class="md-tabs__link">
+          
+  
+    
+  
+  Onderwerpen
+
+        </a>
+      </li>
+    
+  
+
+    
+  
+
+      
+        
+  
+  
+  
+    
+    
+      <li class="md-tabs__item">
+        <a href="../../../levenscyclus/" class="md-tabs__link">
+          
+  
+    
+  
+  Levenscyclus
+
+        </a>
+      </li>
+    
+  
+
+      
+        
+  
+  
+  
+    
+    
+      
+  
+  
+  
+    
+    
+      <li class="md-tabs__item">
+        <a href="../../../rollen/" class="md-tabs__link">
+          
+  
+    
+  
+  Rollen
+
+        </a>
+      </li>
+    
+  
+
+    
+  
+
+      
+        
+  
+  
+  
+    
+    
+      <li class="md-tabs__item">
+        <a href="../../" class="md-tabs__link">
+          
+  
+    
+  
+  Voldoen aan wetten en regels
+
+        </a>
+      </li>
+    
+  
+
+      
+    </ul>
+  </div>
+</nav>
+    
+  
+</header>
+    
+    <div class="md-container" data-md-component="container">
+      
+      
+        
+      
+      <main class="md-main" data-md-component="main">
+        <div class="md-main__inner md-grid">
+          
+            
+              
+                
+              
+              <div class="md-sidebar md-sidebar--primary" data-md-component="sidebar" data-md-type="navigation" hidden>
+                <div class="md-sidebar__scrollwrap">
+                  <div class="md-sidebar__inner">
+                    
+
+
+  
+
+
+<nav class="md-nav md-nav--primary md-nav--lifted" aria-label="Navigatie" data-md-level="0">
+  <label class="md-nav__title" for="__drawer">
+    <a href="../../.." title="Algoritmekader (bèta)" class="md-nav__button md-logo" aria-label="Algoritmekader (bèta)" data-md-component="logo">
+      
+  <img src="../../../assets/logo.svg" alt="logo">
+
+    </a>
+    Algoritmekader (bèta)
+  </label>
+  
+    <div class="md-nav__source">
+      <a href="https://github.com/MinBZK/Algoritmekader" title="Ga naar repository" class="md-source" data-md-component="source">
+  <div class="md-source__icon md-icon">
+    
+    <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 448 512"><!--! Font Awesome Free 6.6.0 by @fontawesome - https://fontawesome.com License - https://fontawesome.com/license/free (Icons: CC BY 4.0, Fonts: SIL OFL 1.1, Code: MIT License) Copyright 2024 Fonticons, Inc.--><path d="M439.55 236.05 244 40.45a28.87 28.87 0 0 0-40.81 0l-40.66 40.63 51.52 51.52c27.06-9.14 52.68 16.77 43.39 43.68l49.66 49.66c34.23-11.8 61.18 31 35.47 56.69-26.49 26.49-70.21-2.87-56-37.34L240.22 199v121.85c25.3 12.54 22.26 41.85 9.08 55a34.34 34.34 0 0 1-48.55 0c-17.57-17.6-11.07-46.91 11.25-56v-123c-20.8-8.51-24.6-30.74-18.64-45L142.57 101 8.45 235.14a28.86 28.86 0 0 0 0 40.81l195.61 195.6a28.86 28.86 0 0 0 40.8 0l194.69-194.69a28.86 28.86 0 0 0 0-40.81"/></svg>
+  </div>
+  <div class="md-source__repository">
+    GitHub
+  </div>
+</a>
+    </div>
+  
+  <ul class="md-nav__list" data-md-scrollfix>
+    
+      
+      
+  
+  
+  
+  
+    
+    
+      
+        
+          
+        
+      
+        
+      
+        
+      
+        
+      
+    
+    
+      
+      
+    
+    
+      
+        
+        
+      
+    
+    <li class="md-nav__item md-nav__item--pruned md-nav__item--nested">
+      
+        
+  
+  
+    <a href="../../../overhetalgoritmekader/" class="md-nav__link">
+      
+  
+  <span class="md-ellipsis">
+    
+  
+    Basiskennis algoritmes en AI
+  
+
+    
+  </span>
+  
+  
+
+      
+        <span class="md-nav__icon md-icon"></span>
+      
+    </a>
+  
+
+      
+    </li>
+  
+
+    
+      
+      
+  
+  
+  
+  
+    
+    
+      
+        
+      
+    
+    
+      
+      
+    
+    
+      
+        
+        
+      
+    
+    <li class="md-nav__item md-nav__item--pruned md-nav__item--nested">
+      
+        
+  
+  
+    
+  
+  
+    <a href="../../../onderwerpen/" class="md-nav__link">
+      
+  
+  <span class="md-ellipsis">
+    
+  
+    Onderwerpen
+  
+
+    
+  </span>
+  
+  
+
+      
+        <span class="md-nav__icon md-icon"></span>
+      
+    </a>
+  
+
+  
+
+      
+    </li>
+  
+
+    
+      
+      
+  
+  
+  
+  
+    
+    
+      
+        
+          
+        
+      
+        
+      
+        
+      
+        
+      
+        
+      
+        
+      
+        
+      
+        
+      
+        
+      
+        
+      
+    
+    
+      
+      
+    
+    
+      
+        
+        
+      
+    
+    <li class="md-nav__item md-nav__item--pruned md-nav__item--nested">
+      
+        
+  
+  
+    <a href="../../../levenscyclus/" class="md-nav__link">
+      
+  
+  <span class="md-ellipsis">
+    
+  
+    Levenscyclus
+  
+
+    
+  </span>
+  
+  
+
+      
+        <span class="md-nav__icon md-icon"></span>
+      
+    </a>
+  
+
+      
+    </li>
+  
+
+    
+      
+      
+  
+  
+  
+  
+    
+    
+      
+        
+      
+    
+    
+      
+      
+    
+    
+      
+        
+        
+      
+    
+    <li class="md-nav__item md-nav__item--pruned md-nav__item--nested">
+      
+        
+  
+  
+    
+  
+  
+    <a href="../../../rollen/" class="md-nav__link">
+      
+  
+  <span class="md-ellipsis">
+    
+  
+    Rollen
+  
+
+    
+  </span>
+  
+  
+
+      
+        <span class="md-nav__icon md-icon"></span>
+      
+    </a>
+  
+
+  
+
+      
+    </li>
+  
+
+    
+      
+      
+  
+  
+  
+  
+    
+    
+      
+        
+          
+        
+      
+        
+          
+        
+      
+        
+          
+        
+      
+        
+          
+        
+      
+    
+    
+      
+      
+    
+    
+      
+        
+        
+      
+    
+    <li class="md-nav__item md-nav__item--pruned md-nav__item--nested">
+      
+        
+  
+  
+    <a href="../../" class="md-nav__link">
+      
+  
+  <span class="md-ellipsis">
+    
+  
+    Voldoen aan wetten en regels
+  
+
+    
+  </span>
+  
+  
+
+      
+        <span class="md-nav__icon md-icon"></span>
+      
+    </a>
+  
+
+      
+    </li>
+  
+
+    
+  </ul>
+</nav>
+                  </div>
+                </div>
+              </div>
+            
+            
+              
+                
+              
+              <div class="md-sidebar md-sidebar--secondary" data-md-component="sidebar" data-md-type="toc" >
+                <div class="md-sidebar__scrollwrap">
+                  <div class="md-sidebar__inner">
+                    
+
+<nav class="md-nav md-nav--secondary" aria-label="Inhoudsopgave">
+  
+  
+  
+  
+    <label class="md-nav__title" for="__toc">
+      <span class="md-nav__icon md-icon"></span>
+      Inhoudsopgave
+    </label>
+    <ul class="md-nav__list" data-md-component="toc" data-md-scrollfix>
+      
+        <li class="md-nav__item">
+  <a href="#vereiste" class="md-nav__link">
+    <span class="md-ellipsis">
+      
+        Vereiste
+      
+    </span>
+  </a>
+  
+</li>
+      
+        <li class="md-nav__item">
+  <a href="#toelichting" class="md-nav__link">
+    <span class="md-ellipsis">
+      
+        Toelichting
+      
+    </span>
+  </a>
+  
+    <nav class="md-nav" aria-label="Toelichting">
+      <ul class="md-nav__list">
+        
+          <li class="md-nav__item">
+  <a href="#testen-van-ai-systemen-met-een-hoog-risico-onder-reele-omstandigheden-buiten-ai-testomgevingen" class="md-nav__link">
+    <span class="md-ellipsis">
+      
+        Testen van AI-systemen met een hoog risico onder reële omstandigheden buiten AI-testomgevingen
+      
+    </span>
+  </a>
+  
+</li>
+        
+      </ul>
+    </nav>
+  
+</li>
+      
+        <li class="md-nav__item">
+  <a href="#bronnen" class="md-nav__link">
+    <span class="md-ellipsis">
+      
+        Bronnen
+      
+    </span>
+  </a>
+  
+</li>
+      
+        <li class="md-nav__item">
+  <a href="#wanneer-van-toepassing" class="md-nav__link">
+    <span class="md-ellipsis">
+      
+        Wanneer van toepassing?
+      
+    </span>
+  </a>
+  
+</li>
+      
+        <li class="md-nav__item">
+  <a href="#risico" class="md-nav__link">
+    <span class="md-ellipsis">
+      
+        Risico
+      
+    </span>
+  </a>
+  
+</li>
+      
+        <li class="md-nav__item">
+  <a href="#maatregelen" class="md-nav__link">
+    <span class="md-ellipsis">
+      
+        Maatregelen
+      
+    </span>
+  </a>
+  
+</li>
+      
+    </ul>
+  
+</nav>
+                  </div>
+                </div>
+              </div>
+            
+          
+          
+            <div class="md-content" data-md-component="content">
+              
+                
+
+  
+
+
+
+
+  <nav class="md-path" aria-label="Navigatie" >
+    <ol class="md-path__list">
+      
+      
+        
+  
+    
+    
+      <li class="md-path__item">
+        <a href="../../" class="md-path__link">
+          
+  <span class="md-ellipsis">
+    Voldoen aan wetten en regels
+  </span>
+
+        </a>
+      </li>
+    
+  
+
+      
+        
+  
+    
+    
+      <li class="md-path__item">
+        <a href="../" class="md-path__link">
+          
+  <span class="md-ellipsis">
+    Vereisten
+  </span>
+
+        </a>
+      </li>
+    
+  
+
+      
+    </ol>
+  </nav>
+
+              
+              <article class="md-content__inner md-typeset">
+                
+                  
+  
+
+
+
+  
+  
+
+
+  <h1>Hoog-risico-AI-systemen zijn getest.</h1>
+
+<p><span class="mdx-badge" data-md-color-accent="blue"><span class="mdx-badge__icon"><a href="" title="Vereiste ID"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M5.5 7A1.5 1.5 0 0 1 4 5.5 1.5 1.5 0 0 1 5.5 4 1.5 1.5 0 0 1 7 5.5 1.5 1.5 0 0 1 5.5 7m15.91 4.58-9-9C12.05 2.22 11.55 2 11 2H4c-1.11 0-2 .89-2 2v7c0 .55.22 1.05.59 1.41l8.99 9c.37.36.87.59 1.42.59s1.05-.23 1.41-.59l7-7c.37-.36.59-.86.59-1.41 0-.56-.23-1.06-.59-1.42"/></svg></span></a></span><span class="mdx-badge__text">aia-39</span></span><span class="mdx-badge" data-md-color-accent="indigo"><span class="mdx-badge__icon"><a href="../../../levenscyclus/" title="Levencyclus"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M2 12a9 9 0 0 0 9 9c2.39 0 4.68-.94 6.4-2.6l-1.5-1.5A6.7 6.7 0 0 1 11 19c-6.24 0-9.36-7.54-4.95-11.95S18 5.77 18 12h-3l4 4h.1l3.9-4h-3a9 9 0 0 0-18 0"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../levenscyclus/ontwerp/">Ontwerp</a></span></span><span class="mdx-badge" data-md-color-accent="indigo"><span class="mdx-badge__icon"><a href="../../../levenscyclus/" title="Levencyclus"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M2 12a9 9 0 0 0 9 9c2.39 0 4.68-.94 6.4-2.6l-1.5-1.5A6.7 6.7 0 0 1 11 19c-6.24 0-9.36-7.54-4.95-11.95S18 5.77 18 12h-3l4 4h.1l3.9-4h-3a9 9 0 0 0-18 0"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../levenscyclus/ontwikkelen/">Ontwikkelen</a></span></span><span class="mdx-badge" data-md-color-accent="indigo"><span class="mdx-badge__icon"><a href="../../../levenscyclus/" title="Levencyclus"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M2 12a9 9 0 0 0 9 9c2.39 0 4.68-.94 6.4-2.6l-1.5-1.5A6.7 6.7 0 0 1 11 19c-6.24 0-9.36-7.54-4.95-11.95S18 5.77 18 12h-3l4 4h.1l3.9-4h-3a9 9 0 0 0-18 0"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../levenscyclus/monitoring-en-beheer/">Monitoring en beheer</a></span></span><span class="mdx-badge" data-md-color-accent="indigo"><span class="mdx-badge__icon"><a href="../../../levenscyclus/" title="Levencyclus"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M2 12a9 9 0 0 0 9 9c2.39 0 4.68-.94 6.4-2.6l-1.5-1.5A6.7 6.7 0 0 1 11 19c-6.24 0-9.36-7.54-4.95-11.95S18 5.77 18 12h-3l4 4h.1l3.9-4h-3a9 9 0 0 0-18 0"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../levenscyclus/verificatie-en-validatie/">Verificatie en validatie</a></span></span><span class="mdx-badge" data-md-color-accent="deep-orange"><span class="mdx-badge__icon"><a href="../../../rollen/" title="Rollen"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M12 4a4 4 0 0 1 4 4 4 4 0 0 1-4 4 4 4 0 0 1-4-4 4 4 0 0 1 4-4m0 10c4.42 0 8 1.79 8 4v2H4v-2c0-2.21 3.58-4 8-4"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../rollen/projectleider/">Projectleider</a></span></span><span class="mdx-badge" data-md-color-accent="deep-orange"><span class="mdx-badge__icon"><a href="../../../rollen/" title="Rollen"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M12 4a4 4 0 0 1 4 4 4 4 0 0 1-4 4 4 4 0 0 1-4-4 4 4 0 0 1 4-4m0 10c4.42 0 8 1.79 8 4v2H4v-2c0-2.21 3.58-4 8-4"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../rollen/ontwikkelaar/">Ontwikkelaar</a></span></span><span class="mdx-badge" data-md-color-accent="teal"><span class="mdx-badge__icon"><a href="../../../onderwerpen/" title="Onderwerp"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M12 2a7 7 0 0 0-7 7c0 2.38 1.19 4.47 3 5.74V17a1 1 0 0 0 1 1h6a1 1 0 0 0 1-1v-2.26c1.81-1.27 3-3.36 3-5.74a7 7 0 0 0-7-7M9 21a1 1 0 0 0 1 1h4a1 1 0 0 0 1-1v-1H9z"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../onderwerpen/technische-robuustheid-en-veiligheid/">Technische robuustheid en veiligheid</a></span></span></p>
+<h2 id="vereiste">Vereiste</h2>
+<p>Hoog-risico-AI-systemen zijn getest.</p>
+<h2 id="toelichting">Toelichting</h2>
+<p>AI-systemen met een hoog risico worden getest met het oog op het vaststellen van passende en gerichte risicobeheersmaatregelen.
+De tests zorgen ervoor dat AI-systemen met een hoog risico consistent presteren ten aanzien van het doel ervan en in overeenstemming zijn met de geldende eisen.</p>
+<p>Het testen van AI-systemen met een hoog risico vindt, zoals passend, in de loop van het ontwikkelproces plaats en in ieder geval voordat het systeem in de handel wordt gebracht of in gebruik is gesteld. </p>
+<p>Er wordt getest aan de hand van vooraf vastgestelde beoordelingsmaatstaven en probabilistische drempels die passend zijn voor het beoogde doel van het AI-systeem met een hoog risico. De procedures voor testen zijn onderdeel van het <a href="../aia-11-systeem-voor-kwaliteitsbeheer/">kwaliteitsbeheer</a>. </p>
+<p>Bij het verwerken van persoonsgegevens voor het ontwikkelen, trainen en testen van een AI-systeem in een AI-testomgeving, wordt een volledige en gedetailleerde beschrijving van het testproces en de testresultaten onderdeel van de technische documentatie.</p>
+<h3 id="testen-van-ai-systemen-met-een-hoog-risico-onder-reele-omstandigheden-buiten-ai-testomgevingen">Testen van AI-systemen met een hoog risico onder reële omstandigheden buiten AI-testomgevingen</h3>
+<p>AI-systemen met een hoog risico kunnen onder reële omstandigheden buiten AI-testomgevingen voor regelgeving worden getest door aanbieders of potentiële aanbieders van in bijlage III vermelde AI-systemen met een hoog risico in overeenstemming met dit artikel en het in dit artikel bedoelde plan voor tests onder reële omstandigheden, onverminderd de verbodsbepalingen krachtens artikel 5 AI-Verordening.</p>
+<p>Aanbieders of potentiële aanbieders kunnen zelf of in samenwerking met een of meer gebruiksverantwoordelijken of potentiële gebruiksverantwoordelijken onder reële omstandigheden tests uitvoeren op in bijlage III bedoelde AI-systemen met een hoog risico op elk moment vóór het <abbr title="Het voor het eerst in de Unie op de markt aanbieden van een AI-systeem of een AI-model voor algemene doeleinden">in de handel brengen</abbr> of in gebruik nemen van het AI-systeem.</p>
+<p>Aanbieders of potentiële aanbieders mogen alleen <abbr title="het tijdelijk testen van een AI-systeem voor zijn beoogde doel onder reële omstandigheden buiten een laboratorium of anderszins gesimuleerde omgeving teneinde betrouwbare en robuuste gegevens te verkrijgen, en te beoordelen en te verifiëren of het AI-systeem overeenstemt met de voorschriften van de AI-verordening en het wordt niet aangemerkt als het in de handel brengen of in gebruik stellen van het AI-systeem in de zin van de AI-verordening, mits aan alle in artikel 57 of 60 vastgestelde voorwaarden is voldaan">testen onder reële omstandigheden</abbr> als is voldaan aan alle volgende voorwaarden:</p>
+<p>a) de <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> of potentiële <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> heeft een plan voor tests onder reële omstandigheden opgesteld en ingediend bij de <abbr title="de nationale autoriteit die de activiteiten verricht en maatregelen neemt als bedoeld in Verordening (EU) 2019/1020">markttoezichtautoriteit</abbr> in de lidstaat waar onder reële omstandigheden moet worden getest;</p>
+<p>b) de <abbr title="de nationale autoriteit die de activiteiten verricht en maatregelen neemt als bedoeld in Verordening (EU) 2019/1020">markttoezichtautoriteit</abbr> in de lidstaat waar onder reële omstandigheden moet worden getest, heeft het <abbr title="het tijdelijk testen van een AI-systeem voor zijn beoogde doel onder reële omstandigheden buiten een laboratorium of anderszins gesimuleerde omgeving teneinde betrouwbare en robuuste gegevens te verkrijgen, en te beoordelen en te verifiëren of het AI-systeem overeenstemt met de voorschriften van de AI-verordening en het wordt niet aangemerkt als het in de handel brengen of in gebruik stellen van het AI-systeem in de zin van de AI-verordening, mits aan alle in artikel 57 of 60 vastgestelde voorwaarden is voldaan">testen onder reële omstandigheden</abbr> en het plan voor tests onder reële omstandigheden goedgekeurd; indien de <abbr title="de nationale autoriteit die de activiteiten verricht en maatregelen neemt als bedoeld in Verordening (EU) 2019/1020">markttoezichtautoriteit</abbr> binnen dertig dagen geen antwoord heeft gegeven, worden het <abbr title="het tijdelijk testen van een AI-systeem voor zijn beoogde doel onder reële omstandigheden buiten een laboratorium of anderszins gesimuleerde omgeving teneinde betrouwbare en robuuste gegevens te verkrijgen, en te beoordelen en te verifiëren of het AI-systeem overeenstemt met de voorschriften van de AI-verordening en het wordt niet aangemerkt als het in de handel brengen of in gebruik stellen van het AI-systeem in de zin van de AI-verordening, mits aan alle in artikel 57 of 60 vastgestelde voorwaarden is voldaan">testen onder reële omstandigheden</abbr> en het plan voor tests onder reële omstandigheden geacht te zijn goedgekeurd; indien het nationale recht niet voorziet in een stilzwijgende goedkeuring, blijft het <abbr title="het tijdelijk testen van een AI-systeem voor zijn beoogde doel onder reële omstandigheden buiten een laboratorium of anderszins gesimuleerde omgeving teneinde betrouwbare en robuuste gegevens te verkrijgen, en te beoordelen en te verifiëren of het AI-systeem overeenstemt met de voorschriften van de AI-verordening en het wordt niet aangemerkt als het in de handel brengen of in gebruik stellen van het AI-systeem in de zin van de AI-verordening, mits aan alle in artikel 57 of 60 vastgestelde voorwaarden is voldaan">testen onder reële omstandigheden</abbr> onderworpen aan een toestemming;</p>
+<p>c) de <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> of potentiële <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr>, met uitzondering van aanbieders of potentiële aanbieders van in de punten 1, 6 en 7 van bijlage III bedoelde AI-systemen met een hoog risico op de gebieden rechtshandhaving, migratie, asiel en grenstoezichtsbeheer en AI-systemen met een hoog risico als bedoeld in punt 2 van bijlage III, heeft het <abbr title="het tijdelijk testen van een AI-systeem voor zijn beoogde doel onder reële omstandigheden buiten een laboratorium of anderszins gesimuleerde omgeving teneinde betrouwbare en robuuste gegevens te verkrijgen, en te beoordelen en te verifiëren of het AI-systeem overeenstemt met de voorschriften van de AI-verordening en het wordt niet aangemerkt als het in de handel brengen of in gebruik stellen van het AI-systeem in de zin van de AI-verordening, mits aan alle in artikel 57 of 60 vastgestelde voorwaarden is voldaan">testen onder reële omstandigheden</abbr> geregistreerd overeenkomstig artikel 71, lid 4, met een Uniebreed uniek identificatienummer en de in bijlage IX gespecificeerde informatie; de <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> of potentiële <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> van in de punten 1, 6 en 7 van bijlage III bedoelde AI-systemen met een hoog risico op de gebieden van rechtshandhaving, migratie, asiel en grenstoezichtsbeheer, heeft het <abbr title="het tijdelijk testen van een AI-systeem voor zijn beoogde doel onder reële omstandigheden buiten een laboratorium of anderszins gesimuleerde omgeving teneinde betrouwbare en robuuste gegevens te verkrijgen, en te beoordelen en te verifiëren of het AI-systeem overeenstemt met de voorschriften van de AI-verordening en het wordt niet aangemerkt als het in de handel brengen of in gebruik stellen van het AI-systeem in de zin van de AI-verordening, mits aan alle in artikel 57 of 60 vastgestelde voorwaarden is voldaan">testen onder reële omstandigheden</abbr> geregistreerd in het beveiligde niet-openbare gedeelte van de EU-databank overeenkomstig artikel 49, lid 4, punt d), met een Uniebreed uniek identificatienummer en de daarin gespecificeerde informatie; de <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> of potentiële <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> van in punt 2 van bijlage III bedoelde AI-systemen met een hoog risico heeft het <abbr title="het tijdelijk testen van een AI-systeem voor zijn beoogde doel onder reële omstandigheden buiten een laboratorium of anderszins gesimuleerde omgeving teneinde betrouwbare en robuuste gegevens te verkrijgen, en te beoordelen en te verifiëren of het AI-systeem overeenstemt met de voorschriften van de AI-verordening en het wordt niet aangemerkt als het in de handel brengen of in gebruik stellen van het AI-systeem in de zin van de AI-verordening, mits aan alle in artikel 57 of 60 vastgestelde voorwaarden is voldaan">testen onder reële omstandigheden</abbr> geregistreerd overeenkomstig artikel 49, lid 5;</p>
+<p>d) de <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> of potentiële <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> die onder reële omstandigheden test, is in de Unie gevestigd of heeft een in de Unie gevestigde wettelijke vertegenwoordiger aangewezen;</p>
+<p>e) gegevens die zijn verzameld en verwerkt met het oog op het <abbr title="het tijdelijk testen van een AI-systeem voor zijn beoogde doel onder reële omstandigheden buiten een laboratorium of anderszins gesimuleerde omgeving teneinde betrouwbare en robuuste gegevens te verkrijgen, en te beoordelen en te verifiëren of het AI-systeem overeenstemt met de voorschriften van de AI-verordening en het wordt niet aangemerkt als het in de handel brengen of in gebruik stellen van het AI-systeem in de zin van de AI-verordening, mits aan alle in artikel 57 of 60 vastgestelde voorwaarden is voldaan">testen onder reële omstandigheden</abbr> mogen alleen aan derde landen worden doorgegeven mits er passende en toepasselijke waarborgen uit hoofde van het Unierecht worden toegepast;</p>
+<p>f) het <abbr title="het tijdelijk testen van een AI-systeem voor zijn beoogde doel onder reële omstandigheden buiten een laboratorium of anderszins gesimuleerde omgeving teneinde betrouwbare en robuuste gegevens te verkrijgen, en te beoordelen en te verifiëren of het AI-systeem overeenstemt met de voorschriften van de AI-verordening en het wordt niet aangemerkt als het in de handel brengen of in gebruik stellen van het AI-systeem in de zin van de AI-verordening, mits aan alle in artikel 57 of 60 vastgestelde voorwaarden is voldaan">testen onder reële omstandigheden</abbr> duurt niet langer dan nodig is om de doelstellingen ervan te verwezenlijken en in geen geval langer dan zes maanden, met een mogelijke verlenging van nog eens zes maanden indien de <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> of potentiële <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> de <abbr title="de nationale autoriteit die de activiteiten verricht en maatregelen neemt als bedoeld in Verordening (EU) 2019/1020">markttoezichtautoriteit</abbr> daar vooraf van in kennis stelt, met een uitleg waarom een dergelijke verlenging noodzakelijk is;</p>
+<p>g) proefpersonen die onder reële omstandigheden worden getest en die tot kwetsbare groepen behoren vanwege hun leeftijd of handicap, worden naar behoren beschermd;</p>
+<p>h) indien een <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> of potentiële <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> het <abbr title="het tijdelijk testen van een AI-systeem voor zijn beoogde doel onder reële omstandigheden buiten een laboratorium of anderszins gesimuleerde omgeving teneinde betrouwbare en robuuste gegevens te verkrijgen, en te beoordelen en te verifiëren of het AI-systeem overeenstemt met de voorschriften van de AI-verordening en het wordt niet aangemerkt als het in de handel brengen of in gebruik stellen van het AI-systeem in de zin van de AI-verordening, mits aan alle in artikel 57 of 60 vastgestelde voorwaarden is voldaan">testen onder reële omstandigheden</abbr> organiseert in samenwerking met een of meer gebruiksverantwoordelijken of potentiële gebruiksverantwoordelijken, worden zij geïnformeerd over alle aspecten van het testen die relevant zijn voor hun beslissing om deel te nemen, en krijgen zij de relevante <abbr title="de door de aanbieder verstrekte informatie om de gebruiksverantwoordelijke te informeren over met name het beoogde doel en juiste gebruik van een AI-systeem">gebruiksinstructies</abbr> van het AI-systeem als bedoeld in artikel 13; de <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> of potentiële <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> en de <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem onder eigen verantwoordelijkheid gebruikt, tenzij het AI-systeem wordt gebruikt in het kader van een persoonlijke niet- beroepsactiviteit.">gebruiksverantwoordelijke</abbr> of potentiële <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem onder eigen verantwoordelijkheid gebruikt, tenzij het AI-systeem wordt gebruikt in het kader van een persoonlijke niet- beroepsactiviteit.">gebruiksverantwoordelijke</abbr> sluiten een overeenkomst waarin hun taken en verantwoordelijkheden worden gespecificeerd teneinde te waarborgen dat de bepalingen voor het <abbr title="het tijdelijk testen van een AI-systeem voor zijn beoogde doel onder reële omstandigheden buiten een laboratorium of anderszins gesimuleerde omgeving teneinde betrouwbare en robuuste gegevens te verkrijgen, en te beoordelen en te verifiëren of het AI-systeem overeenstemt met de voorschriften van de AI-verordening en het wordt niet aangemerkt als het in de handel brengen of in gebruik stellen van het AI-systeem in de zin van de AI-verordening, mits aan alle in artikel 57 of 60 vastgestelde voorwaarden is voldaan">testen onder reële omstandigheden</abbr> uit hoofde van deze verordening en ander toepasselijk Unie- en nationaal recht worden nageleefd;</p>
+<p>i) de proefpersonen die onder reële omstandigheden worden getest, hebben <abbr title="de vrijelijk gegeven, specifieke, ondubbelzinnige en vrijwillige uiting door een proefpersoon van zijn of haar bereidheid deel te nemen aan een bepaalde test onder reële omstandigheden, na geïnformeerd te zijn over alle aspecten van de test die van belang zijn voor zijn of haar beslissing om deel te nemen">geïnformeerde toestemming</abbr> gegeven overeenkomstig artikel 61, of, in het geval van rechtshandhaving, indien het vragen om <abbr title="de vrijelijk gegeven, specifieke, ondubbelzinnige en vrijwillige uiting door een proefpersoon van zijn of haar bereidheid deel te nemen aan een bepaalde test onder reële omstandigheden, na geïnformeerd te zijn over alle aspecten van de test die van belang zijn voor zijn of haar beslissing om deel te nemen">geïnformeerde toestemming</abbr> het testen van het AI-systeem onder reële omstandigheden onmogelijk zou maken, de test zelf en het resultaat van de test onder reële omstandigheden hebben geen negatieve gevolgen voor de proefpersonen en hun persoonsgegevens worden na de uitvoering van test gewist;</p>
+<p>j) op het <abbr title="het tijdelijk testen van een AI-systeem voor zijn beoogde doel onder reële omstandigheden buiten een laboratorium of anderszins gesimuleerde omgeving teneinde betrouwbare en robuuste gegevens te verkrijgen, en te beoordelen en te verifiëren of het AI-systeem overeenstemt met de voorschriften van de AI-verordening en het wordt niet aangemerkt als het in de handel brengen of in gebruik stellen van het AI-systeem in de zin van de AI-verordening, mits aan alle in artikel 57 of 60 vastgestelde voorwaarden is voldaan">testen onder reële omstandigheden</abbr> wordt daadwerkelijk toezicht gehouden door de <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr> of potentiële <abbr title="Een natuurlijke of rechtspersoon, overheidsinstantie, agentschap of ander orgaan die/dat een AI-systeem of een AI-model voor algemene doeleinden ontwikkelt of laat ontwikkelen en dat systeem of model in de handel brengt of het AI-systeem in gebruik stelt onder de eigen naam of merk, al dan niet tegen betaling.">aanbieder</abbr>, alsook door gebruiksverantwoordelijken of potentiële gebruiksverantwoordelijken via personen die voldoende zijn gekwalificeerd op het relevante gebied en beschikken over de nodige capaciteiten, opleiding en bevoegdheden om hun taken uit te voeren;</p>
+<p>k) de voorspellingen, aanbevelingen of beslissingen van het AI-systeem kunnen daadwerkelijk worden teruggedraaid en genegeerd.</p>
+<h2 id="bronnen">Bronnen</h2>
+<p><a href="https://eur-lex.europa.eu/legal-content/NL/TXT/HTML/?uri=OJ:L_202401689#d1e3241-1-1">Artikel 9(6 en 8) Verordening Artificiële Intelligentie</a></p>
+<p><a href="https://eur-lex.europa.eu/legal-content/NL/TXT/HTML/?uri=OJ:L_202401689#d1e3241-1-1">Artikel 17(1 sub d) Verordening Artificiële Intelligentie</a></p>
+<p><a href="https://eur-lex.europa.eu/legal-content/NL/TXT/HTML/?uri=OJ:L_202401689#d1e3241-1-1">Artikel 59(1 sub i) Verordening Artificiële Intelligentie</a></p>
+<p><a href="https://eur-lex.europa.eu/legal-content/NL/TXT/HTML/?uri=OJ:L_202401689#d1e3241-1-1">Artikel 60 Verordening Artificiële Intelligentie</a></p>
+<p><a href="https://eur-lex.europa.eu/legal-content/NL/TXT/HTML/?uri=OJ:L_202401689#d1e3906-1-1">Overweging 138 - 141 Verordening Artificiële Intelligentie</a></p>
+<h2 id="wanneer-van-toepassing">Wanneer van toepassing?</h2>
+<p><span class="mdx-badge" data-md-color-accent="blue"><span class="mdx-badge__icon"><a href="../../../overhetalgoritmekader/soorten-algoritmes/" title="Soort toepassing"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M19.5 17c-.13 0-.26 0-.39.04l-1.61-3.25a2.5 2.5 0 0 0-1.75-4.29c-.13 0-.25 0-.39.04l-1.63-3.25c.48-.45.77-1.08.77-1.79a2.5 2.5 0 0 0-5 0c0 .71.29 1.34.76 1.79L8.64 9.54c-.14-.04-.26-.04-.39-.04a2.5 2.5 0 0 0-1.75 4.29l-1.61 3.25C4.76 17 4.63 17 4.5 17a2.5 2.5 0 0 0 0 5A2.5 2.5 0 0 0 7 19.5c0-.7-.29-1.34-.76-1.79l1.62-3.25c.14.04.26.04.39.04s.25 0 .39-.04l1.63 3.25c-.47.45-.77 1.09-.77 1.79a2.5 2.5 0 0 0 5 0A2.5 2.5 0 0 0 12 17c-.13 0-.26 0-.39.04L10 13.79c.46-.45.75-1.08.75-1.79s-.29-1.34-.75-1.79l1.61-3.25c.13.04.26.04.39.04s.26 0 .39-.04L14 10.21c-.45.45-.75 1.09-.75 1.79a2.5 2.5 0 0 0 2.5 2.5c.13 0 .25 0 .39-.04l1.63 3.25c-.47.45-.77 1.09-.77 1.79a2.5 2.5 0 0 0 5 0 2.5 2.5 0 0 0-2.5-2.5"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../overhetalgoritmekader/soorten-algoritmes/">AI-systeem</a></span></span><span class="mdx-badge" data-md-color-accent="blue"><span class="mdx-badge__icon"><a href="../../../overhetalgoritmekader/soorten-algoritmes/" title="Soort toepassing"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M19.5 17c-.13 0-.26 0-.39.04l-1.61-3.25a2.5 2.5 0 0 0-1.75-4.29c-.13 0-.25 0-.39.04l-1.63-3.25c.48-.45.77-1.08.77-1.79a2.5 2.5 0 0 0-5 0c0 .71.29 1.34.76 1.79L8.64 9.54c-.14-.04-.26-.04-.39-.04a2.5 2.5 0 0 0-1.75 4.29l-1.61 3.25C4.76 17 4.63 17 4.5 17a2.5 2.5 0 0 0 0 5A2.5 2.5 0 0 0 7 19.5c0-.7-.29-1.34-.76-1.79l1.62-3.25c.14.04.26.04.39.04s.25 0 .39-.04l1.63 3.25c-.47.45-.77 1.09-.77 1.79a2.5 2.5 0 0 0 5 0A2.5 2.5 0 0 0 12 17c-.13 0-.26 0-.39.04L10 13.79c.46-.45.75-1.08.75-1.79s-.29-1.34-.75-1.79l1.61-3.25c.13.04.26.04.39.04s.26 0 .39-.04L14 10.21c-.45.45-.75 1.09-.75 1.79a2.5 2.5 0 0 0 2.5 2.5c.13 0 .25 0 .39-.04l1.63 3.25c-.47.45-.77 1.09-.77 1.79a2.5 2.5 0 0 0 5 0 2.5 2.5 0 0 0-2.5-2.5"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../overhetalgoritmekader/soorten-algoritmes/"><abbr title="Een AI-systeem dat is gebaseerd op een AI- model voor algemene doeleinden en dat verschillende doeleinden kan dienen, zowel voor direct gebruik als voor integratie in andere AI-systemen">AI-systeem voor algemene doeleinden</abbr></a></span></span><span class="mdx-badge" data-md-color-accent="blue"><span class="mdx-badge__icon"><a href="../../../overhetalgoritmekader/soorten-algoritmes/" title="Rol AI-verordening"><span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M11 9c0 1.66-1.34 3-3 3s-3-1.34-3-3 1.34-3 3-3 3 1.34 3 3m3 11H2v-2c0-2.21 2.69-4 6-4s6 1.79 6 4m8-6v2h-9v-2m9-4v2h-9V8m9-4v2h-9V4Z"/></svg></span></a></span><span class="mdx-badge__text"><a href="../../../overhetalgoritmekader/soorten-algoritmes/">Aanbieder</a></span></span></p>
+<h2 id="risico">Risico</h2>
+<p>Zonder het testen van een AI-systeem, ontstaat het risico dat het AI-systeem inconsistent gaat presteren ten aanzien van het doel. </p>
+<h2 id="maatregelen">Maatregelen</h2>
+<p>&lt;!-- list_maatregelen vereiste/aia-39-testen no-search no-onderwerp no-rol no-levenscyclus --</p>
+
+
+
+
+
+
+
+  
+    
+  
+  
+    
+  
+
+
+  <aside class="md-source-file">
+    
+      
+  <span class="md-source-file__fact">
+    <span class="md-icon" title="Laatst geüpdatet">
+      <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M21 13.1c-.1 0-.3.1-.4.2l-1 1 2.1 2.1 1-1c.2-.2.2-.6 0-.8l-1.3-1.3c-.1-.1-.2-.2-.4-.2m-1.9 1.8-6.1 6V23h2.1l6.1-6.1zM12.5 7v5.2l4 2.4-1 1L11 13V7zM11 21.9c-5.1-.5-9-4.8-9-9.9C2 6.5 6.5 2 12 2c5.3 0 9.6 4.1 10 9.3-.3-.1-.6-.2-1-.2s-.7.1-1 .2C19.6 7.2 16.2 4 12 4c-4.4 0-8 3.6-8 8 0 4.1 3.1 7.5 7.1 7.9l-.1.2z"/></svg>
+    </span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
+  </span>
+
+    
+    
+      
+  <span class="md-source-file__fact">
+    <span class="md-icon" title="Gecreëerd">
+      <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M14.47 15.08 11 13V7h1.5v5.25l3.08 1.83c-.41.28-.79.62-1.11 1m-1.39 4.84c-.36.05-.71.08-1.08.08-4.42 0-8-3.58-8-8s3.58-8 8-8 8 3.58 8 8c0 .37-.03.72-.08 1.08.69.1 1.33.32 1.92.64.1-.56.16-1.13.16-1.72 0-5.5-4.5-10-10-10S2 6.5 2 12s4.47 10 10 10c.59 0 1.16-.06 1.72-.16-.32-.59-.54-1.23-.64-1.92M18 15v3h-3v2h3v3h2v-3h3v-2h-3v-3z"/></svg>
+    </span>
+    <span class="git-revision-date-localized-plugin git-revision-date-localized-plugin-date">17 december 2024</span>
+  </span>
+
+    
+    
+    
+  </aside>
+
+
+
+  
+
+
+
+                
+              </article>
+            </div>
+          
+          
+  <script>var tabs=__md_get("__tabs");if(Array.isArray(tabs))e:for(var set of document.querySelectorAll(".tabbed-set")){var labels=set.querySelector(".tabbed-labels");for(var tab of tabs)for(var label of labels.getElementsByTagName("label"))if(label.innerText.trim()===tab){var input=document.getElementById(label.htmlFor);input.checked=!0;continue e}}</script>
+
+<script>var target=document.getElementById(location.hash.slice(1));target&&target.name&&(target.checked=target.name.startsWith("__tabbed_"))</script>
+        </div>
+        
+          <button type="button" class="md-top md-icon" data-md-component="top" hidden>
+  
+  <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M13 20h-2V8l-5.5 5.5-1.42-1.42L12 4.16l7.92 7.92-1.42 1.42L13 8z"/></svg>
+  Terug naar boven
+</button>
+        
+      </main>
+      
+        <footer class="md-footer">
+    <div class="md-footer__inner">
+      <!-- Left Section: Notice Text -->
+      <div class="md-footer__notice">
+        <p>Let op: deze website is in ontwikkeling. De informatie verandert vaak. Wil je <a href="/Algoritmekader/overhetalgoritmekader/CONTRIBUTING/">meehelpen?</a></p>
+      </div>
+  
+      <!-- Right Section: Links in Columns -->
+      <div class="md-footer__links">
+        <div class="md-footer__column">
+          <a href="/Algoritmekader/overhetalgoritmekader/">Over het Algoritmekader</a>
+          <a href="/Algoritmekader/overhetalgoritmekader/CONTRIBUTING/">Meedoen</a>
+          <a href="#">Contact</a>
+          <a href="#">Privacy</a>
+        </div>
+        <div class="md-footer__column">
+          <a href="https://overheid.nl/">Overheid.nl</a>
+          <a href="https://www.rijksoverheid.nl/">Rijksoverheid.nl</a>
+          <a href="https://www.digitaleoverheid.nl/">Digitale Overheid</a>
+          <a href="https://data.overheid.nl/">Data.overheid.nl</a>
+          <a href="https://algoritmes.pleio.nl/">Algoritmes.pleio.nl</a>
+        </div>
+      </div>
+    </div>
+  </footer>
+      
+    </div>
+    <div class="md-dialog" data-md-component="dialog">
+      <div class="md-dialog__inner md-typeset"></div>
+    </div>
+    
+    
+    <script id="__config" type="application/json">{"base": "../../..", "features": ["navigation.indexes", "navigation.tabs", "navigation.tabs.sticky", "navigation.top", "navigation.tracking", "navigation.instant", "navigation.footer", "navigation.prune", "navigation.path", "search.highlight", "search.suggest", "content.tooltips", "content.tabs.link"], "search": "../../../assets/javascripts/workers/search.c7c1ca2c.min.js", "translations": {"clipboard.copied": "Gekopieerd naar klembord", "clipboard.copy": "Kopi\u00ebren naar klembord", "search.result.more.one": "1 extra overeenkomst op deze pagina", "search.result.more.other": "# extra overeenkomsten op deze pagina", "search.result.none": "Geen overeenkomende documenten", "search.result.one": "1 overeenkomende document", "search.result.other": "# overeenkomende documenten", "search.result.placeholder": "Typ om te beginnen met zoeken", "search.result.term.missing": "Ontbreekt", "select.version": "Selecteer versie"}}</script>
+    
+    
+      <script src="../../../assets/javascripts/bundle.203fd0bc.min.js"></script>
+      
+        <script src="https://code.jquery.com/jquery-3.6.0.min.js"></script>
+      
+        <script src="https://cdn.jsdelivr.net/npm/choices.js/public/assets/scripts/choices.min.js"></script>
+      
+        <script src="https://unpkg.com/tablesort@5.3.0/dist/tablesort.min.js"></script>
+      
+        <script src="../../../javascripts/tablesort.js"></script>
+      
+        <script src="../../../javascripts/filtering.js"></script>
+      
+        <script src="https://unpkg.com/mermaid@10.9.1/dist/mermaid.min.js"></script>
+      
+    
+  <script id="init-glightbox">const lightbox = GLightbox({"touchNavigation": true, "loop": false, "zoomable": true, "draggable": true, "openEffect": "zoom", "closeEffect": "zoom", "slideEffect": "slide"});
+document$.subscribe(() => { lightbox.reload() });
+</script></body>
+</html>
\ No newline at end of file
diff --git a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html
index 28d63e6707..fa4a79572d 100644
--- a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html
+++ b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html
@@ -13,7 +13,7 @@
         <link rel="canonical" href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/">
       
       
-        <link rel="prev" href="../aia-37-recht-klacht-indienen-bij-ai-bureau/">
+        <link rel="prev" href="../aia-39-testen/">
       
       
         <link rel="next" href="../aut-01-auteursrechten/">
diff --git a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/index.html b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/index.html
index 773a52a974..b624913465 100644
--- a/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/index.html
+++ b/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/index.html
@@ -1050,7 +1050,7 @@ <h3 id="voorbeeld">Voorbeeld</h3>
 </blockquote>
 <p>Deze vereiste geldt alleen voor impactvolle algoritmes en hoog-risico-AI-systemen. Een niet-impactvolle rekenregel hoef je niet te registreren.</p>
 <h2 id="overzicht-vereisten">Overzicht vereisten</h2>
-<div class="filter-container"><div class="filter-item filter-item--search"><label for="filterInput">Zoeken</label><input type="text" id="filterInput" class="filter-item__input" onkeyup="filterTable()" placeholder="Zoek op vereisten"></div><div class="filter-item filter-item--roles"><label for="filterSelect">Rollen</label><select id="filterSelect" class="js-example-basic-multiple filter-item__select" name="states[]" multiple="multiple" data-placeholder="Selecteer rollen"><option value="beleid-en-advies">beleid-en-advies</option><option value="jurist">jurist</option><option value="ontwikkelaar">ontwikkelaar</option><option value="projectleider">projectleider</option></select></div><div class="filter-item filter-item--levenscyclus"><label for="filterLevenscyclusSelect">Levenscyclus</label><select id="filterLevenscyclusSelect" class="js-example-basic-multiple filter-item__select" name="states[]" multiple="multiple" data-placeholder="Selecteer fases"><option value="dataverkenning-en-datapreparatie">dataverkenning-en-datapreparatie</option><option value="implementatie">implementatie</option><option value="monitoring-en-beheer">monitoring-en-beheer</option><option value="ontwerp">ontwerp</option><option value="ontwikkelen">ontwikkelen</option><option value="organisatieverantwoordelijkheden">organisatieverantwoordelijkheden</option><option value="probleemanalyse">probleemanalyse</option><option value="uitfaseren">uitfaseren</option><option value="verificatie-en-validatie">verificatie-en-validatie</option></select></div><div class="filter-item filter-item--onderwerp"><label for="filterOnderwerpSelect">Onderwerpen</label><select id="filterOnderwerpSelect" class="js-example-basic-multiple filter-item__select" name="subjects[]" multiple="multiple" data-placeholder="Selecteer onderwerpen"><option value="bias-en-non-discriminatie">bias-en-non-discriminatie</option><option value="data">data</option><option value="fundamentele-rechten">fundamentele-rechten</option><option value="governance">governance</option><option value="menselijke-controle">menselijke-controle</option><option value="privacy-en-gegevensbescherming">privacy-en-gegevensbescherming</option><option value="technische-robuustheid-en-veiligheid">technische-robuustheid-en-veiligheid</option><option value="transparantie">transparantie</option></select></div></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th><th role="columnheader">Rollen</th><th role="columnheader">Levenscyclus</th><th role="columnheader">Onderwerpen</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/index.html">aia-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/index.html">Personeel en gebruikers zijn voldoende AI-geletterd</a></td><td>
+<div class="filter-container"><div class="filter-item filter-item--search"><label for="filterInput">Zoeken</label><input type="text" id="filterInput" class="filter-item__input" onkeyup="filterTable()" placeholder="Zoek op vereisten"></div><div class="filter-item filter-item--roles"><label for="filterSelect">Rollen</label><select id="filterSelect" class="js-example-basic-multiple filter-item__select" name="states[]" multiple="multiple" data-placeholder="Selecteer rollen"><option value="beleid-en-advies">beleid-en-advies</option><option value="jurist">jurist</option><option value="ontwikkelaar">ontwikkelaar</option><option value="projectleider">projectleider</option></select></div><div class="filter-item filter-item--levenscyclus"><label for="filterLevenscyclusSelect">Levenscyclus</label><select id="filterLevenscyclusSelect" class="js-example-basic-multiple filter-item__select" name="states[]" multiple="multiple" data-placeholder="Selecteer fases"><option value="dataverkenning-en-datapreparatie">dataverkenning-en-datapreparatie</option><option value="implementatie">implementatie</option><option value="monitoring-en-beheer">monitoring-en-beheer</option><option value="ontwerp">ontwerp</option><option value="ontwikkelen">ontwikkelen</option><option value="organisatieverantwoordelijkheden">organisatieverantwoordelijkheden</option><option value="probleemanalyse">probleemanalyse</option><option value="uitfaseren">uitfaseren</option><option value="verificatie-en-validatie">verificatie-en-validatie</option></select></div><div class="filter-item filter-item--onderwerp"><label for="filterOnderwerpSelect">Onderwerpen</label><select id="filterOnderwerpSelect" class="js-example-basic-multiple filter-item__select" name="subjects[]" multiple="multiple" data-placeholder="Selecteer onderwerpen"><option value="bias-en-non-discriminatie">bias-en-non-discriminatie</option><option value="data">data</option><option value="fundamentele-rechten">fundamentele-rechten</option><option value="governance">governance</option><option value="menselijke-controle">menselijke-controle</option><option value="privacy-en-gegevensbescherming">privacy-en-gegevensbescherming</option><option value="technische-robuustheid-en-veiligheid">technische-robuustheid-en-veiligheid</option><option value="transparantie">transparantie</option></select></div></div><table id='myTable'><thead><tr><th role="columnheader">id</th><th role="columnheader">Vereisten</th><th role="columnheader">Rollen</th><th role="columnheader">Levenscyclus</th><th role="columnheader">Onderwerpen</th></tr></thead><tbody><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/index.html">aia-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-01-ai-geletterdheid/index.html">Personeel en gebruikers zijn voldoende AI-geletterd.</a></td><td>
         <a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/rollen/projectleider" class="mdx-badge" data-md-color-accent="deep-orange">
             <span class="mdx-badge__icon"> 
                 <span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M12 4a4 4 0 0 1 4 4 4 4 0 0 1-4 4 4 4 0 0 1-4-4 4 4 0 0 1 4-4m0 10c4.42 0 8 1.79 8 4v2H4v-2c0-2.21 3.58-4 8-4Z"></path></svg></span>
@@ -1122,7 +1122,7 @@ <h2 id="overzicht-vereisten">Overzicht vereisten</h2>
                 governance
             </span>
         </a>
-    </td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/index.html">aia-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/index.html">Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd</a></td><td>
+    </td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/index.html">aia-02</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-02-documentatie-beoordeling-niet-hoog-risico-ai/index.html">Beoordeling als niet 'hoog-risico-AI-systeem' is gedocumenteerd.</a></td><td>
         <a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/rollen/projectleider" class="mdx-badge" data-md-color-accent="deep-orange">
             <span class="mdx-badge__icon"> 
                 <span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M12 4a4 4 0 0 1 4 4 4 4 0 0 1-4 4 4 4 0 0 1-4-4 4 4 0 0 1 4-4m0 10c4.42 0 8 1.79 8 4v2H4v-2c0-2.21 3.58-4 8-4Z"></path></svg></span>
@@ -1185,7 +1185,7 @@ <h2 id="overzicht-vereisten">Overzicht vereisten</h2>
                 governance
             </span>
         </a>
-    </td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">aia-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen</a></td><td>
+    </td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">aia-04</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-04-risicobeoordeling-voor-jongeren-en-kwetsbaren/index.html">Hoog-risico-AI-systemen vormen geen risico voor kwetsbare groepen zoals kinderen.</a></td><td>
         <a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/rollen/projectleider" class="mdx-badge" data-md-color-accent="deep-orange">
             <span class="mdx-badge__icon"> 
                 <span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M12 4a4 4 0 0 1 4 4 4 4 0 0 1-4 4 4 4 0 0 1-4-4 4 4 0 0 1 4-4m0 10c4.42 0 8 1.79 8 4v2H4v-2c0-2.21 3.58-4 8-4Z"></path></svg></span>
@@ -2688,6 +2688,69 @@ <h2 id="overzicht-vereisten">Overzicht vereisten</h2>
                 fundamentele-rechten
             </span>
         </a>
+    </td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/index.html">aia-39</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/aia-39-testen/index.html">Hoog-risico-AI-systemen zijn getest.</a></td><td>
+        <a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/rollen/projectleider" class="mdx-badge" data-md-color-accent="deep-orange">
+            <span class="mdx-badge__icon"> 
+                <span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M12 4a4 4 0 0 1 4 4 4 4 0 0 1-4 4 4 4 0 0 1-4-4 4 4 0 0 1 4-4m0 10c4.42 0 8 1.79 8 4v2H4v-2c0-2.21 3.58-4 8-4Z"></path></svg></span>
+            </span>
+            <span class="mdx-badge__text">
+                projectleider
+            </span>
+        </a>
+    
+        <a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/rollen/ontwikkelaar" class="mdx-badge" data-md-color-accent="deep-orange">
+            <span class="mdx-badge__icon"> 
+                <span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M12 4a4 4 0 0 1 4 4 4 4 0 0 1-4 4 4 4 0 0 1-4-4 4 4 0 0 1 4-4m0 10c4.42 0 8 1.79 8 4v2H4v-2c0-2.21 3.58-4 8-4Z"></path></svg></span>
+            </span>
+            <span class="mdx-badge__text">
+                ontwikkelaar
+            </span>
+        </a>
+    </td><td>
+        <a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/levenscyclus/ontwerp" class="mdx-badge" data-md-color-accent="indigo">
+            <span class="mdx-badge__icon"> 
+                <span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M2 12a9 9 0 0 0 9 9c2.39 0 4.68-.94 6.4-2.6l-1.5-1.5A6.706 6.706 0 0 1 11 19c-6.24 0-9.36-7.54-4.95-11.95C10.46 2.64 18 5.77 18 12h-3l4 4h.1l3.9-4h-3a9 9 0 0 0-18 0Z"></path></svg></span>
+            </span>
+            <span class="mdx-badge__text">
+                ontwerp
+            </span>
+        </a>
+    
+        <a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/levenscyclus/ontwikkelen" class="mdx-badge" data-md-color-accent="indigo">
+            <span class="mdx-badge__icon"> 
+                <span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M2 12a9 9 0 0 0 9 9c2.39 0 4.68-.94 6.4-2.6l-1.5-1.5A6.706 6.706 0 0 1 11 19c-6.24 0-9.36-7.54-4.95-11.95C10.46 2.64 18 5.77 18 12h-3l4 4h.1l3.9-4h-3a9 9 0 0 0-18 0Z"></path></svg></span>
+            </span>
+            <span class="mdx-badge__text">
+                ontwikkelen
+            </span>
+        </a>
+    
+        <a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/levenscyclus/monitoring-en-beheer" class="mdx-badge" data-md-color-accent="indigo">
+            <span class="mdx-badge__icon"> 
+                <span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M2 12a9 9 0 0 0 9 9c2.39 0 4.68-.94 6.4-2.6l-1.5-1.5A6.706 6.706 0 0 1 11 19c-6.24 0-9.36-7.54-4.95-11.95C10.46 2.64 18 5.77 18 12h-3l4 4h.1l3.9-4h-3a9 9 0 0 0-18 0Z"></path></svg></span>
+            </span>
+            <span class="mdx-badge__text">
+                monitoring-en-beheer
+            </span>
+        </a>
+    
+        <a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/levenscyclus/verificatie-en-validatie" class="mdx-badge" data-md-color-accent="indigo">
+            <span class="mdx-badge__icon"> 
+                <span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M2 12a9 9 0 0 0 9 9c2.39 0 4.68-.94 6.4-2.6l-1.5-1.5A6.706 6.706 0 0 1 11 19c-6.24 0-9.36-7.54-4.95-11.95C10.46 2.64 18 5.77 18 12h-3l4 4h.1l3.9-4h-3a9 9 0 0 0-18 0Z"></path></svg></span>
+            </span>
+            <span class="mdx-badge__text">
+                verificatie-en-validatie
+            </span>
+        </a>
+    </td><td>
+        <a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/onderwerpen/technische-robuustheid-en-veiligheid" class="mdx-badge" data-md-color-accent="teal">
+            <span class="mdx-badge__icon"> 
+                <span class="twemoji"><svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"><path d="M12 2a7 7 0 0 0-7 7c0 2.38 1.19 4.47 3 5.74V17a1 1 0 0 0 1 1h6a1 1 0 0 0 1-1v-2.26c1.81-1.27 3-3.36 3-5.74a7 7 0 0 0-7-7M9 21a1 1 0 0 0 1 1h4a1 1 0 0 0 1-1v-1H9v1Z"></path></svg></span>
+            </span>
+            <span class="mdx-badge__text">
+                technische-robuustheid-en-veiligheid
+            </span>
+        </a>
     </td></tr><tr><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html">arc-01</a></td><td><a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/voldoen-aan-wetten-en-regels/vereisten/arc-01-archiefwet/index.html">Informatie over algoritmes wordt gedocumenteerd volgens de Archiefwet</a></td><td>
         <a href="https://minbzk.github.io/Algoritmekader/pr-preview/pr-480/rollen/projectleider" class="mdx-badge" data-md-color-accent="deep-orange">
             <span class="mdx-badge__icon">