DiDo

Ministearje fan Ynlânske Saken en Keninkryksrelaasjes

(Ynterne) ark brûkt foar it ferwurkjen fan gegevens út DGDOO-beliedsynformaasje.

Lêst feroare op 19 juny 2025 om 12:41 | Publikaasjestandaard 1.0

• Publicatiecategorie: Oare algoritmes
• Impacttoetsen: Fjild net ynfierd.
• Status: Yn gebrûk

Algemene ynformaasje

Tema

Organisaasje en bedriuwsfiering

Begjindatum

2024-03

Einddatum

2024-10

Kontaktgegevens

[e-mail]

Link nei publykspagina

https://github.com/MinBZK/DiDo

Ferantwurde gebrûk

Doel en impact

DiDo (Data in Data out) giet oer it fluch en automatisearre ynlêzen fan tabellen fan leveransiers yn 'e Operational Data Layer (ODL) fan in Postgres-database. De ODL hat as doel in unifoarme en betroubere opslach te organisearjen fan 'e gegevens dy't troch gegevensleveransiers levere wurde. De leveransier leveret ien of faker tabellen yn .csv-formaat (skieden troch puntkomma's). Dizze tabellen wurde ynlêzen yn Postgres op basis fan in konfiguraasjebestân. Der wurdt ek dokumintaasje generearre dy't opnommen wurde kin yn 'e projektwiki.

Afwagings

DiDo set gegevens yn in database en kontrolearret it op flaters. Earst wurdt in beskriuwing fan 'e gegevens brûkt om automatysk de tabellen yn Postgres en beskriuwingen foar de wiki te generearjen. Dêrnei kinne de gegevens oanlevere wurde, periodyk as it nedich is. Dit ûntlêstet de brûker safolle mooglik, en is yn dit gefal in effisjinsjeferheging foar de meiwurkers fan 'e ôfdieling Beleidsynformaasje.

Minskele tuskenkomst

DiDo wurdt mei de hân konfigurearre foar nije ynkommende datastreamen, en de útfier kin maklik mei de hân oanpast wurde.

Risikobehear

Risikomanagement falt ûnder de standert Ferklearring Ferantwurdlike Disclosure fan it Ministearje fan Binnenlânske Saken en Keninkryksrelaasjes, dy't te finen is op https://github.com/MinBZK/DiDo/security.

Taljochting op impacttoetsen

DiDo is in yntern ûntwikkele ark om bepaalde gegevens fan eksterne leveransiers yn te lêzen yn it ynterne datawarehouse. It is in ienfâldige 'shell' dy't sels gjin analyze, beoardieling of beskôging fan 'e ynhâld fan' e gegevens útfiert, en allinich metadata registrearret (hoefolle rigen of fjilden binne ynfold, ensfh.). DiDo hat (hast) gjin ynfloed op minsken (rjochten) en wurdt folslein isolearre útfierd binnen de beskerme omjouwing. Fierdere ferwurking fan gegevens dy't troch DiDo kontrolearre binne, is allinich bedoeld foar ynterne bedriuwsfiering fan 'e Sintrale Oerheid.

Der is gjin DPIA útfierd foar DiDo, om't dit net nedich is. DiDo foarmet gjin heech privacyrisiko en is neffens de AP net ûnderwurpen oan DPIA:

• Gjin persoanlike aspekten fan minsken wurde beoardiele;
• Der wurde gjin spesjale persoanlike gegevens ferwurke;
• Der wurde gjin kriminele gegevens ferwurke;
• Der wurde gjin minsken folge yn in iepenbier tagonklik gebiet.

Wurking

Gegevens

DiDo kontrolearret yn syn hjoeddeiske en takomstige foarm de folgjende gegevensstreamen dy't ûntfongen wurde troch de ôfdieling Beleidsynformaasje, allegear folslein anonymisearre en allinich oangeande amtners:

• P-Direct (personielsgegevens)
• Pendelbus (reisdatums)
• UWV (útkearingsgegevens)
• ABP (pensjoengegevens)

De Iepen Boarne-ferzje fan DiDo hat gjin tagong ta dizze gegevens en is gewoan in shell om ferlykbere streamingen te laden en te kontrolearjen.

Technyske wurking

DiDo makket it foar de brûker mooglik om gegevens op te slaan yn it Datawarehouse en dokumintaasje oer dy gegevens te meitsjen. DiDo hat twa fazen:

1. Definysje fan gegevens en dokumintaasje. Dit is (yn teory) in ienmalige barren wêrby't gegevens wurde registrearre neffens in fêst patroan, opslein yn Postgres-tabellen en útskreaun as Wiki-dokumintaasje.
2. Gegevens wurde yn 'e databank laden. Sadree't de tabellen definieare binne, kinne de gegevens levere wurde. De leveringen wurde yn 'e tabel opslein, tegearre mei de gegevenskwaliteit. De levering wurdt dokumintearre en kin yn 'e Wiki opslein wurde.

Derneist binne der in oantal hulpprogramma's dy't de ôfhanneling fan leveransiers en leveringen yn 'e database ferienfâldigje.

Leveransier

Yntern ûntwikkele

Link nei boarnekoade

https://github.com/MinBZK/DiDo