Raw Data Vault [ABB]

Geacquireerd en gecondioneerde data

De brondata is geacquireerd binnen het Data omgeving landschap en is opgenomen in de ontvangstzone, waar afhankelijk van het type data verschillende paden binnen het Data omgeving landschap voor verwerking gevolgd kunnen worden


Details van Geacquireerd en gecondioneerde data

Geen bijzondere persoonsgegevens (AVG) in Data omgeving omgeving, tenzij expliciete toestemming GLO

Data die volgens de AVG onder de categorie ' bijzondere persoonsgegevens' vallen, mogen niet in de Data omgeving omgeving beschikbaar zijn, tenzij expliciete toestemming is verleend door de GLO.


Details van Geen bijzondere persoonsgegevens (AVG) in Data omgeving omgeving, tenzij expliciete toestemming GLO

Raw Datavault data

RDV data zijn samengesteld op basis van de verwerking achter de Raw Layer service en zijn daarmee beschikbaar voor verdere verwerking in bijvoorbeeld informatieproducten. Modellering is op basis van de Raw Data Vault methode


Details van Raw Datavault data

Geen PII data in niet-productie omgevingen

Deze requirement geeft aan dat privacy gevoelige data alleen beschikbaar mag zijn in het productionele deel van het Data omgeving landschap


Details van Geen PII data in niet-productie omgevingen

Business layer datafundament

Service voor het ontsluiten van de data op basis van het business layer model (met andere worden het generieke EDW model (losstaand van de modellen in de bronsystemen) voor datamarts en informatieproducten.


Details van Business layer datafundament

Metadata harvesting en ontsluiting

Metadata van de datasets en de verwerkingsstappen is essentieel voor traceerbaarheid. Vandaar dat voor data lineage en data provenance een aantal funtionaliteiten ingericht zijn in het Data omgeving landschap.


Details van Metadata harvesting en ontsluiting

Opvragen toegangsrechten

Autorisatie en het bepalen van de toegangsrechten tot verwerkende functies is relevant vanuit het perspectief van security en privacy.


Details van Opvragen toegangsrechten

Time based

Op basis van een Timer functie wordt een actie getriggerd.


Details van Time based

Combineren data (joining)

Vorm van modeltransformatie waarbij twee of meer datasets worden samengevoegd tot één samengestelde dataset. Joining vindt plaats op rijniveau, Merge op kolom niveau


Details van Combineren data (joining)

Bufferen

Een buffer is een wachtrij die asynchrone communicatie mogelijk maakt. De buffer is en tijdelijke opslag van gegevens om later uit te lezen. Een buffer wordt ingezet zodat het schrijven en lezen van de gegevens niet tegelijk hoeft plaats te vinden.


Details van Bufferen

Synthetiseren (testdata)

Bij het synthetiseren van de testdata wordt de data van scratch af aan opgebouwd. Deze data is NIET afkomstig van een productie systeem.


Details van Synthetiseren (testdata)

Decompress / decrypt

decomprimeren en/of decrypten van in een eerdere fase encrypte of gecomprimeerde data


Details van Decompress / decrypt

Raw laag datafundament processing

samengestelde applicatie functie waarbinnen een aantal specifieke functies voor de verwerking zorgen. Deze functie realiseert de uiteindelijke Raw Layer service


Details van Raw laag datafundament processing

Data kwaliteit controle

Op basis van de gedefinieerde kwaliteitsdimensies en voor deze dataset relevante kwaliteitsniveaus bepalen van de kwaliteit binnen deze dataset


Details van Data kwaliteit controle

Raw layer datafundament

Raw data layer als eerste stap bij de transformatie van het datamodel in de bronsystemen naar het model in het enterprise data ware house. In de Raw Layer is de structuur van de bronsystemen nog herkenbaar aanwezig.


Details van Raw layer datafundament