ETL Thuisbezorging

In dit diagram zie je een uitwerking van het ETL patroon op basis van applicatiefuncties. Daarnaast zie je welke component zorgdraagt voor deze ETL verwerking. Je ziet hierbij ook dat er een aantal data objecten uitgelezen worden en getransformeerd worden naar een datamart in het datawarehouse.

Versie 1.0
Creatie datum 03-08-2021

SQL-Server Integration Services

Auteur Admin
Alias
Stereotypes ApplicationComponent
Details van SQL-Server Integration Services

Bezorging

Bezorging is het afleveren van de bestelde producten op een door de klant gedefinieerde locatie.

Auteur Admin
Alias
Stereotypes DataObject
Details van Bezorging

Bestelling

Een bestelling is een vraag van een klant om bepaalde Ijs of koffie producten te leveren.

Auteur Admin
Alias
Stereotypes DataObject
Details van Bestelling

DataMart Bezorging

Auteur Admin
Alias
Stereotypes DataObject
Details van DataMart Bezorging

Staging

Opslaan van data uit de databron in een staging omgeving voordat deze getransformeerd en uitgemodelleerd wordt.

Auteur Admin
Alias
Stereotypes ApplicationFunction
Details van Staging

Aggregatie

Aggregeren van feiten in het modelleren van data tbv rapportages.

Auteur Admin
Alias
Stereotypes ApplicationFunction
Details van Aggregatie

Transform

Transformeren van data tbv ETL. Extract functie haalt de data op uit de bronwaarna de tranformatie functie de data omzet naar het model wat in het DWH geladen wordt. onderliggende functies zijn:

  • Opslaan in een staging omgeving
  • Validatie van data
  • Transformeren van datatypes en waardes.
  • Versleuteling
  • integratie met andere datastromen
  • Agrregatie van feiten en dimensies

Auteur Admin
Alias
Stereotypes ApplicationFunction
Details van Transform

Load

Het laden van de getransformeerde data in het datawarehousein de vorm van een datamart of datacube.

Auteur Admin
Alias
Stereotypes ApplicationFunction
Details van Load

Integratie

Deze functie biedt de mogelijkheid om data uit berichten verkeer of andere messaging protocollen op te halen en mee te nemen in de datatransformaties in een ETL proces

Auteur Admin
Alias
Stereotypes ApplicationFunction
Details van Integratie

Transformatie

Transformeren en modelleren van de bron data naar de gewenste rapportage vorm. Dit kan een sterschema of kubus zijn of een platte dataset in het geval van een data levering.

Auteur Admin
Alias
Stereotypes ApplicationFunction
Details van Transformatie

Encryptie

Versleutelen van data in het DWH volgens de geldende encryptie normen (verwijzing)

Auteur Admin
Alias
Stereotypes ApplicationFunction
Details van Encryptie

Validatie

Deze functie verzorgt het valideren van de datastructuren tegen die van de bron aan. Dit vlevert een extra controlle slag om te bepalen of de data wel juist uit de bron is opgehaalt.

Auteur Admin
Alias
Stereotypes ApplicationFunction
Details van Validatie

Extract

Ophalen van data uit een databron t.b.v. een ETL proces in een DWH architectuur

Auteur Admin
Alias
Stereotypes ApplicationFunction
Details van Extract