NoSQL transformatie logische architectuur ABB

Overzicht van de transformatie van een NoSQL-database naar een datatarget. Aanvankelijk met een ETL-proces als tussenstap.

Diagram in standaardweergave

Gegevensdoel

Datadoel gebaseerd op een gestandaardiseerd datamodel. Op basis van dit model en de meegeleverde data-entiteiten kunnen één of meerdere interfaces voor de consument worden geïmplementeerd.


Details van Gegevensdoel

Gegevensbron

Beschrijving van de gegevensbronnen in het algemeen. Is een aggregatie van specifieke typen gegevensbronnen. Deze generieke databron is aan het model toegevoegd om associaties met generieke eisen en uitgangspunten mogelijk te maken


Details van Gegevensbron

NoSQL

NoSQL is een nieuw dataplatform voor de implementatie van semi-gestructureerde data. Er zijn verschillende NoSQL-databasetypen, zoals kolom-, naamwaarde-, document- of grafiekdatabases


Details van NoSQL

Laden

Laadfunctionaliteit voor het overbrengen van de gegevens naar een gegevensdoel en laad deze daar. Dit kan een ETL-proces zijn of de implementatie in een berichtenhandler


Details van Laden

Relationele transformatie

Transformatie van relationele data-entiteiten (opgeslagen in een relationele database) naar het gestandaardiseerde datadoel.


Details van Relationele transformatie

Workflowbeheer

Workflowmanagement voor de planning en iteratie van transformatietaken


Details van Workflowbeheer

Modellering

Voor de transformatie van bron- naar doeldatamodellen moet een beschrijving van de data-elementen worden gemodelleerd.


Details van Modellering

Fysieke modellering

Fysisch model voor de beschrijving van een technisch implementatiemodel. Dit is platformspecifiek en wordt gebruikt voor het maken van SQL DDL- en ETL-scripts en uiteindelijk voor technische documentatie.


Details van Fysieke modellering

NoSQL naar ETL-transformatie

Adapter binnen de ODI of Open Source tooling om NoSql naar ETL te transformeren en omgekeerd


Details van NoSQL naar ETL-transformatie

Transformatie

Transformatiefunctie van het specifieke brondatamodel naar het gestandaardiseerde doeldatamodel. Dit kan een model- of een protocoltransformatie zijn. Vaak is deze transformatie onderverdeeld in substappen en deze substappen zullen worden geanalyseerd en gemodelleerd in de architectuur van een specifieke datapipe-implementatie en componenten


Details van Transformatie

Transformeren

Transformatiefunctionaliteit voor het transformeren van de data-inhoud van een (applicatie)specifiek datamodel naar een generiek datamodel op basis van een gestandaardiseerd datamodel (zie de servicediagrammen). Dit kan worden geïmplementeerd in een ETL-transformatieproces of in een berichtenhandler, bijvoorbeeld in een servicebus.


Details van Transformeren

Extract

Extraheerfunctionaliteit voor het ontvangen van gegevens uit de bronsystemen. Deze heeft een XML-formaat en de bron is een webservice of een XML-bestand. De gegevens worden geëxtraheerd en voorbereid om te worden getransformeerd


Details van Extract

Logische modellering

Het logische of conceptuele model is abstract van aard en staat daarom onafhankelijk van het implementatieplatform. In de meeste gevallen moet dit model leesbaar zijn voor niet-IT-stakeholders.


Details van Logische modellering