Dataverwerking logisch overzicht

Gegevensverwerking omvat functies voor het transformeren, filteren, selecteren en routeren van gegevens. In dit diagram wordt geen onderscheid gemaakt tussen berichtgebaseerde verwerking en gegevensopslaggebaseerde verwerking. Zodra dit duidelijk wordt, zal dit onderscheid worden gemaakt.

Diagram in standaardweergave

Gebeurtenisverwerking

Relationele transformatie

Transformatie van relationele data-entiteiten (opgeslagen in een relationele database) naar het gestandaardiseerde datadoel.


Details van Relationele transformatie

Bestandstransformatie

Transformatie van een databestand (meestal semi-gestructureerd), bijvoorbeeld een XML-bestand met een intern datamodel dat getransformeerd moet worden naar het gestandaardiseerde model.


Details van Bestandstransformatie

Streaming-transformatie

Filteren en selecteren

Gegevenstransformatie

Generieke functie voor datatransformatie


Details van Gegevenstransformatie

Transformatie

Transformatiefunctie van het specifieke brondatamodel naar het gestandaardiseerde doeldatamodel. Dit kan een model- of een protocoltransformatie zijn. Vaak is deze transformatie onderverdeeld in substappen en deze substappen zullen worden geanalyseerd en gemodelleerd in de architectuur van een specifieke datapipe-implementatie en componenten


Details van Transformatie

NoSQL-transformatie

Transformatie van een NoSQL-databron naar een gestandaardiseerd datadoel


Details van NoSQL-transformatie

Opschoning van gegevens

Gegevensverwerking

Gegevensregistratie en invoer

Transformatie van berichten

Transformatie van een XML-stroom (meestal semi-gestructureerd) met een intern of specifiek datamodel dat moet worden getransformeerd naar het gestandaardiseerde model in het datadoel.


Details van Transformatie van berichten

Gegevensanalyse

Modeltransformatie

Protocoltransformatie