Binaire data interpretatie [ABB]

Verwerken van ongestructureerde data zoals binair

Diagram in standaardweergave

Geacquireerd en gecondioneerde data

De brondata is geacquireerd binnen het Data omgeving landschap en is opgenomen in de ontvangstzone, waar afhankelijk van het type data verschillende paden binnen het Data omgeving landschap voor verwerking gevolgd kunnen worden


Details van Geacquireerd en gecondioneerde data

Geprepareerde data

Data is geprepareerd voor verdere verwerking. Bij binaire data kan dit een complexe transformatie zijn waarbij op basis van patroonherkenning etc gezocht wordt naar bruikbare en afleidbare kenmerken in de geprepareerde data


Details van Geprepareerde data

Applicatiefuncties interpretatie ongestructureerde data

Applicatiefuncties voor het interpreteren (het toepassen van een structuur t.b.v. een bepaald doeleinde) van binaire-, analoge en tekstuele data.


Details van Applicatiefuncties interpretatie ongestructureerde data

Metadata harvesting en ontsluiting

Metadata van de datasets en de verwerkingsstappen is essentieel voor traceerbaarheid. Vandaar dat voor data lineage en data provenance een aantal funtionaliteiten ingericht zijn in het Data omgeving landschap.


Details van Metadata harvesting en ontsluiting

Ontdubbeling

Applicatiefunctie voor het dedupliceren van elementen in een dataset op basis van (een combinatie van) kenmerken. Veelal zijn deze kenmerken een business sleutel op basis waarvan de duplicaten herkend worden.


Details van Ontdubbeling

Opvragen toegangsrechten

Autorisatie en het bepalen van de toegangsrechten tot verwerkende functies is relevant vanuit het perspectief van security en privacy.


Details van Opvragen toegangsrechten

Bufferen

Een buffer is een wachtrij die asynchrone communicatie mogelijk maakt. De buffer is en tijdelijke opslag van gegevens om later uit te lezen. Een buffer wordt ingezet zodat het schrijven en lezen van de gegevens niet tegelijk hoeft plaats te vinden.


Details van Bufferen

Decompress / decrypt

decomprimeren en/of decrypten van in een eerdere fase encrypte of gecomprimeerde data


Details van Decompress / decrypt

Binaire data interpreteren

Is relevant voor als we binaire data zoals blobs binnen krijgen. Dit is dus een specifieke verwerking voor een bijzondere dataset


Details van Binaire data interpreteren

Aanbieden Common datasets

Services voor algemene datasets binnen Data omgeving zoals ontsloten herbruikbare laag gestructureerde data en reference data entiteiten met de daarbij behorende logische applicatie functies


Details van Aanbieden Common datasets

Gereed maken en laden voor dataprep

Samengestelde applicatie functie waarbinnen een aantal functionaliteiten zijn opgenomen om binaire data te prepareren voor verdere verwerking


Details van Gereed maken en laden voor dataprep

Transformeer naar ander format

Data omzetten naar een ander formaat binnen de verwerking van de data. Denk aan transformatie van CSV naar JSon of XML. Geen modeltransformatie, dat is een afzonderlijke applicatie functie


Details van Transformeer naar ander format