Enterprise Data as a Service: sneller op weg naar een datagestuurde onderneming

Gastblog door Persistent Systems (Knowledge Partner op het thema Digital Transformation)

Dit zou voor de meeste organisaties een eyeopener moeten zijn. Bij veel ondernemingen lopen inmiddels al Data Warehouse- of Data Lake-initiatieven, en de meeste bevinden zich al in de cloud. Maar organisaties moeten een stap verder gaan en zich afvragen of ze wel de cultuur hebben opgebouwd die nodig is om een ​​datagestuurde organisatie te worden. Organisaties hebben moeite om maximaal zakelijk voordeel uit hun data- en analyse-initiatieven te behalen, omdat ze worden geconfronteerd met allerlei praktische uitdagingen.

• IT-infrastructuur die eigendom is van een gecentraliseerd team, waardoor een bureaucratisch goedkeuringsproces nodig is
• Geïsoleerde datateams die geen toegang hebben tot gecentraliseerde gegevensbronnen
• Het ontbreken van organisatiebreed Data Stewardship en Data Quality

Om echt datagestuurd te worden, moeten organisaties een transformatie ondergaan. Er zijn 3 fundamentele veranderingen nodig om als organisatie een datagestuurde cultuur te realiseren.

Deze aanpak wordt sterk beïnvloed door een Data Mesh-architectuur.

Managed Data Products:

Dit is het centrale thema van Enterprise Data as a Service. Deze aanpak vereist een focus op het denken in ‘dataproducten’ en vervolgens op de onderliggende tools.

• Elke logische groepering van data per vakgebied of businessgroep is een ‘dataproduct’
• De focus ligt op het onderhouden (opnemen, beheren, distribueren) van datasets per domein
• Voor ieder dataproduct wordt een duidelijke producteigenaar geïdentificeerd, wat zorgt voor vertrouwen in data
• Dit maakt gedecentraliseerd en gedistribueerd eigendom van data mogelijk
• Elk dataproduct bevat niet alleen domeindatasets, maar ook alle dataverwerkingscomponenten (opname, ETL/ELT-taken, datakwaliteitstaken, ML-pijplijnen) en dataonderhoudscomponenten (ruwe opslag, data lake/DWH/datawachtrijen, data-API’s, modelregister, feature store)

Bekijk de webinar over het maximaliseren van de kracht van gegevens met de ‘Enterprise data-as-a-service-aanpak’

Data Governance en Data Product Observability:

Dit is een gemeenschappelijk raamwerk van open standaarden; best practices die gezamenlijk zijn ontwikkeld door vertegenwoordigers van alle dataproductteams. Governance & Observability zal over het algemeen de volgende componenten bevatten.

• Datacatalogus – Mogelijkheid om datasets toegankelijk te maken die worden gedeeld door dataproductteams. Mogelijkheid om beleid voor het delen van gegevens door dataproductteams te standaardiseren 
• Gegevenskwaliteit – Een geautomatiseerd en op AI-ML gebaseerd kader voor gegevenskwaliteit dat ervoor zorgt dat de gegevenskwaliteit in elke fase wordt gemeten en bewaakt 
• Databeveiliging – Een betrouwbaar, consequent mechanisme voor het toewijzen en controleren van toegang tot gevoelige gegevens vanuit het oogpunt van compliance
• Datalineage – Een voorspelbare traceerbaarheid van eigendom van dataoorsprong, transformatie en distributie.

Data-infrastructuur als selfservice:

Een data-infrastructuur die SLA-gestuurd, schaalbaar en selfservice is. Het betekent

• Een domein-agnostische, gedeelde infrastructuur
• Eén bedrijfsgroep kan één dataproduct bezitten of vertegenwoordigen
• Onafhankelijke schaalbaarheid per businessgroep
• Gemakkelijke toegang om alle NFRS te beheren (CI/CD, kwaliteit, gezondheid en monitoring, beveiliging en governance)
• De succescriteria voor dit platformteam zijn: “Verkort de doorlooptijd voor het creëren van nieuwe veilige en vindbare dataproducten”.

De Enterprise Data as a Service-aanpak maakt stapsgewijze veranderingen in de organisatiecultuur en -processen mogelijk. Dit leidt tot een geleidelijke organisatorische transformatie over een periode van 3 tot 6 maanden. Een dergelijke transformatie zorgt voor een fundamentele verandering van het gebruik van gegevens tijdens besluitvorming. Hierdoor wordt Data Stewardship in plaats van technologie de centrale pijler voor de transformatie van mensen, processen en culturen.

De weg naar een datagestuurd bestaan is een continu proces en geen eenmalige gebeurtenis. Maar de Enterprise Data as a Service-aanpak helpt deze reis te versnellen en bouwt toekomstbestendige datagestuurde organisaties.