Data Strategie

Minister Aartsen: zelfstandig ondernemerschap blijft onderwerp van verandering

Fivetran Blog
Minister Aartsen: zelfstandig ondernemerschap blijft onderwerp van verandering

Samenvatting

Open Data Infrastructure bewaart keuzevrijheid door data, compute, governance en businesscontext overdraagbaar te houden.

Open Data Infrastructure gaat verder dan open bestandsformaten

Tijdens dbt Summit bespraken Fivetran, dbt Labs, Snowflake, Microsoft en MotherDuck hoe organisaties keuzevrijheid behouden in een architectuur met meerdere dataplatforms. Open table formats zoals Apache Iceberg scheiden opslag van de engine die data verwerkt, zodat meerdere platforms dezelfde tabellen kunnen gebruiken.

Die scheiding lost niet elk risico op. Als elke engine toegangsbeleid anders interpreteert, verschuift lock-in van opslag naar governance. Werk aan read restrictions in het Iceberg REST-protocol moet catalogi ook de regels laten teruggeven die gelden voor de gebruiker die toegang vraagt. Zo kan één beleidsdefinitie tussen engines worden meegenomen, in plaats van per platform opnieuw te worden ingericht.

Waarom Open Data Infrastructure relevant is voor data-architectuur

De panelleden trokken het begrip openheid breder dan formaten en API’s. Een organisatie moet kunnen bepalen waar data staat, de compute-engine per workload kunnen kiezen, beveiligingsbeleid consistent toepassen en de betekenis van data tussen tools behouden. Ook moet een component kunnen worden vervangen zonder de hele architectuur opnieuw op te bouwen.

Daarmee ontstaat een praktisch beoordelingskader voor platformkeuzes. Een open tabel heeft beperkte waarde als catalogusregels, businesscontext of compute-afhankelijkheden alsnog aan één leverancier vastzitten. De besproken combinatie van Apache Iceberg, catalogi en interoperabele engines raakt daarom zowel technische inrichting als governance. Fivetran, Snowflake, Microsoft OneLake en MotherDuck vertegenwoordigen daarbij verschillende onderdelen van hetzelfde gesprek; dbt Labs verbindt dat gesprek met transformaties en datamodellen.

Concrete takeaway voor Open Data Infrastructure

Leg bij een nieuwe architectuur niet alleen vast welk tabel-formaat je gebruikt. Documenteer ook waar catalogusbeleid staat, hoe een engine gebruikersrechten ontvangt, welke businessbetekenis met tabellen meereist en hoe je een compute-engine vervangt. Test die overdraagbaarheid met een tweede engine voordat je de architectuur als open bestempelt.

Lees het volledige artikel
Meer over Data Strategie →