Nieuwe functies voor Data Factory Pipelines in Fabric deze week

Samenvatting

Data Factory Pipelines in Fabric krijgen vijf nieuwe functies, waaronder Pipeline Dependencies voor voorwaarden vóór uitvoering.

Data Factory Pipelines: wat er gebeurt

De Fabric Data Factory-community kondigde tijdens FabCon Barcelona vijf nieuwe functies aan die deze week beschikbaar kwamen. Het excerpt licht Pipeline Dependencies toe: een orkestratiefunctie waarmee je bepaalt welke voorwaarden eerst moeten zijn vervuld voordat een pipeline start.

Run Conditions en Run Dimensions vormen de bouwstenen voor die regels. Ze bepalen wanneer een pipeline mag uitvoeren, onafhankelijk van de gekozen trigger of planning. Daarmee verschuift de controle van alleen starten op een tijdstip of gebeurtenis naar uitvoeren zodra vastgelegde afhankelijkheden kloppen.

Pipeline Dependencies: waarom dit belangrijk is

Pipeline Dependencies richt zich op de volgorde van verwerkingen. Een pipeline hoeft niet langer alleen een trigger of schema te volgen; de uitvoering kan ook afhangen van voorwaarden die je vooraf instelt. Dat geeft BI-teams een explicieter model voor ketens waarin de ene verwerking op de andere wacht.

De aankondiging noemt nog vier andere functies, maar beschrijft in het beschikbare excerpt alleen Pipeline Dependencies. Daardoor is vooral duidelijk wat er verandert aan orkestratie, niet welke aanvullende mogelijkheden de overige functies bieden.

Voor professionals die Fabric Data Factory Pipelines beheren, ligt de aandacht op het vastleggen van afhankelijkheden. Een planning vertelt wanneer een pipeline mag starten. Run Conditions en Run Dimensions leggen vast wanneer starten ook daadwerkelijk logisch is. Dat onderscheid helpt bij het ontwerpen en controleren van uitvoeringsketens.

Pipeline Dependencies: concrete takeaway

Breng bestaande pipelines in kaart en noteer per pipeline welke voorwaarden vooraf moeten gelden. Controleer daarna of die logica beter past in Pipeline Dependencies met Run Conditions en Run Dimensions dan in losse triggers of planningen. Wacht met conclusies over de andere vier functies tot hun werking afzonderlijk is beschreven.