Observability: contextgraph als noodzakelijke aanvulling

Samenvatting

De Observability Context Graph van Snowflake verbindt telemetrydata, systemen en afhankelijkheden in Observe.

Observability Context Graph verbindt telemetry

Snowflake beschrijft de Observability Context Graph als de architectuurlaag in Observe by Snowflake. Die laag zet ruwe telemetry om in doorzoekbare datasets die gebruikers aan elkaar kunnen koppelen. Bij een incident zien teams daardoor niet alleen welke waarschuwing afgaat, maar ook waarom een onderdeel van het systeem faalt.

Externe infrastructuur levert gegevens via een integratie of collector aan het Telemetry Data Lakehouse. Observe vormt die gegevens om tot datasets met onder meer Kubernetes-logs, Prometheus-metrics en trace spans. Resource-datasets identificeren objecten zoals Kubernetes-pods, containers, gebruikers en shopping carts via een primary key.

De graph gebruikt drie bouwstenen. Links verbinden datasets op basis van resource-identiteit, bijvoorbeeld een pod met de node waarop die draait. Lineage laat zien welke datasets een andere dataset hebben opgebouwd. Correlation tags markeren velden zoals cluster.name en service.name wanneer die in verschillende datasets hetzelfde concept aanduiden. De views Links, Lineage en Focus tonen deze relaties.

Waarom de Observability Context Graph belangrijk is

Telemetry laat zien wat er gebeurt, maar legt niet automatisch uit hoe services, infrastructuur en afhankelijkheden samenhangen. De context graph voegt die structuur toe aan de telemetry die al in het lakehouse staat. Daarmee verschuift de analyse van afzonderlijke events naar relaties tussen datasets en resources.

Voor BI-professionals ligt hier een herkenbaar datamodelleringsprincipe: betrouwbare analyse vraagt niet alleen om opslag, maar ook om sleutels, relaties en betekenisvolle labels. Observe gebruikt daarvoor primaire en foreign keys, lineage en correlation tags. De aanpak verbindt operationele monitoring met een model dat gebruikers visueel kunnen verkennen en doorzoeken.

Observe koppelt correlation tags bovendien aan zijn AI SRE. Die gebruikt tags om een term zoals apiserver aan de juiste data te koppelen. De bron beschrijft zo een specifieke combinatie van lakehouse, contextmodel en navigatie voor incidentonderzoek.

Concrete takeaway voor de Observability Context Graph

Leg bij telemetry eerst resource-identiteiten, links, lineage en correlation tags vast. Controleer daarna in de Links-, Lineage- en Focus-weergaven of een incident van alert naar onderliggende afhankelijkheid te volgen is.