AI & Analytics

Genie One: gekozen agenten hebben behoefte aan gereguleerde context

Databricks Blog
Genie One: gekozen agenten hebben behoefte aan gereguleerde context

Samenvatting

Genie One haalt 93–95% nauwkeurigheid met gecureerde agents en gereguleerde bedrijfscontext uit Unity Catalog.

Wat Genie One en gereguleerde context doen

Databricks onderzocht Genie One met 125 vragen over een fictieve verzekeraar. De combinatie van gecureerde Genie Agents en de governed layer met Metric Views, Domains, Subdomains en Pages behaalde 93–95% nauwkeurigheid. Met alleen agents of alleen de governed layer kwam de score uit op 83%; met alleen tabellen op 64%.

De twee onderdelen lossen verschillende problemen op. Metric Views en Pages leggen vast welke definitie bij een bedrijfsmaatstaf hoort. Genie Agents halen informatie uit ongestructureerde bronnen, zoals pdf-bestanden. Genie Ontology, inmiddels Generally Available, voegt daarnaast automatisch bedrijfslogica, berekeningen en relaties toe uit bestaande dashboards, queries, notebooks en semantic models.

Waarom Genie One context nodig heeft

Eenzelfde term kan meerdere correcte uitkomsten hebben. In de test rapporteerde Finance een verslechtering van de loss ratio met 8,2 procentpunt tussen 2024 en 2025, terwijl Underwriting een verbetering van 1,5 procentpunt zag. Finance gebruikte het kalenderjaar, netto na herverzekering; Underwriting keek naar het polisjaar, bruto vóór herverzekering en zonder catastrofes. Reserving hanteerde weer de accident-year ultimate loss ratio.

De SQL kan dus correct zijn terwijl het antwoord niet past bij de vraagsteller. Genie One moet niet alleen berekenen, maar ook bepalen welke bedrijfsdefinitie geldt. De governed layer legt gedeelde definities vast, terwijl agents toegang geven tot informatie die niet in tabellen staat. Dat onderscheid voorkomt dat één universele metriek alle afdelingen overschrijft.

Concrete takeaway voor Genie One-gebruikers

Leg elke gedeelde maatstaf één keer vast in een gecertificeerde Metric View en beschrijf op een Page wanneer die definitie geldt. Test daarna vragen vanuit Finance, Underwriting en Reserving afzonderlijk. Een wijziging in één Metric View en de bijbehorende Page verplaatste in de test alle twaalf gerelateerde Genie One-antwoorden naar de nieuwe definitie, zonder aanpassingen aan agents. Gebruik agents dus voor ongestructureerde informatie en de governed layer voor definities die overal hetzelfde moeten blijven.

Lees het volledige artikel
Meer over AI & Analytics →