Anomaliedetectie
Anomaliedetectie spoort automatisch datapunten op die niet passen in het normale patroon: een factuur die uit de toon valt, een machine die ...
Lees meerEen Service Level Objective of SLO is een meetbare doelstelling voor een service, zoals beschikbaarheid, latency of data freshness. Je meet ze via SLI's.
Een Service Level Objective of SLO is een meetbare doelstelling voor hoe goed een service moet werken. Denk aan beschikbaarheid, latency, foutpercentage of data freshness.
Een SLO is concreet. Niet "de pipeline moet betrouwbaar zijn", maar "het salesdashboard is op werkdagen om 8 uur ververst in 99 procent van de runs".
Je meet een SLO met een Service Level Indicator, of SLI. De SLI is de meting. De SLO is de grens of doelwaarde.
Deze drie termen lijken op elkaar, maar ze zitten op andere niveaus.
SLI. De indicator die je meet, bijvoorbeeld percentage succesvolle pipeline-runs.
SLO. De doelstelling, bijvoorbeeld 99 procent succesvolle runs per maand.
SLA. Een afspraak met een klant of businesspartij, vaak met formele gevolgen.
Je kan dus een SLO intern gebruiken zonder meteen een SLA te beloven.
Voor data teams draaien SLO's vaak rond versheid, beschikbaarheid en kwaliteit.
Data freshness. Het dashboard is uiterlijk om 8 uur bijgewerkt.
Pipeline-succes. Kritieke jobs slagen in 99,5 procent van de geplande runs.
Datakwaliteit. Minder dan 0,1 procent van klantrecords mist een klantnummer.
Beschikbaarheid. Het semantisch model is beschikbaar tijdens kantooruren.
Een SLO maakt zichtbaar hoeveel foutmarge je hebt. Als je doel 99 procent succesvolle runs is, dan accepteer je 1 procent mislukking binnen de gekozen periode. Dat heet vaak het error budget.
Is het budget op, dan moet stabiliteit voorrang krijgen op nieuwe features. Zolang er budget is, kan het team met meer vertrouwen veranderen.
Een KPI meet bedrijfsresultaat of procesprestatie. Een SLO meet de betrouwbaarheid van de service die dat resultaat ondersteunt.
Omzet per maand is een KPI. "Omzetdashboard elke werkdag voor 8 uur beschikbaar" is een SLO.
Kies met gebruikers. Een SLO moet aansluiten bij wat echt pijn doet als het fout loopt.
Maak het meetbaar. Zonder SLI is een SLO alleen een wens.
Vermijd 100 procent. Perfectie klinkt goed, maar leidt vaak tot trage, dure teams.
Herbekijk geregeld. Een maandrapport en een operationeel dashboard vragen andere doelen.
Anomaliedetectie spoort automatisch datapunten op die niet passen in het normale patroon: een factuur die uit de toon valt, een machine die ...
Lees meerApache Airflow is een open-source orkestrator: je beschrijft je datapijplijnen als code in Python, in de vorm van een DAG, en Airflow plant ...
Lees meerEen backfill is het opnieuw of alsnog verwerken van historische data door een pijplijn die normaal alleen nieuwe of gewijzigde data oppakt. ...
Lees meerBatchverwerking verwerkt data in blokken op vaste momenten, bijvoorbeeld elk uur of elke nacht. Het is minder direct dan streaming, maar vaa...
Lees meerCheckpointing slaat tussentoestand op, zodat een job, stream of algoritme na een fout kan hervatten zonder helemaal opnieuw te beginnen.
Lees meer
Nieuw in Microsoft Fabric? Zo verschillen een lakehouse en een warehouse, in mensentaal: wat ze doen, wanneer je wat kiest en wanneer je bei...
AI zit standaard in Google Workspace for Education en Microsoft 365 Education. Wat krijg je gratis, wat kost extra, wie mag wat per leeftijd...