Dagster
När man börjar samla data blir det snabbt en hög med små skript som ska köra i rätt ordning, vid rätt tid, och helst larma när de misslyckas. Dagster gör kedjan synlig. Du beskriver vilka tabeller och filer som ska finnas och hur de hänger ihop, och får ett gränssnitt där du ser vad som är aktuellt, vad som fallerade och vad som behöver köras om. Kärnan är öppen källkod och det finns en molnversion. För ett UF-företag är det aktuellt om ni gör återkommande dataleveranser åt någon annan, exempelvis att varje natt hämta försäljningssiffror och lägga dem i en rapport.
Vad det är
Dagster kör och övervakar dataflöden, alltså jobb som hämtar, tvättar och flyttar data enligt schema. Det utgår från vad du vill ha ut, inte bara från vilka steg som ska köras i vilken ordning. Du ser i ett gränssnitt vad som körts, vad som fallerade och vad som behöver köras om.
Guider som nämner verktyget
Ingen guide nämner verktyget ännu.
- Driftform
- Server/VPS
- Kategori
- Data och notebook-miljöer
- Webbplats
- dagster.io