Datautforskerne Dataplattform med Trøyel Nerbø
14 snips
May 12, 2025 
Trøyel Nerbø, dataplattformarkitekt i Glitni, deler sin ekspertise om hva en dataplattform er og hva den kan gjøre for moderne organisasjoner. Sammen med Magne Bakkeli diskuteres overgangen fra tradisjonelle datavarehus til moderne data lakes. De utforsker viktige teknologier som Azure, Databricks, og Snowflake, samt verktøyene SQL og Python for datatransformasjon. Trøyel gir også innsikter om kostnadsstyring og datakvalitet, samt hvordan Terraform kan effektivisere utviklingsprosessen.
AI Snips
Chapters
Transcript
Episode notes
Bygg historikk i dataplattformen
- Bruk dataplattformen til å bygge historikk som applikasjoner ofte mangler.
- Lag en grundig historisering som gir dypere innsikt enn kildesystemene alene.
Fra datakilde til rapportering
- Start med å analysere behovet, skaff tilgang til kilde og lag renseprosesser i dataplattformen.
- Modellér data riktig, for eksempel i stjernemodeller, og test kvaliteten kontinuerlig.
Viktigheten av orkestrering
- Bruk orkestreringsverktøy som Airflow for å styre rekkefølgen og tidspunkt for databehandling.
- Orkestrering er mer avansert enn en enkel jobbscheduler og sørger for kontrollert dataflyt.