Anbefalingssystem: 72 % bedre kryssalg gjennom datainnsamling for nettbutikker

AUTOMATISERING AV DATAHÅNDTERING

AWS er en skyplattform fra Amazon som gjør det mulig for apptilbydere, ISV-er og leverandører å hoste løsningene sine raskt og sikkert - enten det dreier seg om en eksisterende app eller en ny... SaaS-basert app. AWS Systems Manager Parameter Store er et sikkert lager for håndtering av konfigurasjonsdata og passord. Oppgaven vår var å automatisere tillegg av nye eller endring av utdaterte konfigurasjoner eller sensitive passord eller data, slik at brukeren slipper å gjøre det manuelt via det grafiske grensesnittet.

INNSTILLING AV LUFTSTRØM

I Airflow er arbeidsflyter utformet og uttrykt som DAG-er, der hvert DAG-trinn er definert som en spesifikk oppgave. Det er designet med kunnskapen om at alle prosesser for utvinning, transformasjon, lasting og manipulering av data best uttrykkes som kode, og som sådan er det en kodebasert plattform som gjør det mulig å iterere arbeidsflyter raskt og effektivt. Ettersom Airflow er svært effektiv når det gjelder å organisere og planlegge datapipeline-arbeidsflyter, bruker vi den til å sette opp forhåndsplanlagte hendelser. DAG kan kjøres hver time eller for eksempel hver 3. time og 30 minutter, og så videre. Hvis alle oppgavene i DAG ble fullført, anses DAG for å være fullført. Det er praktisk fordi DAG-er kjører til enhver tid uten behov for manuelle handlinger.