Urval av kunder
Funktioner
Monitorering
Genom STOIX Orchestrator dashboard kan du monitorera och enkelt visualisera status på dina datapipelines i realtid. Sätt upp varningspolicyer och bli notifierad om dina datapipelines failar.
Dependencies
STOIX Orchestrator möjliggör skapandet av komplexa beroendeträd för datapipelines som körs efter en viss specifik ordning. Detta gör att du kan köra kedjor av pipelines som är beroende av andra data pipeline outputs eller andra externa system. Till exempel kan din dbt transformation köras direkt efter att ditt PySpark ingestion jobb till BigQuery har lyckats.
Backfills
Du kan enkelt backfilla datum eller tid-sekvenserade pipelines med historisk data. Detta möjliggör också uppdateringar av dataset och tabeller efter att man fixat buggar. Man kan då även uppdatera datasetet när källdata har blivit uppdaterad.
Valfritt kodspråk
Genom att utnyttja containerteknologi så kan du genom STOIX Orchestrator välja vilket programmeringsspråk eller verktyg du vill använda när du skapar en data pipeline. Då kan alla utvecklare i organisationen bidra till ditt dataekosystem.
Ägarskap
Samarbeta i realtid med ditt team. Få en överblick över vem som är ansvarig för olika datapipelines så att potentiella problem med output data kan lösas effektivt.
Infrastrukturhantering
STOIX Orchestrator hanterar din infrastruktur och hanterar allokering av datorresurser. Vi skalar automatiskt noderna i din infrastruktur så att dina datapipelines kör kostnadseffektivt i ditt företag.
Systemarkitektur
Dirigenten
Tar automatiskt hand om all komplex logik för dig kring orkestrering, schemaläggning och monitorering. Hantera din datainfrastruktur i vår molnbaserade dashboard som uppdateras i realtid. Detta ger flexibilitet för att möta dina affärskrav.
Kontrollanten
En Kubernetes-kontroller som körs i ditt kluster och exekverar containrar enligt instruktioner från kontrollanten. Exekverings Metadata rapporteras tillbaka till dirigenten. Genom att köra kontrollanten i ditt kluster säkerställs att data aldrig lämnar din infrastruktur, vilket gör det enkelt att följa säkerhetsstandarderna. Läs mer här hur kontrollanten fungerar.
