Klient

Aviation (linie lotnicze, region Bliskiego Wschodu)

Wyzwanie 

Jedna z wiodących globalnych linii lotniczych realizowała program skalowania platformy danych w chmurze, wspierającej kluczowe procesy operacyjne i analityczne. Dynamiczny wzrost wolumenów danych oraz rosnące potrzeby zespołów analitycznych i operacyjnych wymagały:

• rozbudowy architektury Big Data opartej na Azure i Databricks,
• standaryzacji wzorców przetwarzania danych i integracji systemowych,
• zwiększenia tempa dostarczania zmian bez utraty jakości, wydajności i kontroli kosztów,
• szybkiego skalowania zespołu inżynierów danych w modelu europejskim, przy zachowaniu wysokich wymagań bezpieczeństwa.

Klient potrzebował partnera zdolnego zbudować i utrzymać zespół seniorów, pracujących zgodnie z ich standardami inżynierskimi.

Rozwiązanie 

Nasi konsultanci zostali zaangażowani do zespołu klienta jako Senior Azure Data Engineers, pracując w modelu Extended Teams. Wspieraliśmy projekt w obszarach:

• projektowania i budowy skalowalnej architektury przetwarzania danych w środowisku chmurowym Microsoft Azure,
• rozwoju pipeline’ów danych i workflowów opartych o Databricks, Spark i Azure Data Factory,
• tworzenia wzorców integracji system–system oraz przetwarzania danych na dużą skalę,
• automatyzacji procesów CI/CD i wdrażania dobrych praktyk inżynierii danych,
• współpracy z analitykami i data scientistami w celu zapewnienia jakości modeli downstream,
• definiowania polityk retencji danych oraz monitorowania wydajności platformy.

Wnioski

• Skalowalna i stabilna platforma danych obsługująca krytyczne procesy lotnicze.
• Zwiększona przepustowość zespołu dzięki standaryzacji i reużywalnym komponentom.
• Szybsze dostarczanie zmian przy zachowaniu wysokiej jakości i bezpieczeństwa.
• Możliwość dalszego, kontrolowanego skalowania zespołu w Europie.