Opis oferty:

Tech Lead Data Engineer - GCP

Lokalizacja: Warszawa, ul. Marynarska 12

Rodzaj umowy: B2B

Tryb współpracy: Hybrydowy (2 dni w tygodniu z biura)

Dołączasz? Aplikuj!

Zadania, które na Ciebie czekają:

• Projektowanie, rozwój i utrzymanie potoków danych (ETL/ELT) w środowisku GCP.
• Integracja danych z różnych źródeł (API, bazy, pliki) do narzędzi takich jak BigQuery i Cloud Storage.
• Projektowanie i optymalizacja modeli danych w hurtowniach danych (Kimball, Data Vault, Dimensional Modeling).
• Implementacja rozwiązań streamingowych (np. Pub/Sub, Dataflow, Apache Beam).
• Automatyzacja procesów wokół danych przy użyciu Cloud Composer (Airflow).
• Planowanie prac/sprintów, priorytetyzacja backlogu, facylitacja warsztatów z biznesem, przekładanie wymagań na rozwiązania i SLA/SLO.
• Zapewnienie wydajności, jakości, bezpieczeństwa i skalowalności danych.
• Współpraca z zespołami ds. analityki danych, Data Science oraz zespołami biznesowymi.
• Tworzenie dokumentacji technicznej i udział w code review.
• Monitorowanie i rozwiązywanie problemów wydajnościowych oraz optymalizacja kosztów w chmurze.
• Optymalizacja wydajności i kosztów implementowanych rozwiązań.
• Mentoring, prowadzenie warsztatów, zarządzanie interesariuszami.

Wymagania:

• +5 lat doświadczenia na stanowisku Data Engineer oraz doświadczenie w pełnieniu roli wiodącej.
• Praktyczna znajomość ekosystemu GCP, w szczególności:
  • BigQuery - zaawansowany SQL, zarządzanie kosztami, optymalizacja wydajności.
  • Cloud Storage - zarządzanie danymi, wersjonowanie.
  • Pub/Sub oraz Dataflow/Apache Beam lub Dataproc/Spark.
  • Cloud Composer (Airflow) - orkiestracja i harmonogramowanie pipeline’ów danych.
  • Podstawy bezpieczeństwa w GCP: IAM, KMS, DLP.
  • Umiejętność programowania w Python (np. pandas, PySpark, testy automatyczne).
  • Doświadczenie w projektowaniu modeli danych (Kimball, Data Vault, Dimensional Modeling) i budowie warstw danych (raw/bronze, curated/silver, semantic/gold).
  • Znajomość narzędzi do automatyzacji: CI/CD (np. GitLab CI, Cloud Build).
  • Praktyka w zapewnieniu jakości danych (testowanie, monitorowanie, alertowanie).
  • Znajomość narzędzi do monitorowania i rozwiązywania problemów wydajnościowych (Cloud Monitoring, Logging).
  • Doświadczenie w dokumentacji technicznej oraz code review.
  • Umiejętność pracy zespołowej i komunikacji z zespołami biznesowymi, technicznymi oraz analitycznymi.
  • Proaktywność, odpowiedzialność i nastawienie na jakość w obszarze danych.

Dodatki i korzyści:

• Pakiety sportowe, opieka medyczna, ubezpieczenie na życie – na preferencyjnych warunkach
• Możliwość udziału w rozwojowych webinarach, Festiwalu Rozwoju, dostęp do platform szkoleniowych
• Bezpłatne miejsce parkingowe i siłownia przy biurze na Marynarskiej, sprzęt służbowy i telefon z ofertą bez limitu (także do użytku prywatnego), specjalna oferta na produkty T-Mobile, a także zniżki od naszych partnerów
• Magentowa współpraca to także: imprezy firmowe, konkursy wewnętrzne, programy wellbeingowe i wolontaryjne, program poleceń pracowniczych Znam Talent, inicjatywy sportowe, grupy pracownicze DE&I