Senior Data Engineer – automotive sector (f / m/x)

Opis

Szukamy doświadczonego Senior Data Engineera (f/m/x), który dołączy do zespołu zajmującego się danymi, pracującego nad globalnymi platformami danych w obszarze usług finansowych. Będziesz częścią dużej inicjatywy transformacyjnej mającej na celu zbudowanie nowoczesnego, opartego na chmurze ekosystemu danych oraz umożliwienie organizacji stania się w pełni opartą na danych. Projekt koncentruje się na rozwijaniu i utrzymaniu rozwiązań Data Lake, integracji wielu źródeł danych oraz dostarczaniu wysokiej jakości zbiorów danych do globalnych przypadków analitycznych.

Benefity

• Great Place to Work

• Stabilna sytuacja finansowa

• Kontrakty z globalnymi markami

• Centrum szkoleń wewnętrznych

• Wielu ekspertów, od których możesz się uczyć

• Otwarty i dostępny zarząd

• Profit sharing

• Program Sponsoringu Pasji

• Cykliczne imprezy i wyjazdy integracyjne

• Komfortowe i dobrze wyposażone biura

• Aplikacja MySii

• Opieka medyczna

Wymagania

• Wykształcenie wyższe w dziedzinie informatyki, inżynierii lub pokrewnej

• Co najmniej 5-letnie doświadczenie w inżynierii danych z silnym zapleczem ETL

• Praktyczne doświadczenie z Azure Data Factory, Azure Databricks, Azure SQL i ADLS

• Bardzo dobra znajomość Pythona, Scali lub Javy oraz silne umiejętności SQL

• Doświadczenie z frameworkami big data, CI/CD oraz metodykami Agile, a także silne umiejętności komunikacyjne

• Bardzo dobra znajomość języka angielskiego

• Biegła znajomość języka polskiego wymagana

• Miejsce zamieszkania w Polsce wymagane

Zakres obowiązków

• Projektowanie, budowanie i optymalizacja skalowalnych potoków danych (wsadowych i w czasie rzeczywistym)

• Rozwój i utrzymanie procesów ETL oraz integracja danych z wielu źródeł (w tym migracje)

• Tworzenie i zarządzanie strukturami danych w Azure SQL oraz rozwijanie rozwiązań Databricks (PySpark, Spark SQL)

• Zapewnienie jakości danych, zarządzanie nimi oraz optymalizacja wydajności (SQL, przetwarzanie)

• Współpraca z zespołami międzyfunkcyjnymi oraz wdrażanie CI/CD, automatyzacji i najlepszych praktyk Agile