Senior Data Engineer - financial industry (f / m/x)
Białystok, Polska, Bydgoszcz, Polska, Kraków, Polska +10Najważniejsze cechy oferty
Min. 5 lat doświadczenia
Pełny etat
Praca zdalna - bez dojazdów
Prywatna opieka medyczna
Opis
Szukamy Senior Big Data Developer (f/m/x), który dołączy do naszego zespołu w budowaniu nowoczesnej platformy danych przy użyciu Databricks i ekosystemu Microsoft Azure. W tej roli będziesz odpowiedzialny za projektowanie i rozwijanie skalowalnych rozwiązań danych, implementację i optymalizację potoków ETL/ELT oraz integrację danych z wielu źródeł. Jeśli pasjonujesz się nowoczesnym inżynierią danych, rozwojem wspomaganym AI i tworzeniem wpływowych rozwiązań danych, nie wahaj się aplikować!
Benefity
Great Place to Work
Stabilna sytuacja finansowa
Kontrakty z globalnymi markami
Centrum szkoleń wewnętrznych
Wielu ekspertów, od których możesz się uczyć
Otwarty i dostępny zarząd
Profit sharing
Program Sponsoringu Pasji
Cykliczne imprezy i wyjazdy integracyjne
Komfortowe i dobrze wyposażone biura
Aplikacja MySii
Opieka medyczna
Wymagania
Co najmniej 5-letnie doświadczenie na stanowisku Data Engineer, Big Data Engineer lub podobnym
Silne doświadczenie praktyczne z Pythonem i PySpark
Udokumentowane doświadczenie z Databricks, tabelami Delta i nowoczesnymi architekturami danych
Praktyczna znajomość ekosystemu Microsoft Azure, w tym Azure Data Factory i Azure Event Hub
Doświadczenie w budowaniu i utrzymywaniu skalowalnych potoków ETL/ELT
Język angielski na poziomie zaawansowanym
Zainteresowanie nowoczesnymi technologiami oraz doświadczenie w korzystaniu z narzędzi deweloperskich wspomaganych AI w codziennej pracy
Zakres obowiązków
Projektowanie i rozwijanie rozwiązań danych przy użyciu Databricks, Pythona i PySpark
Budowanie i optymalizacja potoków ETL/ELT do przetwarzania danych wsadowych i strumieniowych
Implementacja i utrzymanie architektury medalionowej przy użyciu tabel Delta
Integracja danych z wielu źródeł, w tym plików SFTP, tabel Delta i Azure Event Hub
Praca z usługami Azure, takimi jak Azure Data Factory, w celu wsparcia end-to-end procesów danych
Wykorzystanie narzędzi deweloperskich wspomaganych AI w celu poprawy jakości kodu, testowania, dokumentacji i produktywności