Data Engineer
nr ref: 184/4/2025/PK/90603
W Antal zajmujemy się rekrutacją od ponad 20 lat. Dzięki działaniu w 10 wyspecjalizowanych dywizjach, świetnie orientujemy się w aktualnych trendach branżowych. Precyzyjnie określamy specyfikę stanowiska, klasyfikując kluczowe umiejętności i niezbędne kwalifikacje. Naszą misją jest nie tylko znalezienie kandydata, którego kompetencje wpisują się w wymagania danego ogłoszenia, ale przede wszystkim stanowiska, spełniającego oczekiwania kandydata. Numer rejestru agencji zatrudnienia: 496.
Stanowisko: Data Engineer
Branża: Bankowa
Lokalizacja: Kraków
Forma zatrudnienia: B2B
Tryb pracy: Hybrydowa (Biuro x2/tyg)
Opis stanowiska
Poszukujemy doświadczonego Data Engineera, który dołączy do zespołu technologicznego realizującego projekt z branży finansowej. Głównym celem projektu jest migracja i uruchomienie kluczowych komponentów danych w środowisku chmurowym, w szczególności z wykorzystaniem platformy Azure oraz technologii big data.
Zakres obowiązków
- Analiza i dokumentacja istniejących rozwiązań opartych na GCP i BigQuery
- Projektowanie i implementacja rozwiązań z wykorzystaniem Azure Databricks
- Tworzenie rozwiązań umożliwiających migrację dużych zbiorów danych między dostawcami chmurowymi
- Budowa i uruchamianie złożonych procesów ETL na platformie Azure
- Automatyzacja procesów migracyjnych artefaktów Big Data
- Generowanie danych syntetycznych do testów wydajnościowych
- Programowanie w języku Python z użyciem narzędzi open source
- Współpraca z zespołem developerskim i interesariuszami w celu zapewnienia wysokiej jakości rozwiązań
- Identyfikacja i eliminacja wąskich gardeł wydajnościowych
Wymagania
- Doświadczenie w pracy z platformą chmurową, preferowany Microsoft Azure
- Znajomość technologii Big Data, w szczególności Spark SQL i/lub BigQuery SQL
- Praktyczne doświadczenie w pracy z Azure Databricks
- Bardzo dobra znajomość języka Python
- Doświadczenie w projektowaniu i budowie złożonych procesów ETL
- Znajomość procesów CI/CD oraz narzędzi automatyzacyjnych
- Umiejętność analitycznego podejścia do rozwiązywania problemów
- Doświadczenie w pracy w metodykach zwinnych (Agile)
