Spark / Data Lakehouse Developer
HIBERUS POLAND SPÓŁKA Z OGRANICZONĄ ODPOWIEDZIALNOŚCIĄ
⚲ Wrocław, Stare Miasto
20 160–26 880 zł netto (+ VAT) / mies.
Wymagania
- min. 4 lata doświadczenia z Apache Spark w środowisku produkcyjnym
- bardzo dobra znajomość PySpark, Spark SQL, DataFrames i Structured Streaming
- doświadczenie z MongoDB i Spark Connector oraz modelowaniem i indeksowaniem danych
- praktyczna znajomość Apache Iceberg i architektury Data Lakehouse
- doświadczenie w CI/CD z Jenkins, w tym automatyzacja testów i deploymentów Spark
- znajomość Prometheus i Grafana w monitoringu i observability
- doświadczenie w Scrum/Kanban oraz znajomość Jira i Confluence
Opis stanowiska
Projekt dla klienta z sektora finansowego w zespole Data Platform — budowa i utrzymanie warstw Data Lakehouse (Raw → Bronze → Silver → Gold) oraz procesów rekoncyliacji i synchronizacji danych w ODS opartym na MongoDB. Będziesz pisać procesy Spark SQL/PySpark, implementować reguły jakości danych i dbać o observability. To oferta dla inżyniera z produkcyjnym doświadczeniem w Sparku, który lubi pracować blisko danych i wydajności.
🔍 Dekoder Ogłoszenia
✓ Ogłoszenie wygląda transparentnie — brak typowych czerwonych flag.