Senior Data Engineer / Data Architect – Azure Data Explorer, IoT streaming (Freelance)
⚲ Warszawa, Kraków, Poznań, Gdańsk, Wrocław
26 880 - 33 600 PLN netto (B2B)
Wymagania
- Min. 2–3 pipeline'y danych doprowadzone od zera do produkcji jako architekt lub lead data engineer, z ADX na produkcji w co najmniej jednym
- Ok. 5+ lat doświadczenia w data engineering, w tym strumienie IoT i dane time-series
- Azure Data Explorer (Kusto) i KQL: modelowanie tabel, update policies, materialized views, retention policies, optymalizacja zapytań
- Streaming ingestion na Azure: IoT Hub, Event Hubs, funkcje parsujące (np. Azure Functions), Blob Storage
- Warstwowa architektura danych (raw/Bronze → Silver → agregaty), projektowanie rollupów i agregacji okien czasowych
- Python i Terraform
- Angielski min. B2
Mile widziane
- Dane środowiskowe (spektra, dane wieloparametrowe), przygotowanie danych pod ML, PostgreSQL/PostGIS, edge computing, TypeScript/NestJS
Opis stanowiska
Przejmujesz działający proof of concept strumieniowego pipeline'u pomiarów IoT na Azure i doprowadzasz go do produkcji — od urządzeń edge, przez warstwę raw, po zoptymalizowane dane i rollupy w Azure Data Explorer. Budujesz stream processor z Event Hubs do ADX, projektujesz kaskadę rollupów i agregacji okien czasowych, modelujesz tabele ADX, update policies, materialized views i optymalizujesz zapytania pod duże wolumeny. Oferta dla samodzielnego seniora data engineera/architekta, który prowadził 2–3 pipeline'y od zera do produkcji. Uwaga: to część etatu, freelance, start w listopadzie. W aplikacji wymagany opis 2–3 pipeline'ów z rolą, stackiem, skalą i lekcjami.
🔍 Dekoder Ogłoszenia
✓ Ogłoszenie wygląda transparentnie — brak typowych czerwonych flag.