Data Engineer (F/M)
⚲ Warszawa
Do uzgodnienia
Wymagania
- SQL
- ETL
- Cloud
- Big Data
Opis stanowiska
O projekcie
Poszukujemy Data Engineera do projektu z obszaru CRM i zaawansowanej analityki danych. Zespół rozwija rozwiązania wspierające budowę profilu klienta 360 stopni, systemy rekomendacyjne, Real Time Decisioning oraz procesy Next Best Action/Next Best Activity. Rola obejmuje projektowanie struktur danych wykorzystywanych przez systemy analityczne, kampanijne i operacyjne. Istotnym elementem projektu jest przetwarzanie dużych wolumenów danych, budowa stabilnych pipeline ETL/ELT oraz integracja ekosystemu CRM z innymi systemami organizacji.
Zakres obowiązków
• projektowanie, budowa i optymalizacja struktur danych dla systemów Real Time Decisioning, silników rekomendacyjnych oraz rozwiązań Next Best Action/Next Best Activity
• tworzenie struktur danych wspierających profil klienta 360 stopni oraz Customer Golden Record
• budowa agregatów behawioralnych i cech wykorzystywanych przez modele analityczne
• rozwój pipeline ETL/ELT działających w trybie batchowym, near real time oraz event driven
• przygotowywanie struktur danych na potrzeby raportowania i zaawansowanej analityki
• projektowanie i budowa interfejsów pomiędzy ekosystemem CRM a systemami operacyjnymi
• integracja rozwiązań analitycznych z platformami Campaign Management, systemami rekomendacyjnymi i silnikami decyzyjnymi
• optymalizacja zapytań SQL oraz procesów przetwarzania dużych wolumenów danych
• implementacja mechanizmów kontroli jakości, monitoringu i walidacji danych
• współpraca z zespołami biznesowymi, analitycznymi, CRM i IT
Wymagania
• minimum 4 lata doświadczenia na stanowisku Data Engineer
• doświadczenie w projektowaniu i modelowaniu struktur danych dla hurtowni danych, Data Lake lub zaawansowanej analityki
• praktyczne doświadczenie z rozwiązaniami działającymi w czasie rzeczywistym, near real time lub event driven
• doświadczenie w przetwarzaniu bardzo dużych wolumenów danych
• bardzo dobra znajomość SQL oraz doświadczenie w optymalizacji zapytań i struktur danych
• doświadczenie w budowie i utrzymaniu pipeline ETL/ELT
• praktyczna znajomość platform chmurowych, preferencyjnie Google Cloud Platform
• doświadczenie z technologiami Big Data
• znajomość narzędzi do orkiestracji procesów
• znajomość formatów danych zoptymalizowanych pod analitykę, takich jak Parquet, Avro lub ORC
• doświadczenie w integracji systemów analitycznych z systemami operacyjnymi
• znajomość zasad kontroli jakości i walidacji danych
• doświadczenie w pracy w Agile/Scrum
Dodatkowym atutem będzie
• doświadczenie w projektach związanych z CRM, personalizacją lub kampaniami marketingowymi
• znajomość danych CRM, w tym zgód marketingowych, historii kontaktów oraz optout
• doświadczenie w budowie profilu klienta 360 stopni, Customer Golden Record, agregatów behawioralnych lub Feature Store
• znajomość rozwiązań takich jak Pega, Salesforce, SAS lub Adobe
• doświadczenie w migracji platform danych lub systemów CRM
• doświadczenie w sektorze bankowym, ubezpieczeniowym, telekomunikacyjnym, fintech, retail lub e commerce
Oferujemy
• długoterminową współpracę w projekcie o dużej skali danych
• udział w budowie rozwiązań CRM, Customer 360 i Real Time Decisioning
• pracę z technologiami chmurowymi i Big Data
• realny wpływ na architekturę oraz sposób przetwarzania danych
• współpracę z doświadczonymi zespołami data, CRM i IT
• hybrydowy model pracy z biura w Warszawie
Poszukujemy Data Engineera do projektu z obszaru CRM i zaawansowanej analityki danych. Zespół rozwija rozwiązania wspierające budowę profilu klienta 360 stopni, systemy rekomendacyjne, Real Time Decisioning oraz procesy Next Best Action/Next Best Activity. Rola obejmuje projektowanie struktur danych wykorzystywanych przez systemy analityczne, kampanijne i operacyjne. Istotnym elementem projektu jest przetwarzanie dużych wolumenów danych, budowa stabilnych pipeline ETL/ELT oraz integracja ekosystemu CRM z innymi systemami organizacji.
Zakres obowiązków
• projektowanie, budowa i optymalizacja struktur danych dla systemów Real Time Decisioning, silników rekomendacyjnych oraz rozwiązań Next Best Action/Next Best Activity
• tworzenie struktur danych wspierających profil klienta 360 stopni oraz Customer Golden Record
• budowa agregatów behawioralnych i cech wykorzystywanych przez modele analityczne
• rozwój pipeline ETL/ELT działających w trybie batchowym, near real time oraz event driven
• przygotowywanie struktur danych na potrzeby raportowania i zaawansowanej analityki
• projektowanie i budowa interfejsów pomiędzy ekosystemem CRM a systemami operacyjnymi
• integracja rozwiązań analitycznych z platformami Campaign Management, systemami rekomendacyjnymi i silnikami decyzyjnymi
• optymalizacja zapytań SQL oraz procesów przetwarzania dużych wolumenów danych
• implementacja mechanizmów kontroli jakości, monitoringu i walidacji danych
• współpraca z zespołami biznesowymi, analitycznymi, CRM i IT
Wymagania
• minimum 4 lata doświadczenia na stanowisku Data Engineer
• doświadczenie w projektowaniu i modelowaniu struktur danych dla hurtowni danych, Data Lake lub zaawansowanej analityki
• praktyczne doświadczenie z rozwiązaniami działającymi w czasie rzeczywistym, near real time lub event driven
• doświadczenie w przetwarzaniu bardzo dużych wolumenów danych
• bardzo dobra znajomość SQL oraz doświadczenie w optymalizacji zapytań i struktur danych
• doświadczenie w budowie i utrzymaniu pipeline ETL/ELT
• praktyczna znajomość platform chmurowych, preferencyjnie Google Cloud Platform
• doświadczenie z technologiami Big Data
• znajomość narzędzi do orkiestracji procesów
• znajomość formatów danych zoptymalizowanych pod analitykę, takich jak Parquet, Avro lub ORC
• doświadczenie w integracji systemów analitycznych z systemami operacyjnymi
• znajomość zasad kontroli jakości i walidacji danych
• doświadczenie w pracy w Agile/Scrum
Dodatkowym atutem będzie
• doświadczenie w projektach związanych z CRM, personalizacją lub kampaniami marketingowymi
• znajomość danych CRM, w tym zgód marketingowych, historii kontaktów oraz optout
• doświadczenie w budowie profilu klienta 360 stopni, Customer Golden Record, agregatów behawioralnych lub Feature Store
• znajomość rozwiązań takich jak Pega, Salesforce, SAS lub Adobe
• doświadczenie w migracji platform danych lub systemów CRM
• doświadczenie w sektorze bankowym, ubezpieczeniowym, telekomunikacyjnym, fintech, retail lub e commerce
Oferujemy
• długoterminową współpracę w projekcie o dużej skali danych
• udział w budowie rozwiązań CRM, Customer 360 i Real Time Decisioning
• pracę z technologiami chmurowymi i Big Data
• realny wpływ na architekturę oraz sposób przetwarzania danych
• współpracę z doświadczonymi zespołami data, CRM i IT
• hybrydowy model pracy z biura w Warszawie
🔍 Dekoder Ogłoszenia
🟡
zaawansowanej analityki danych
Może oznaczać zarówno pracę z nowoczesnymi narzędziami i technikami, jak i rutynowe przygotowywanie danych do prostych analiz.
🔴
budowa stabilnych pipeline ETL/ELT
Może oznaczać pracę z istniejącymi, ale wymagającymi poprawy systemami, a niekoniecznie budowanie od zera.
🟡
przetwarzanie dużych wolumenów danych
Może oznaczać pracę z danymi, które są duże, ale niekoniecznie wymagają skomplikowanych, zaawansowanych technik przetwarzania.
🔴
optymalizacja zapytań SQL
Może sugerować, że istniejące zapytania są nieefektywne i wymagają gruntownej przebudowy, a nie tylko drobnych usprawnień.
🟡
współpraca z zespołami biznesowymi
Może oznaczać konieczność częstego tłumaczenia technicznych zagadnień na język biznesu i zarządzania oczekiwaniami.