Data Engineer / DataOps Specialist (m/k)
⚲ Warszawa, Śródmieście
130–155 zł netto (+ VAT) / godz.
Wymagania
- Python
- GitLab
- SQL
- Snowflake
- Redshift
- BigQuery
- DBT
- Talend
- Monte Carlo
- Collibra
- Immuta
Opis stanowiska
Nasze wymagania:
Minimum 4 lata na podobnym stanowisku.
Bardzo dobra znajomość: Python, w zakresie manipulacji danymi, pisania skryptów i automatyzacji.
GitLab CI/CD, w zakresie orkiestracji i automatyzacji pipelienów.
Dobra znajomość SQL z umiejętnością pisania wydajnych i zoptymalizowanych zapytań.
Doświadczenie z analitycznymi bazami danych, najlepiej Snowflake.
Doświadczenie z Redshift lub BigQuery.
Umiejętność pisania i wdrażania testów.
Doświadczenie z co najmniej jednym narzędziem ETL.
Komercyjne doświadczenie w zarządzeniu i optymizacji data pipelines oraz data workflow.
Angielski (min B2/C1).
Mile widziane:
Znajomość takich narzędzi jak: DBT, Talend, Monte Carlo, Collibra, Immuta
O projekcie:
Poszukujemy osoby do roli Data Engineer / DataOps Specialist (m/k). Praca jest dedykowana dla międzynarodowej firmy farmaceutycznej.
Głównym celem tej roli jest zarządzanie automatyzacją produktów danych w Snowflake i AWS S3 z poziomu widoków SAP Hana. Strumienie danych są koordynowane z wykorzystaniem dedykowanych zadań GitLab CI/CD. Będziesz również odpowiedzialny za kierowanie zespołem technicznym, wyznaczanie kierunku technicznego oraz zapewnianie najlepszych praktyk w zakresie inżynierii danych i operacji.
Zakres obowiązków:
Tworzenie i rozwój produktów danych w środowiskach Snowflake oraz AWS S3.
Projektowanie, rozwój i utrzymanie pipeline'ów danych z wykorzystaniem GitLab CI/CD.
Optymalizacja oraz utrzymanie procesów przetwarzania danych opartych o widoki SAP HANA.
Zapewnienie wysokiej jakości danych poprzez wdrażanie i rozwój procesów testowania oraz walidacji.
Współpraca z zespołami biznesowymi i technicznymi w celu analizy wymagań oraz dostarczania rozwiązań opartych na danych.
Tworzenie, wdrażanie i promowanie dobrych praktyk w obszarze Data Engineering oraz utrzymania środowisk danych.
Analiza, ocena oraz rekomendowanie nowych narzędzi i technologii wspierających rozwój platform oraz procesów przetwarzania danych.
Oferujemy:
100% pracy zdalnej
Kontrakt B2B
Stawka: (130 - 155) pln/h + VAT
Minimum 4 lata na podobnym stanowisku.
Bardzo dobra znajomość: Python, w zakresie manipulacji danymi, pisania skryptów i automatyzacji.
GitLab CI/CD, w zakresie orkiestracji i automatyzacji pipelienów.
Dobra znajomość SQL z umiejętnością pisania wydajnych i zoptymalizowanych zapytań.
Doświadczenie z analitycznymi bazami danych, najlepiej Snowflake.
Doświadczenie z Redshift lub BigQuery.
Umiejętność pisania i wdrażania testów.
Doświadczenie z co najmniej jednym narzędziem ETL.
Komercyjne doświadczenie w zarządzeniu i optymizacji data pipelines oraz data workflow.
Angielski (min B2/C1).
Mile widziane:
Znajomość takich narzędzi jak: DBT, Talend, Monte Carlo, Collibra, Immuta
O projekcie:
Poszukujemy osoby do roli Data Engineer / DataOps Specialist (m/k). Praca jest dedykowana dla międzynarodowej firmy farmaceutycznej.
Głównym celem tej roli jest zarządzanie automatyzacją produktów danych w Snowflake i AWS S3 z poziomu widoków SAP Hana. Strumienie danych są koordynowane z wykorzystaniem dedykowanych zadań GitLab CI/CD. Będziesz również odpowiedzialny za kierowanie zespołem technicznym, wyznaczanie kierunku technicznego oraz zapewnianie najlepszych praktyk w zakresie inżynierii danych i operacji.
Zakres obowiązków:
Tworzenie i rozwój produktów danych w środowiskach Snowflake oraz AWS S3.
Projektowanie, rozwój i utrzymanie pipeline'ów danych z wykorzystaniem GitLab CI/CD.
Optymalizacja oraz utrzymanie procesów przetwarzania danych opartych o widoki SAP HANA.
Zapewnienie wysokiej jakości danych poprzez wdrażanie i rozwój procesów testowania oraz walidacji.
Współpraca z zespołami biznesowymi i technicznymi w celu analizy wymagań oraz dostarczania rozwiązań opartych na danych.
Tworzenie, wdrażanie i promowanie dobrych praktyk w obszarze Data Engineering oraz utrzymania środowisk danych.
Analiza, ocena oraz rekomendowanie nowych narzędzi i technologii wspierających rozwój platform oraz procesów przetwarzania danych.
Oferujemy:
100% pracy zdalnej
Kontrakt B2B
Stawka: (130 - 155) pln/h + VAT
🔍 Dekoder Ogłoszenia
🔴
kierowanie zespołem technicznym, wyznaczanie kierunku technicznego oraz zapewnianie najlepszych praktyk w zakresie inżynierii danych i operacji
Może oznaczać faktyczne zarządzanie ludźmi lub jedynie bycie technicznym liderem i mentorem bez formalnej władzy nad zespołem.
🔴
Minimum 4 lata na podobnym stanowisku
Często oznacza to poszukiwanie kandydata z doświadczeniem na poziomie seniorskim, który będzie samodzielny i nie będzie wymagał intensywnego wdrożenia.
🔴
optymalizacja oraz utrzymanie procesów przetwarzania danych opartych o widoki SAP HANA
Może sugerować, że praca będzie polegać głównie na pracy z istniejącymi, potencjalnie przestarzałymi lub trudnymi do modyfikacji rozwiązaniami SAP.
🟡
Tworzenie i rozwój produktów danych
Może oznaczać zarówno budowanie od podstaw nowych rozwiązań, jak i rozwijanie istniejących, co może być mniej ekscytujące.
🟢
Komercyjne doświadczenie w zarządzeniu i optymizacji data pipelines oraz data workflow
Podkreśla potrzebę praktycznego, a nie tylko teoretycznego doświadczenia w zarządzaniu i usprawnianiu przepływów danych.