Data Engineer
AVENGA (Agencja Pracy, nr KRAZ: 8448)
⚲ Warszawa, Gdynia, Gdańsk
24 360 - 26 040 PLN (B2B)
Wymagania
- SQL Server
- SQL
- ETL
- Kafka
- APIS
Opis stanowiska
Wymagania:
- Data storages (SQL Server - must)- SQL, PL/SQL or TSQL or any database programming SQL- Data modeling- Kafka- APIs
Nice to have:
- DB2- Snowflake and S3 storage- Person who has been building some ETL/Pipelines and understands different techs- The person who understand the Data and Data Landscape.
Codzienne zadania:
- Design and build ETL processes and data pipelines for integrating data across systems
- Enable reliable data sharing between applications
- Ensure data quality, consistency, and availability
- Monitor and optimize pipeline performance
- Collaborate with engineering and business teams on data requirements
- Data storages (SQL Server - must)- SQL, PL/SQL or TSQL or any database programming SQL- Data modeling- Kafka- APIs
Nice to have:
- DB2- Snowflake and S3 storage- Person who has been building some ETL/Pipelines and understands different techs- The person who understand the Data and Data Landscape.
Codzienne zadania:
- Design and build ETL processes and data pipelines for integrating data across systems
- Enable reliable data sharing between applications
- Ensure data quality, consistency, and availability
- Monitor and optimize pipeline performance
- Collaborate with engineering and business teams on data requirements
🔍 Dekoder Ogłoszenia
🔴
Person who has been building some ETL/Pipelines and understands different techs
Osoba, która ma doświadczenie w tworzeniu procesów ETL i potoków danych, ale zakres i głębokość tego doświadczenia nie są jasno określone.
🔴
The person who understand the Data and Data Landscape.
Oczekuje się od kandydata szerokiego zrozumienia danych i ich kontekstu, co może być trudne do zmierzenia i może oznaczać potrzebę szybkiego uczenia się.
🟡
Collaborate with engineering and business teams on data requirements
Może oznaczać konieczność częstego tłumaczenia złożonych kwestii technicznych na język biznesowy i odwrotnie, co wymaga dobrych umiejętności komunikacyjnych.
🟡
Enable reliable data sharing between applications
Wymaga zapewnienia stabilności i bezpieczeństwa przepływu danych między różnymi systemami, co może być technicznie wymagające.
🟡
Monitor and optimize pipeline performance
Oznacza odpowiedzialność za bieżące śledzenie wydajności potoków danych i wprowadzanie usprawnień, co może wymagać ciągłego zaangażowania.