Data Engineer (Apache NiFi / Kafka / CDC)

Wymagane, Apache NiFi, Kafka, CDC, Python

System operacyjny, Windows

O projekcie, W Cyclad współpracujemy z czołowymi międzynarodowymi firmami IT, aby wspierać ich potencjał w dostarczaniu nowoczesnych, przełomowych technologii kształtujących świat przyszłości. Obecnie dla naszego klienta poszukujemy kandydatów na pozycję Data Flow Engineer. Dołącz do zespołu wspierającego kluczową europejską instytucję i rozwijaj swoje kompetencje w międzynarodowym środowisku IT., , Liczba wakatów: 2, Lokalizacja: Warszawa – Wola (okolice Ronda Daszyńskiego), Tryb pracy: model hybrydowy (60% onsite / 40% zdalnie, Forma umowy: B2B/UoP-kwota do doprecyzowania, Branża: bezpieczeństwo/ instytucja publiczna

Twój zakres obowiązków, Projektowanie, implementacja i utrzymanie przepływów danych w Apache NiFi, Budowa i optymalizacja pipeline’ów CDC (real-time / near real-time), Integracje systemów (REST API, JDBC, Kafka), Zarządzanie schematami danych (Avro), metadata i lineage (Apache Atlas), Konfiguracja polityk bezpieczeństwa (Apache Ranger), Monitoring, troubleshooting i optymalizacja wydajności pipeline’ów, Współpraca z zespołami Data Engineering, architektami i biznesem, Tworzenie dokumentacji technicznej (SOP, runbooki), Udział w upgrade’ach i migracjach (CDP / NiFi / Kafka)

Min. 6 lat doświadczenia w obszarze w data engineeringu (w tym min. 2–3 lata praktycznego doświadczenia z Apache NiFi), Bardzo dobra znajomość Kafka i/lub CDC (Change Data Capture), Bardzo dobra znajomość Pythona (automatyzacja, integracje, przetwarzanie danych), Język angielski: min. B2, Wyższe wykształcenie: (licencjat/inżynier lub wyższe), Posiadanie min. jednego z poniższych certyfikatów:, Cloudera Certified Developer for Apache NiFi (lub równoważny), Certyfikat związany z Cloudera DataFlow (CFM) (lub równoważny)

Mile widziane, Doświadczenie w obszarze data governance w CDP (Apache Atlas, Apache Ranger), Znajomość Apache Iceberg

Podział czasu pracy, praca stacjonarna - 60%, praca zdalna - 40%

Tak pracujemy, u klienta, koncentrujesz się na jednym projekcie, masz wpływ na rozwiązania technologiczne

Takie dajemy możliwości rozwoju, budżet rozwojowy, mentoring, szkolenia wewnątrzfirmowe, wsparcie merytoryczne od liderów technologicznych, wymiana wiedzy technicznej w firmie

To oferujemy, Długoterminowy, stabilny projekt, Praca przy zaawansowanych rozwiązaniach Big Data, Prywatną opiekę medyczną wraz z pakietem stomatologicznym (pokrycie 70% kosztów) oraz możliwość rozszerzenia na członków rodziny, Kartę Multisport (również dla osoby towarzyszącej), Ubezpieczenie na życie, Pracę w międzynarodowym, dynamicznym środowisku

Benefity, dofinansowanie zajęć sportowych, prywatna opieka medyczna, dofinansowanie szkoleń i kursów, ubezpieczenie na życie, możliwość pracy zdalnej, elastyczny czas pracy, opieka stomatologiczna, dodatkowe świadczenia socjalne

Cyclad, In Cyclad we work with top international IT companies in order to boost their potential in delivering outstanding, cutting edge technologies that shape the world of the future.

Tak się u nas pracuje,