Utwórz profil, aby pracodawcy mogli Cię znaleźć, otrzymywać lepiej dopasowane oferty pracy i szybciej aplikować.
  • Wyszukiwanie ofert pracy
  • Zapisane
  • Stwórz CV
    Nowe
  • Wynagrodzenia
  • Subskrypcje

Data Engineer GCP

120 - 130 zł / stawka godzinowa
Pełny etat

Square One Resources

Poznań
  • Praca zdalna

Must-have:

  • Bardzo dobra znajomość platformy Google Cloud Platform (GCP) oraz usług chmurowych.
  • Znajomość narzędzia dbt (Data Build Tool) .
  • Doświadczenie na stanowisku Data Analyst lub Data Quality Analyst w organizacji opartej na danych.
  • Bardzo dobra znajomość SQL i PL/SQL, w tym zaawansowanych zapytań bazodanowych.
  • Praktyczna znajomość języka Python.
  • Doświadczenie w zarządzaniu jakością danych (Data Quality Management) oraz stosowaniu zasad Data Governance.
  • Znajomość środowiska Linux oraz skryptowania w Bash.
  • Dobra znajomość ekosystemu Cloudera Hadoop, w tym Apache Spark i Apache Kafka.
  • Znajomość procesów przetwarzania danych, w szczególności ETL oraz przetwarzania danych w czasie rzeczywistym (Real-Time Data Processing).
  • Wykształcenie wyższe (licencjackie lub magisterskie) na kierunku informatyka, analiza danych, statystyka, ekonomia lub pokrewnym.
  • Znajomość języka angielskiego na poziomie minimum B2.

Nice-to-have:

  • Doświadczenie w pracy z procesami CI/CD oraz narzędziami automatyzującymi.
  • Dobra znajomość zagadnień związanych z Data Governance, w tym zarządzania metadanymi (Metadata Management) oraz frameworkami zapewniania jakości danych.
  • Doświadczenie w pracy z różnymi typami systemów źródłowych, takimi jak Kafka, MQ, SFTP, bazy danych, API oraz współdzielone zasoby plikowe.
  • Doświadczenie w projektach międzynarodowych lub realizowanych na wielu rynkach.

Opis projektu

Projekt realizowany dla operatora telekomunikacyjnego, którego celem jest migracja Hurtowni Danych opartej na technologii Oracle do środowiska Google Cloud Platform (GCP).

  • Lokalizacja: hybrydowo – 3 dni pracy z biura w Warszawie lub w pełni zdalnie w przypadku kandydatów spoza Warszawy.

  • Stawka: 120-130 zł/h B2B

  • Proces rekrutacyjny: screeening, rozmowa rekrutacyjna, rozmowa z klientem.

,[Budowa i utrzymanie procesów pobierania danych z róznych zródel do Data Lake., Projektowanie, rozwój i optymalizacja zlozonych potoków danych zapewniajacych niezawodny przeplyw danych., Tworzenie, rozwój i utrzymanie frameworków ulatwiajacych budowe potoków danych., Wdrazanie kompleksowych frameworków testowych dla potoków danych., Wspólpraca z analitykami i naukowcami danych w celu zapewnienia dostarczania wysokiej jakosci danych., Zapewnienie solidnych praktyk w zakresie zarzadzania danymi, bezpieczenstwa i zgodnosci., Badanie i wdrazanie nowych technologii w celu poprawy wydajnosci potoków danych., Wykorzystanie i integracja danych z róznych typów systemów zródlowych, w tym Kafka, MQ, SFTP, bazy danych, API oraz udzialy plików.] Requirements: GCP, dbt, SQL, PL/SQL, Linux, Bash script, Apache Spark, Apache Kafka, CI/CD
Oferta pracy dodana 5 godzin temu