Data Engineer (GCP / BigQuery / Python) (K/M)

Wymagane, Google Cloud Platform, GitLab, Terraform, Python, SQL, Databricks

O projekcie, Projekt w branży energetycznej obejmuje projektowanie, rozwój i utrzymanie procesów przetwarzania oraz integracji danych w środowisku Google Cloud Platform., Praca dotyczy rozwiązań batch, streaming i CDC, automatyzacji procesów, orkiestracji przepływów danych oraz zapewniania ich jakości i bezpieczeństwa w środowisku multi-cloud.

Tak pracujemy, rozwijasz kilka projektów jednocześnie, masz wpływ na wybór narzędzi i technologii, masz wpływ na rozwiązania technologiczne, koncentrujesz się na rozwoju produktu, agile

Skład zespołu, backend developer, architekt, devOps, data scientist, analityk biznesowy

Twój zakres obowiązków, Analiza wymagań i projektowanie przepływów danych, Budowa i utrzymanie procesów ETL/ELT oraz DAG-ów, Integracja źródeł danych, w tym wykorzystanie mechanizmów CDC, Automatyzacja wdrożeń, CI/CD oraz Infrastructure as Code, Monitorowanie i optymalizacja przetwarzania danych, Zarządzanie uprawnieniami, dokumentacja i code review

Doświadczenie z BigQuery, Doświadczenie z Cloud Composer, Doświadczenie z Pythonem, Praktyczna znajomość Dataproc, Praktyczna znajomość Dataflow, Praktyczna znajomość Datastream, Znajomość SQL, Znajomość GitLab, Znajomość Terraform, Doświadczenie z ekosystemem GCP, Doświadczenie w branży energetycznej, Certyfikacja Google Cloud

Mile widziane, Certyfikat Google Cloud Professional Data Engineer, Doświadczenie z Cloud Run, Doświadczenie z Dataplex Universal Catalog, Doświadczenie z Informatica IDMC, Doświadczenie z SAP Datasphere, Doświadczenie z Azure Databricks

To oferujemy, Praca hybrydowa / zdalna (do ustalenia), Start: ASAP, Czas trwania projektu: 12 miesięcy, Język pracy: polski, Wsparcie formalne podczas onboardingu

Tak pracujemy nad projektem, code review, Continuous Deployment, Continuous Integration, dokumentacja, automatyzacja testów

Takie dajemy możliwości rozwoju, mentoring, szkolenia zewnętrzne, wspieramy wydarzenia dla IT, wymiana wiedzy technicznej w firmie

Benefity, dofinansowanie zajęć sportowych, prywatna opieka medyczna

Etapy rekrutacji, Rozmowa techniczna, Rozmowa z klientem

B2B.NET S.A., B2Bnetwork jest polską firmą, specjalizującą się w obszarze Quality Assurance oraz Outsourcingu specjalistów IT. Od 2015r. zarządzamy w całości procesami testowymi u naszych klientów oraz wspieramy w znalezieniu odpowiednich kompetencji w innych obszarach IT.