Data Engineer Senior (F/M)
20160 - 23520 złB2Bnetwork
O projekcie Zespół buduje rozwiązania Data Lake/DWH dla dużego środowiska bankowego, obejmujące zasilanie danych online i offline w środowisku on-prem oraz GCP. Rola łączy modelowanie danych, budowę pipeline'ów ETL/ELT i tuning SQL, zgodnie z modelem DevSecOps. Twój zakres obowiązków Projektowanie i realizacja rozwiązań zasilania danych Budowa pipeline'ów ETL/ELT Praca z Oracle, PostgreSQL, BigQuery i Informatica PowerCenter Praca z Kafka/Pub/Sub Tuning zapytań SQL on-prem i w GCP Tworzenie rozwiązań ładowania danych w Pythonie i Rust Modelowanie danych i przygotowywanie datamartów Wsparcie testów, wdrożeń i rozwiązywania incydentów Nasze wymagania Doświadczenie w budowie rozwiązań Data Lake/DWH i datamartów Doświadczenie w projektowaniu i utrzymaniu pipeline'ów ETL/ELT Ekspercka znajomość Oracle i PostgreSQL (projektowanie, tuning SQL) Znajomość Google BigQuery Praktyczna znajomość Informatica PowerCenter Znajomość Kafka/Pub/Sub Znajomość Linuxa na poziomie zaawansowanym Doświadczenie w testach, wdrożeniach i rozwiązywaniu incydentów Gotowość do pracy w modelu DevSecOps Mile widziane Python Airflow Rust Apache Spark