Data Engineer (GCP) | Senior / Expert

RITS Group is a rapidly growing IT company seeking a Senior/Expert Data Engineer to join a team developing a modern data platform on Google Cloud Platform (GCP). The project focuses on integrating data from various sources, building efficient pipelines, and delivering high-quality data for analytics and business needs in a hybrid model based in Kraków.

• Projektowanie i rozwój skalowalnych pipeline'ów danych w Google Cloud Platform z wykorzystaniem Python i SQL.
• Integracja danych z usług takich jak BigQuery i Cloud Storage.
• Tworzenie i optymalizacja procesów transformacji danych.
• Współpraca z Data Architectami, Data Delivery Leadami oraz Business Analystami przy projektowaniu rozwiązań.
• Projektowanie modeli danych oraz architektury pipeline'ów.
• Orkiestracja procesów z wykorzystaniem Apache Airflow / Cloud Composer.
• Dbanie o jakość rozwiązań poprzez testy, audytowalność, możliwość ponownego uruchamiania procesów oraz modułową architekturę.
• Współtworzenie procesów CI/CD i automatyzacja wdrożeń.
• Rozwój rozwiązań opartych o Data Lake, Data Warehouse oraz modele Star Schema i Snowflake.

• Bardzo dobra znajomość Google Cloud Platform (GCP).
• Bardzo dobra znajomość Python oraz SQL.
• Doświadczenie z BigQuery i Cloud Storage.
• Praktyczna znajomość Apache Airflow lub Cloud Composer.
• Doświadczenie w budowie i utrzymaniu produkcyjnych pipeline'ów danych.
• Znajomość modelowania danych (Data Lake, DWH, Star Schema, Snowflake).
• Doświadczenie z CI/CD oraz orkiestracją pipeline'ów.
• Umiejętność projektowania skalowalnych i łatwych w utrzymaniu rozwiązań.
• Doświadczenie w obszarze jakości danych, testowania i observability.