Inżynier danych (przepływ powietrza) w RecruitGarden

Gratulacje! Chcesz stworzyć produkt IT, z którego będą korzystać wszyscy Ukraińcy?

Wpływ na architekturę ogromnym obciążeniem?

Poszukujemy Inżyniera Danych z Python/Airflow dla znanej firmy.

TOP warunki, benefity, ubezpieczenie, projekt, który będzie bądź miły i opowiadaj.

Chcesz dowiedzieć się więcej?

Główne obowiązki:

– Projektowanie, optymalizacja i wsparcie klastra Apache Airflow oraz kodu Pythona do orkiestracji danych
-Rozwój logiki i wsparcie procesów ETL (zbieranie danych, transformacja, loading)
– Projektowanie integracji interakcji pomiędzy systemami, tworzenie usług integracji i wymiany danych
– Optymalizacja wydajności procesów przetwarzania danych, identyfikacja i eliminacja wąskich gardeł
– Współpraca z analitykami i programistami w celu zapewnienia jakości dostarczania danych

Wymagania obowiązkowe:

– Apache Airflow: tworzenie DAG, konfiguracja operatorów, monitorowanie wydajności i optymalizacja
– Doświadczenie z Pythonem (nacisk na backend i integrację rozwiązań) od 3 lat
– Bash, Docker, DBT, GitLab CI/CD (automatyzacja procesów, wdrożenia, optymalizacja rurociągów)
– MS SQL Server i PostgreSQL (pisanie złożonych zapytań SQL, optymalizacja, tworzenie procedur i funkcji)

Będzie plusem:
– Doświadczenie z Apache Spark (rozproszone przetwarzanie dużych zbiorów danych)
– Znajomość narzędzi Big Data lub platform chmurowych (AWS/GCP/Azure)
– Zrozumienie zasad DataOps i CI/CD

Oferujemy:

• Wysoko obciążone systemy z prawdziwymi wyzwaniami skalowalnymi
• Nowoczesny stos i swoboda rozwiązań technologicznych
• Możliwość wpływania na architekturę produktów, z których korzystają miliony
Profesjonaliści:
• Mentoring od seniorów z doświadczeniem korporacyjnym rozwiązania
• Rekompensata dodatkowych kosztów związanych z zadaniami służbowymi realizowana jest zgodnie z wewnętrznymi politykami firmy
• Ubezpieczenia medyczne i na życie
• Zniżki korporacyjne u partnerów Nova
• Wsparcie zdrowia psychicznego. Możliwość bezpłatnych konsultacji z psychologiem korporacyjnym
• Społeczna odpowiedzialność i ruch wolontariacki „Twój za siebie”
• Kluby zainteresowań: bieganie, szachy i inne inicjatywy inspirujące
• Wakacje socjalne i rekompensaty zgodnie z Kodeksem pracy Ukrainy