Inżynier danych (czas nowojorski) w RecruitGarden

Chcesz dołączyć do produktu fintech w USA z ukraińskim zespołem programistów i bezpośrednią umową B2B? Poszukujemy Inżyniera Danych z Airflow i Spark do tworzenia innowacji w przetwarzaniu big data w sektorze bankowym.

Główne obowiązki

– zarządzaj jakością i integralnością danych

– pomagaj w tworzeniu narzędzi i technologii, aby zapewnić, że dalsi klienci mogą mieć wiarę w dane, których używają

– konserwuj i refaktoryzuj obecne potoki i twórz nowe

– rozwiązuj problemy, przetwarzaj lub optymalizuj potoki o znaczeniu krytycznym dla firmy

– pisz zapytania SQL, aby uwzględnić wymagania produktu i jego wydajność

Wymagania obowiązkowe

– ponad 3 lata doświadczenia w inżynierii danych w tworzeniu kompleksowych potoków danych lub zarządzaniu nimi w dużych, złożonych zbiorach danych.< /p>

– biegła znajomość PySpark lub Spark

– znajomość języka Python

– biegła znajomość MS SQL lub innych relacyjnych baz danych

– poziom języka angielskiego : Upper-Intermediate

– głęboka znajomość Airflow

Oferujemy

– pracę w środowisku aktywnie rozwijający produkt
– przyjazny zespół
– wynagrodzenie powyżej rynku
– duże wyzwanie i duże możliwości