Inżynier danych w Lyft

Naszą misją w Lyft jest poprawa życia ludzi dzięki najlepszemu transportowi na świecie. Aby to osiągnąć, zaczynamy od naszej własnej społeczności, tworząc otwartą, włączającą i zróżnicowaną organizację. W Lyft dane to jedyny sposób, w jaki podejmujemy decyzje. Jest to rdzeń naszej działalności, pomagający nam tworzyć doświadczenia transportowe dla naszych klientów oraz zapewniający wgląd w skuteczność wprowadzania na rynek naszych produktów i funkcji. Jako inżynier danych w Lyft będziesz częścią zespołu na wczesnym etapie, który buduje transport, gromadzenie i przechowywanie danych oraz udostępnia usługi, dzięki którym dane są obywatelami pierwszej klasy w Lyft. Poszukujemy Inżyniera Danych do budowy skalowalnej platformy danych. Będziesz aktywnie proponować nowe pomysły, oceniać wiele podejść i wybierać najlepsze w oparciu o podstawowe cechy i dane pomocnicze. Komunikuj problemy techniczne, współpracując z naszym interdyscyplinarnym zespołem. Będziesz właścicielem naszego podstawowego potoku danych, który zasila najważniejsze wskaźniki Lyft; Będziesz także korzystać z wiedzy o danych, aby pomóc w rozwijaniu modeli danych w kilku komponentach stosu danych; Pomożesz w projektowaniu, budowaniu i uruchamianiu skalowalnych potoków danych, aby zaspokoić rosnące potrzeby Lyft w zakresie przetwarzania i analityki danych. Twoje wysiłki umożliwią dostęp do analiz zachowań biznesowych i użytkowników, wykorzystując ogromne ilości danych Lyft do zasilania różnych zespołów, takich jak analityka, analityka danych, inżynieria i wiele innych. Obowiązki: Posiadacz głównego potoku danych firmy, odpowiedzialny za skalowanie przepływ przetwarzania danych w celu zaspokojenia szybkiego wzrostu danych w LyftEvolve model danych i schemat danych w oparciu o potrzeby biznesowe i inżynieryjneWdrażanie i wdrażanie systemów śledzących jakość i spójność danychProponowanie i rozwijanie narzędzi wspierających samoobsługowe zarządzanie potokiem danych (ETL)SQL i MapReduce dostrajanie zadań w celu poprawy wydajność przetwarzania danych Kieruj planem technicznym zespołu DE i dopasowuj go do zespołu i interesariuszy Twórz dobrze przygotowany, dobrze przetestowany, czytelny i łatwy w utrzymaniu kod, mając na uwadze koszty i skalowalność infrastruktury danych. Weź udział w przeglądach kodu, aby zapewnić jakość kodu i rozpowszechniać wiedzę. Weź udział w: rotacje połączeń w celu zapewnienia wysokiej dostępności i niezawodności przepływów pracy i danychOdblokuj, wspieraj i komunikuj się z partnerami wewnętrznymi i zewnętrznymi w celu osiągnięcia wynikówDoświadczenie: ponad 5 lat odpowiedniego doświadczenia zawodowegoDoświadczenie z platformą SparkDoświadczenie z Hadoop (lub podobnym) ekosystemem, S3, DynamoDB, MapReduce, Yarn , HDFS, Hive, Spark, Presto, Pig, HBase, ParquetDoskonała znajomość języka skryptowego (Python, Bash itp.)Doświadczenie w kierowaniu budowaniem złożonych modeli danych i potoków Biegła znajomość co najmniej jednego z języków SQL (MySQL, PostgreSQL itp.) Ponad 4 lata doświadczenia z narzędziami do zarządzania przepływem pracy (Airflow lub podobnymi) Doświadczenie w bezpośredniej pracy z wielofunkcyjnymi analitykami danych, analitykami danych i zespołami inżynierskimi w celu powiązania celów biznesowych Lyft z inżynierią danych Preferowane doświadczenie w budowaniu i utrzymywaniu tabel danych związanych z obsługą klienta jako Inżynier Danych dla dużych organizacji Korzyści: Profesjonalne i stabilne środowisko pracy. Najnowsza technologia i sprzęt, jakiego potrzebujesz. Zajęcia z języka angielskiego z native speakerami.Pmożliwość pracy zdalnej, w tym poza granicami kraju (w zależności od zezwoleń na pracę) 28 dni kalendarzowych urlopu i do 5 płatnych dni wolnych 18 tygodni płatnego urlopu rodzicielskiego. Do świadczeń z tytułu budowania rodziny kwalifikują się rodzice biologiczni, adopcyjni i zastępczy. Na Ukrainie ta rola jest całkowicie odległa, kandydaci na to stanowisko muszą mieszkać na Ukrainie. Pokaż więcej Pokaż mniej Poziom pozycji Poziom średni starszy Rodzaj zatrudnienia Pełny etat Obowiązki służbowe Technologie informacyjne Przemysły Naziemny transport pasażerski