Lead Data Software Engineer w EPAM Ukraine

Nasz klient, znana na całym świecie międzynarodowa firma technologiczna z siedzibą w Kalifornii i jedna z firm technologicznych Wielkiej Piątki, rozszerza współpracę z EPAM.

Specjalizacja klienta:

- elektronika domowa

-Oprogramowanie

- usługi online

Będziesz pracować ze światowej klasy ekspertami i technologiami z serca Doliny Krzemowej, opracowując produkty i usługi, z których codziennie korzystają miliardy ludzi.

Poszukujemy doświadczonego Lead Software Data Engineer, który dołączy do naszego zespołu

Umiejętności

• Ponad 5 lat praktycznego doświadczenia z Big Data: Hadoop (HDFS, YARN lub Mesos), Spark
• Znajomość i praktyczne doświadczenie w wykorzystaniu SQL w kontekście pracy z Big Data: Spark SQL, Hive QL
• Znajomość Sparka
• Optymalizacja planów wykonania platformy Spark przy użyciu interfejsu użytkownika platformy Spark
• Dobra znajomość Scali, w tym bibliotek funkcyjnych Scali (Cats)
• Znajomość podstaw przetwarzania wsadowego i zasad ETL w hurtowniach danych
• Doświadczenie w zakresie orkiestracji danych i znajomość warunków kompletności danych
• Doświadczenie w czyszczeniu danych (przetwarzanie uszkodzonych, błędnych i zduplikowanych danych)
• Znajomość migracji schematów i ewolucji zbiorów danych
• Biegła znajomość języka angielskiego w mowie i piśmie na poziomie co najmniej B2
• Możliwość szybkiego uczenia się i poznawania nowego zestawu narzędzi i technologii wykorzystywanych w projekcie: platform usługowych, dostawców telemetrii, Spark-as-a-Service, systemu zbierania danych i innych

Obowiązki

• Rozwój potoków danych, zadania tworzenia nowych wyjściowych zbiorów danych w ramach rozwoju nowej funkcjonalności
• Adaptacja istniejących potoków danych do integracji z różnymi platformami, narzędziami i usługami
• Błędy edycji w kodzie i danych, które zostały wygenerowane z powodu nieprawidłowej logiki lub implementacji
• Szybka analiza danych i badania w celu wsparcia zespołu zarządzania produktem
• Monitorowanie i eliminacja problemów produkcyjnych z istniejącymi potokami danych
• Opracowanie i wdrożenie kontroli jakości danych (kontrola jakości)
• Planowanie zakresu nowych opracowań: ocena niezbędnych zasobów, planowanie ram czasowych realizacji zadań
• Utrzymanie przejrzystości procesów obsługi zgłoszeń
• Ulepszamy zadania, aplikacje i system, którym zarządzamy we wszystkich aspektach: jakość kodu, złożoność, utrzymanie, dokumentacja
• Komunikuj się z innymi inżynierami danych w zespole, współpracownikami i kierownikami projektów w zakresie statusu, problemów, szacunków, terminów itp.

Będzie zaletą

• Zrozumienie idei i zasad programowania funkcjonalnego
• Doświadczenie w pisaniu i korzystaniu z usług sieciowych
• Doświadczenie z Teradata, Vertica, Oracle lub Tableau
• Doświadczenie z Spark Streaming i Kafką
• Doświadczenie lub znajomość następujących technologii: Apache Iceberg, Trino (Presto), Druid, Cassandra, Blob storage np. AWS
• Doświadczenie ze Splunk
• Znajomość lub doświadczenie z Azkabanem lub Airflow

Z nami możesz

• Pracuj według elastycznego harmonogramu zdalnie lub w dowolnym z naszych wygodnych biur lub przestrzeni coworkingowych na Ukrainie
• Zdobądź niezbędny sprzęt do wykonywania zadań roboczych
• Zmień projekty i stos technologii w ramach EPAM
• Zdobądź doświadczenie w różnych domenach biznesowych (ubezpieczenia, e-commerce, opieka zdrowotna, finanse, podróże, media, sztuczna inteligencja i inne)
• Rozważ opcje relokacji do ponad 30 krajów na całym świecie
• Dołącz do wolontariatu, programów charytatywnych i społeczności (zarówno w kierunkach technicznych, jak i zainteresowaniach)

Pomożemy Ci w rozwoju zawodowym

• Zaplanuj swoją indywidualną ścieżkę kariery razem z managerem
• Otrzymuj regularne informacje zwrotne od współpracowników
• Popraw swój angielski za darmo z certyfikowanymi nauczycielami (Speaking Clubs, kursy przygotowujące do rozmowy z klientem itp.)
• Skorzystaj z bezpłatnych szkoleń i certyfikacji z AWS, GCP lub Azure Clouds
• Skorzystaj z wewnętrznego programu szkoleniowego E-learn (ponad 18 200 specjalistycznych programów szkoleniowych i mentorskich)
• Uzyskaj dostęp do kont firmowych na LinkedIn Learning, Get Abstract i innych zasobach dla partnerów
• Studiuj w Szkole Architektury Rozwiązań z praktykującymi architektami jako nauczycielami
• Rozwijaj się jako lider, dołącz do szkoły Delivery Management, Resource Management, Leadership Essentials i innych
• Ucz się w społecznościach wewnętrznych (ponad 500 spotkań, dyskusji technicznych, sesji burzy mózgów, wydarzeń online i konferencji każdego roku)

Co oferujemy

• Urlopy i dni chorobowe (w tym bez zaświadczenia lekarskiego)
• Szeroka gama programów ubezpieczeniowych Dobrowolnego Ubezpieczenia Medycznego (VMI) z zapewnieniem zarówno leczenia, jak i różnych opcji profilaktycznych (w tym zajęć sportowych)
• Wystawienie ubezpieczenia zdrowotnego dla członków rodziny według stawek korporacyjnych
• Wsparcie firmy podczas ważnych wydarzeń życiowych (narodziny lub adopcja dziecka, ślub itp.)
• Wsparcie komfortu psychicznego: zniżki na usługi specjalistów lub trenerów zdrowia psychicznego, szkolenia tematyczne
• E-kids to darmowy program szkoleniowy z języka programowania dla dzieci użytkowników EPAM
• Przyjemne upominki firmowe

O EPAMie

• ERAM dokłada wszelkich starań, aby zapewnić swojemu światowemu zespołowi ponad 61 600 specjalistów w ponad 45 krajach możliwości rozwoju zawodowego od pierwszego dnia. Źródłem sukcesu firmy ERAM są nasi współpracownicy, dlatego cenimy sobie współpracę, zawsze staramy się zrozumieć biznes naszych klientów i dążymy do najwyższych standardów jakości. Bez względu na to, gdzie jesteś, dołączysz do oddanej, zróżnicowanej społeczności, która pomoże Ci w pełni wykorzystać swój potencjał