Inżynier oprogramowania Big Data [Senior/Lead] w EPAM Systems

Nasz klient jest szwajcarską międzynarodową firmą w dziedzinie nauki i technologii rolniczej, dostawcą nasion i nawozów z ich technologiami. Szukają starszego inżyniera danych, który łączy się z zespołem opartym na dużych zbiorach danych opartych na Cloudrze w AWS. Pracownik będzie pracował z datą jeziora nieokreślonego jeziora, który pobiera dane z wielu baz danych, przechowuje je w AWS S3 , przetwarza je w celu kleju AWS, aby zapewnić dostęp do SQL (ATTENA, Snowflake), a następnie agreguje/oblicza dane za pomocą AWS EMR dla aplikacji w dół za pośrednictwem API AWS Appsync. Co będziesz zaangażować w te dane dotyczące toczenia i implementacji, AWS Glue w celu organizowania danych i dostępu je, a także integracja z innymi usługami chmurowymi i optymalizacją oprogramowania w Apache Spark i PYSPARK w celu przetwarzania tworzenia danych i optymalizacji rozwiązań niezwiązanych z usługą za pomocą AWS Lambda i Orcaction Orcoration Orcoration Orcoration Processface Processface Ustawienia i ustawienia interfejsu API w celu uzyskania dostępu do danych za pośrednictwem AWS AppSyncnc Development High -Performance Solutions do przetwarzania dużych danych za pomocą najlepszych praktyk w dziedzinie wsparcia, testowania i monitorowania zasobów AWS w celu zwiększenia Skuteczność rozwiązań technicznych i procesów komercyjnych dowódców z Big Data co najmniej 4 lata studiów i doświadczenia z AWS, w tym S3, Glue, EMR, Lambda, Athena i Appsync Umiejętności programowania w Python do przetwarzania danych i budowania rozwiązania zasad projektowania i optymalizacji skalowanych i niezawodnych rozwiązań dla dużych zbiorów danych pracujących z systemami podobnymi do SQL, takimi jak Atthena lub właściciela Snowflake w języku angielskim przy zdolności do rozwiązywania kompleksu Szyfrowanie, kontrola, kontrola i ochrona danych osobowych zasad pracy architektur innych niż usługi oraz doświadczenie ich wprowadzenia testów i konserwacji Narzędzia do przetwarzania danych, takie jak KFKA, Presto lub inne rozwiązania do pracy w czasie rzeczywistym z systemami płatków śniegu w celu analizy i przetwarzania danych, które oferujemy dni i dni szpitalne (w tym bez świadectwa lekarskiego) szeroką linię programów ubezpieczeniowych dobrowolnego ubezpieczenia medycznego (DMS) (zapewnienie zarówno leczenia, jak i różnych opcji zapobiegawczych (włącznie iZ zajęciami sportowymi) Ubezpieczenie zdrowotne dla członków rodziny podczas taryf korporacyjnych od firmy podczas podpisów (poród lub adopcja dziecka, małżeństwa itp.) Wsparcie dla komfortu psychicznego: rabaty na usługi specjalistów w zakresie zdrowia psychicznego lub trenerów, trening tematyczny - darmowe epam epam eps Dąży do zapewnienia swoim globalnym zespołowi ponad 60 000 specjalistów w ponad 45 krajach możliwości rozwoju zawodowego od pierwszego dnia współpracy. Nasi koledzy są źródłem sukcesu ERAM, więc cenimy współpracę, staramy się zawsze rozumieć działalność naszych klientów i dążyć do najwyższej jakości standardów. Niezależnie od miejsca, w którym jesteś, dołączysz do oddanej, zróżnicowanej społeczności, która pomoże ci zrealizować swój potencjał tak w pełni, jak to możliwe. Pokaż więcej Pokaż mniej Poziom oficjalny Średnia seniorów Rodzaj zatrudnienia Pełny czas Obowiązki zawodowe Technologie informacyjne, inżynieria i rozwój biznesu Przemysł Opracowanie oprogramowania i usług IT oraz konsultacji informatycznych