Starszy inżynier danych (BigQuery/Spark, Ukraina) #14667 w Capgemini Engineering

Cel Jobiem szuka doświadczonego inżyniera danych, który dołączyłby do naszego rozwijającego się zespołu ekspertów ds. Analizy. Zatrudnienie będzie odpowiedzialne za rozszerzenie i optymalizację naszej architektury danych i danych danych, a także za optymalizację przepływu danych i gromadzenia dla zespołów międzyfunkcyjnych. Idealnym kandydatem jest doświadczony konstruktor rurociągów danych i wrangler danych, który lubi optymalizację systemów danych i budować je od podstaw. Inżynier danych będzie wspierać naszych programistów oprogramowania, architektów baz danych, analityków danych i naukowców danych w zakresie inicjatyw danych i zapewni optymalną architekturę dostarczania danych jest spójna w trwających projektach. Muszą być samozwańczym i wygodnym, wspierając potrzeby danych wielu zespołów, systemów i produktów. Właściwy kandydat będzie podekscytowany perspektywą optymalizacji, a nawet przeprojektowania architektury danych naszej firmy w celu wsparcia naszej netto inicjatyw produktów i danych. Zadania i obowiązki Zmarowaj i utrzymują optymalne architektura architektury architektury. Niefunkcjonalne wymagania biznesowe Zidentyfikuj, projektowanie i wdrażanie wewnętrznych ulepszeń procesów: automatyzacja procesów ręcznych, optymalizacja dostarczania danych, przeprojektowanie infrastruktury dla większej Skalowalność, wydajność itp. Wybuduj infrastrukturę wymaganą do optymalnej ekstrakcji, transformacji i ładowania danych z wielu różnych źródeł danych za pomocą SQL i Big Data TechnologiesBuild Analytics, które wykorzystują rurociąg danych, aby zapewnić możliwy do działania w zakresie pozyskiwania klientów, zarządzania przychodami, zarządzaniem przychodami , wydajność operacyjna i inne kluczowe wskaźniki wydajności biznesowej z zainteresowanymi stronami, w tym zespołami wykonawczymi, produktowymi, danymi i projektowymi Problemy techniczne związane z danymi i ich infrastruktura danych Wspierają nasze dane oddzielone i bezpieczne między granicami krajowymi za pośrednictwem wielu centrów danych i AWS RegionsCreate Data Tools dla członków zespołu analitycznego i danych, które pomagają im w budowaniu i optymalizacji naszych ofert z ekspertami danymi i analitykami, aby ekspertami danymi danych i analityki dąży do większej funkcjonalności w naszym systemie systemowym, umiejętności i doświadczenie muszą mieć: ponad 4 -letnie doświadczenie w inżyniera danych RoleexPerience Pracując z relacyjnymi bazami danych i danymi Magazyny, w tym GCP BigQuery, Postgres, Microsoft SQL Server, Oracle itp. Eksperience z systemami przetwarzania strumieniowego: Spark i/lub Streaming Kafka itp. Język programowania i skryptów: Python/Scala/JavaExperience z dużymi danych narzędzi , Hive, HBase itp. Podróżowanie z repozytoriami danych NoSQL, najlepiej elastyczne Wyszukiwarki Budowanie i optymalizacja rurociągów, architektur i danych Data Pokaż więcej Pokaż mniej Посаrawaadanie р ввень Старший середнйй рівень Тип зайнятоSt Pełny czas Obowiązki zawodowe Technologie informacyjne Przemysł Usługi IT i konsultacje informatyczne