Starszy inżynier danych (ADF/Notebooki/Databricks, Ukraina) #14691 w Capgemini Engineering

Cel pracy Poszukujemy doświadczonego inżyniera danych, który dołączy do naszego rosnącego zespołu ekspertów ds. analityki. Osoba zatrudniona będzie odpowiedzialna za rozbudowę i optymalizację naszej architektury danych i potoków danych, a także optymalizację przepływu i gromadzenia danych dla zespołów wielofunkcyjnych. Idealny kandydat to doświadczony twórca potoków danych i administrator danych, który lubi optymalizować systemy danych i budować je od podstaw. Inżynier danych będzie wspierać naszych twórców oprogramowania, architektów baz danych, analityków danych i badaczy danych w inicjatywach związanych z danymi oraz zapewni spójność optymalnej architektury dostarczania danych w trakcie trwających projektów. Muszą być samodzielni i swobodnie obsługiwać potrzeby wielu zespołów, systemów i produktów w zakresie danych. Właściwy kandydat będzie podekscytowany perspektywą optymalizacji lub nawet przeprojektowania architektury danych naszej firmy w celu wspierania naszej sieciowej generacji produktów i inicjatyw dotyczących danych. Główne zadania i obowiązki Tworzenie i utrzymywanie optymalnej architektury potoku danych, Montaż dużych, kompletnych zbiorów danych spełniających wymagania funkcjonalne/niefunkcjonalne wymagania biznesowe. Zidentyfikowane, zaprojektowane i wdrożone ulepszenia procesów wewnętrznych: automatyzacja procesów ręcznych, optymalizacja dostarczania danych, przeprojektowanie infrastruktury w celu uzyskania większej skalowalności, wydajności itp. Zbuduj infrastrukturę wymaganą do optymalnej ekstrakcji, transformacji i ładowania danych z szerokiej gamy danych źródła wykorzystujące technologię SQL i big data. Twórz narzędzia analityczne, które wykorzystują potok danych, aby zapewnić praktyczny wgląd w pozyskiwanie klientów, zarządzanie przychodami, efektywność operacyjną i inne kluczowe wskaźniki wydajności biznesowej. Współpracuj z interesariuszami, w tym z zespołami wykonawczymi, produktami, danymi i projektami, aby pomagać w rozwiązywaniu problemów technicznych związanych z danymi i wspierać ich potrzeby w zakresie infrastruktury danych. Twórz narzędzia danych dla członków zespołu analityków i analityków danych, które pomagają im w budowaniu i optymalizowaniu naszych ofert. Współpracuj z ekspertów w dziedzinie danych i analityki, aby dążyli do większej funkcjonalności naszych systemów danych. Wykształcenie, umiejętności i doświadczenie MUSZĄ MIEĆ: Doświadczenie w pracy z ADF, notatnikami, Databricks, Databricks Delta Live Tables, technologiami magazynowania i powiązanymi wzorcami. Znajomość usług PAAS związanych z danymi, analityką, i interfejsy integracyjne – Databricks itp. Zrozumienie wyzwań związanych z bezpieczeństwem danych i narzędzi w przypadku określonych technologii (np. Databricks) Doświadczenie z programowaniem i językami skryptowymi: Baza kodu Python dla ETL Pokaż więcej Pokaż mniej Посадовий рівень Старший середній рівень Тип зайнятості Повний робочий день Посадові обов’язки Інформаційні технології ГалузіUsługi informatyczne i doradztwo informatyczne