Starszy inżynier danych w Intellias

Wyślij wiadomość bezpośrednią do użytkownika, który opublikował ofertę pracy w firmie Intellias Hanna Fetowa Hanna Fetowa Rekruter IT - Intellias Zanurz się głęboko w cyfrowość! Od 20 lat Intellias opracowuje najwyższej klasy rozwiązania cyfrowe dla wiodących światowych firm, utrzymując je w zgodzie z najnowszymi trendami technologicznymi. Dołącz i zapewniaj innowacje na przyszłość!Omówienie projektu: Główny cel projektu: przejście z BigQuery do Databricks i skonfigurowanie DatabricksWymagania: ponad 5 lat praktycznego doświadczenia w inżynierii danych z użyciem Pythona i SQL3+ lata doświadczenia z dostawcami usług w chmurze Azure, DWH usługi (Databricks, BigQuery), magazyny w chmurze (Azure Storage) itp. Duże doświadczenie z narzędziami ETL/ELT/orkiestracji (np. Airflow, ADF) Kierowanie projektowaniem i wdrażaniem hurtowni danych i danych LakesZnajomość praktyk DevOps i potoków CI/CD Doświadczenie w gromadzeniu wymagań i dokumentacji będzie dodatkowym atutem: Doświadczenie z tytułem licencjata lub magistra NoSQL w dziedzinie informatyki, inżynierii lub odpowiednich certyfikatów Azure i Databricks (np. specjalista ds. inżyniera danych). .Znajomość frameworków uczenia maszynowego i technik wizualizacji danych. Obowiązki: Współpraca z interesariuszami biznesowymi i zespołami technicznymi w celu zrozumienia i analizy wymagań dotyczących danych Projektowanie, budowanie, testowanie, i utrzymuj skalowalne systemy danych przy użyciu Azure DatabricksTworzyj potoki przetwarzania danych za pomocą Databricks Notebooks, Python (i bibliotek Python) i innych narzędziZapewnij wydajne procesy ETL i optymalną wydajność danychMonitoruj i poprawiaj niezawodność, wydajność i jakość danychUtrzymuj dokumentację dotyczącą architektury potoku danych i zarządzaniaZapewnij wsparcie techniczne w przypadku problemów związanych z danymi zarówno wewnętrznym inżynierom danych, jak i programistom BI. Zapewnij integralność, spójność i dokładność danych dzięki solidnym środkom zapewniania jakości danych. Sprawdzaj i wspieraj członków zespołu, zapewniając wskazówki i mentoringNadzór i wkład w realizację strategii projektu opartej na danych, dostosowując ją do celów biznesowych Pokaż więcej Pokaż mniej Poziom pozycji Poziom średni starszy Rodzaj zatrudnienia Pełny etat Obowiązki służbowe Inżynieria PrzemysłyUsługi informatyczne i doradztwo informatyczne