Starszy inżynier danych (Azure Databricks) #14349 w Capgemini Engineering

Cel pracyNaszym klientem jest amerykańska międzynarodowa firma informatyczna.Główne zadania i obowiązkiPraca w zespole.Wykształcenie, umiejętności i doświadczenie MUSI POSIADAĆ:Podstawowe umiejętności: Azure Databricks.7-8 lat doświadczenia w programowaniu Projektowanie i tworzenie aplikacji przy użyciu Azure ADF Databricks.Dogłębne zrozumienie architektury Spark, w tym Spark Core, Spark SQL, Data Frames, Spark Streaming, buforowanie RDD, Spark MLib.Dobra znajomość języka programowania z Python/SQL lub PySpark/Scala.Doświadczenie w używaniu Spark SQL z różne źródła danych, takie jak RDBMS, Files, Parquet i Key Value Pair.Doświadczenie w tworzeniu tabel, partycjonowaniu, segmentowaniu, ładowaniu i agregowaniu danych przy użyciu Spark SQL/Scala.Dogłębne zrozumienie rozwiązań Azure Cloud i Data Lake oraz Analytics na platformie Azure.Umiejętność buduj pozyskiwanie do ADLS i włączaj warstwę BI dla Analytics. Projektuj i opracowuj rozwiązania na Microsoft Azure i pokrewnych technologiach, w tym ADF, ADLS, AAS, Databricks i Power BI. Projektuj i opracowuj pozyskiwanie danych przy użyciu ADF i warstwy przetwarzania przy użyciu Databricks. Znajomość procedury wdrażania w chmurze. Wymagane doświadczenie w migracji danych z wersji premium do chmury. Pokaż więcej Pokaż mniej Посадовий рівень Старший середній рівень Тип зайнятості Повний робочий день Посадові обов’язки Інформаційні технології Галузі ІТ-послуги та ІТ Консалтинг