Kierownik zespołu danych (Azure Databricks) #14348 w Capgemini Engineering

Cel pracyNaszym klientem jest amerykańska międzynarodowa firma informatyczna.Główne zadania i obowiązkiKierowanie zespołem 2 inżynierów.Wykształcenie, umiejętności i doświadczenie MUSI POSIADAĆ:Podstawowe umiejętności: Azure Databricks.7-8 lat doświadczenia w programowaniu Projektowanie i tworzenie aplikacji przy użyciu platformy Azure ADF Databricks.Dogłębne zrozumienie architektury Spark, w tym Spark Core, Spark SQL, Data Frames, Spark Streaming, buforowanie RDD, Spark MLib.Dobra znajomość języka programowania z Python/SQL lub PySpark/Scala.Doświadczenie w używaniu Spark SQL z różnymi źródła danych, takie jak RDBMS, Files, Parquet i pary klucz-wartość.Doświadczenie w tworzeniu tabel, partycjonowaniu, segmentowaniu, ładowaniu i agregowaniu danych przy użyciu Spark SQL/Scala.Dogłębna znajomość rozwiązań Azure Cloud i Data Lake oraz Analytics na platformie Azure.Umiejętność tworzenia pozyskiwanie do ADLS i włączanie warstwy BI dla Analytics. Projektowanie i tworzenie rozwiązań na Microsoft Azure i pokrewnych technologiach, w tym ADF, ADLS, AAS, Databricks i Power BI. Projektowanie i opracowywanie pozyskiwania danych przy użyciu ADF i warstwy przetwarzania przy użyciu Databricks. Znajomość procedury wdrażania w chmura. Wymagane doświadczenie w migracji danych z wersji premium do chmury. Pokaż więcej Pokaż mniej Посадовий рівень Помічник Тип зайнятості Повний робочий день Посадові обов’язки Інформаційні технології Галузі ІТ-послуги та ІТ Консалтинг