Руководитель группы данных (Azure Databricks) # 14348 в Capgemini Engineering

Цель работыНаш клиент — американская многонациональная компания в области информационных технологий. Основные задачи и обязанности. Руководить командой из 2 инженеров. Образование, навыки и опыт ДОЛЖНЫ ИМЕТЬ: Основные навыки: Azure Databricks. 7–8 лет практического опыта разработки. Проектирование и разработка приложений с использованием Azure. ADF Databricks. Глубокое понимание архитектуры Spark, включая Spark Core, Spark SQL, Data Frames, Spark Streaming, RDD-кэширование, Spark MLib. Хорошо иметь опыт программирования на Python/SQL или PySpark/Scala. Опыт использования Spark SQL с различными источники данных, такие как СУБД, файлы, паркет и пара «ключ-значение». Опыт создания таблиц, секционирования, группирования, загрузки и агрегирования данных с использованием Spark SQL/Scala. Глубокое понимание облачных решений Azure, озера данных и аналитики в Azure. Способность создавать прием в ADLS и включение уровня BI для аналитики. Проектирование и разработка решений на Microsoft Azure и связанных с ним технологиях, включая ADF, ADLS, AAS, Databricks и Power BI. Проектирование и разработка приема данных с использованием ADF и уровня обработки с использованием Databricks. Знание процедуры развертывания в облако. Должен иметь опыт миграции данных из локальной среды в облако. Показать больше Показывай меньше Посадовый ровень Помічник Тип занятости Повний рабочий день Посадочные обвязки Информационные технологии Галузи ИТ-послуги и ИТ Консалтинг