Керівник групи даних (Azure Databricks) №14348 в Capgemini Engineering

Мета роботи. Наш клієнт — американська багатонаціональна компанія з інформаційних технологій. Основні завдання та обов’язки Очолюйте команду з 2 інженерів. ПОТРІБНО МАТИ освіту, навички та досвід: Основні навички: Azure Databricks. 7-8 років практичної розробки. Проектування та розробка програм за допомогою Azure. ADF Databricks. Поглиблене розуміння архітектури Spark, включаючи Spark Core, Spark SQL, кадри даних, Spark Streaming, кешування RDD, Spark MLib. Приємно мати досвід роботи з мовою програмування з Python/SQL або PySpark/Scala. Досвід використання Spark SQL з різними джерела даних, такі як RDBMS, Files, Parquet і Key Value Pair. Досвід створення таблиць, секціонування, групування, завантаження та агрегування даних за допомогою Spark SQL/Scala. Поглиблене розуміння хмари Azure, озера даних і рішень Analytics на Azure. Вміння створювати введення в ADLS і вмикання рівня BI для Analytics. Проектування та розробка рішень на Microsoft Azure та пов’язаних технологіях, включаючи ADF, ADLS, AAS, Databricks і Power BI. Проектування та розробка введення даних за допомогою ADF і рівня обробки за допомогою Databricks. Знання процедури розгортання в хмара. Необхідно мати досвід міграції даних із попередньої системи в хмару. Показати більше Показувати менше Посадовий рівень Помічник Тип зайнятості Повний робочий день Посадові обов’язки Інформаційні технології Галузі ІТ-послуги та ІТ Консалтинг