Старший інженер з даних (Azure Databricks) №14349 в Capgemini Engineering

Мета роботи. Наш клієнт — американська багатонаціональна компанія з інформаційних технологій. Основні завдання та обов’язки. Робота в команді. ПОТРІБНО МАТИ освіту, навички та досвід: Основні навички: Azure Databricks. 7-8 років практичної розробки. Дизайн і розробка додатків за допомогою Azure ADF Databricks. Поглиблене розуміння архітектури Spark, включаючи Spark Core, Spark SQL, кадри даних, Spark Streaming, кешування RDD, Spark MLib. Приємно мати досвід роботи з мовою програмування з Python/SQL або PySpark/Scala. Досвід використання Spark SQL з різні джерела даних, такі як RDBMS, Files, Parquet і Key Value Pair. Досвід створення таблиць, секціонування, групування, завантаження та агрегування даних за допомогою Spark SQL/Scala. Поглиблене розуміння хмари Azure, озера даних і рішень Analytics на Azure. побудувати надходження в ADLS і ввімкнути рівень BI для Analytics. Проектувати та розробляти рішення на Microsoft Azure та пов’язаних технологіях, включаючи ADF, ADLS, AAS, Databricks і Power BI. Проектувати та розробляти надсилання даних за допомогою ADF і рівень обробки за допомогою Databricks. Знання процедури розгортання у хмарі. Повинен мати досвід міграції даних із попередньої системи в хмару. Показати більше Показувати менше Посадовий рівень Старший середній рівень Тип зайнятості Повний робочий день Посадові обов’язки Інформаційні технології Галузі ІТ-послуги та ІТ Консалтинг