Старший инженер по обработке данных (ИТ-решения) @ Sigma Software в Sigma Software

Ищем старшего инженера по обработке данных, который возглавит небольшую команду по модернизации простой платформы данных в облачный аналитический проект с самообслуживанием.

КЛИЕНТ

Sigma Software предоставляет высококачественные услуги по разработке программного обеспечения, графическому дизайну, тестированию и поддержке. Системы, разработанные для предоставления преимуществ клиентам в автомобильной, телекоммуникационной, авиационной, рекламной, игровой, банковской сферах, сфере недвижимости и здравоохранения.

ПРОЕКТ

В рамках внутреннего проекта Sigma Software мы преследуем две основные цели: автоматизировать отчетность и создать систему анализа данных самообслуживания для Наша компания.

Вы будете отвечать за проектирование и моделирование данных в хранилищах данных и витринах данных с использованием Spark и MS SQL, предоставление этих данных и сотрудничество с инженерами по бизнес-аналитике, составляющими отчеты в Apache Superset, а также другими должностями, использующими такие данные. . Кроме того, вы будете работать с другими членами команды, которые полагаются на эти данные. Часть вашей задачи будет включать в себя переход нашего локального решения в облачную среду.

ТРЕБОВАНИЯ

• Концептуальные знания основ аналитики данных, например, многомерного моделирования, ETL/ELT, инструментов отчетности, управления данными, хранилищ данных, структурированных и неструктурированных данных.
• Хорошее знание SQL и опыт работы с РСУБД, уверенное знание основ баз данных.
• Опыт разработки баз данных и моделирования данных, в идеале с Databricks/Spark.
• Опыт работы с Python.
• Практическое знание форматов сериализации и их компромиссов (столбчатый или строковый).
• Опыт отладки и оптимизации заданий Spark.
• Грамотное письменное и устное общение. навыки
• Уровень английского как минимум выше среднего
• Бакалавр наук в области компьютерных наук или смежной области
• Опыт работы с инструментом бизнес-аналитики приветствуется -есть

Ищу старшего инженера по обработке данных, который возглавит небольшую команду и модернизирует простую платформу данных в облачный аналитический проект с самообслуживанием.

КЛИЕНТ

Sigma Software предоставляет высококачественные услуги по разработке программного обеспечения, графическому дизайну, тестированию и поддержке. Системы, разработанные для предоставления преимуществ клиентам в автомобильной, телекоммуникационной, авиационной, рекламной, игровой, банковской сферах, сфере недвижимости и здравоохранения.

ПРОЕКТ

В рамках внутреннего проекта Sigma Software мы преследуем две основные цели: автоматизировать отчетность и создать систему анализа данных самообслуживания для Наша компания.

Вы будете отвечать за проектирование и моделирование данных в хранилищах данных и витринах данных с использованием Spark и MS SQL, предоставление этих данных и сотрудничество с инженерами по бизнес-аналитике, составляющими отчеты в Apache Superset, а также другими должностями, использующими такие данные. . Кроме того, вы будете работать с другими членами команды, которые полагаются на эти данные. Часть вашей задачи будет включать в себя переход нашего локального решения в облачную среду.

,[Наша цель — создать эффективную систему для сбора, обработки, анализа и визуализации больших объемов данных из различных источников, заложить основу и смоделировать данные, разработать платформу для построенияg и поддержка конвейеров данных, которые собирают данные из разных источников, Создание хранилища данных, Анализ и подготовка описаний доменов в сотрудничестве с бизнес-аналитикой, Создание витрин данных, Разработка модели разрешений с гибким контролем над вертикальным и горизонтальным доступом к данным]

< /p> Требования: Аналитика данных, Databricks, ETL, Spark, SQL, RDBMS, BS, моделирование данных, Python, коммуникативные навыки