Средний\старший инженер по данным (DP) в Sigma Software

Мы ищем мотивированного и целеустремленного человека, который присоединится к нашей динамичной команде. В нашей команде высоко ценятся свобода сотрудников, независимость в принятии решений, стремление глубоко понять запросы клиентов и выявить корень проблемы. Мы считаем, что людям, которые придерживаются такого мышления, суждено добиться успеха и стать признанными профессионалами и движущей силой в области разработки данных в Украине.

КЛИЕНТ
Наш клиент — это общественная торговая площадка моды с более чем 30 миллионами зарегистрированных пользователей в более чем 150 странах. Это платформа для открытия и прославления личного стиля, а также продвижения устойчивой моды путем продления срока службы миллионов предметов одежды. Основанная в 2011 году со штаб-квартирой в Лондоне и офисами в Манчестере и Нью-Йорке, у нашего Клиента работает около 400 человек. В 2021 году он стал 100% дочерней компанией Etsy, но продолжает работать независимо. Компания привержена разнообразию, инклюзивности и справедливому процессу найма, поддерживая спонсорство виз для определенных должностей и наборов навыков.

Описание работы

• Участие в исследованиях новых технологий и разработке комплексных решений, поддержка культуры инноваций путем рассмотрения вопросов безопасности, масштабируемости и надежности с упором на построение наших процессов ETL.
• Работа с современными данными стек, предлагать хорошо продуманные технические решения и надежный код, а также внедрять процессы управления данными.
• Работа и профессиональное общение с командой клиента.
• Принятие на себя ответственности за предоставление основных функций решения.
• li>
• Участие в процессе сбора и уточнения требований, предложение оптимальных стратегий архитектуры и руководство реализацией архитектуры данных.
• Разработка основных модулей и функций, проектирование масштабируемых и экономически эффективных решений.
• li>Проведение проверок кода, написание модульных и интеграционных тестов.
• Масштабирование распределенной системы и инфраструктуры на новый уровень.
• Создание платформы данных с использованием возможностей облачного провайдера AWS.

Квалификации

• 3+ лет опыта работы с Python как языком программирования для конвейеров данных и связанных с ним инструментов.
• Знание и понимание распределенной обработки данных с помощью Spark для оптимизации и мониторинга конвейеров данных. рабочих нагрузок
• Подтвержденный успешный опыт преобразования данных с помощью инструментов построения данных.
• Отличная реализация лучших практик моделирования данных и хранилищ данных.
• Опыт работы с Looker с квалификация разработчика (не пользователя), а также наличие опыта работы с LookML
• Strong Data Domain — понимание того, как работают инженеры данных, специалисты по обработке данных, инженеры-аналитики и аналитики, чтобы уметь тесно сотрудничать с ними и понимать их потребности.
• Хорошие письменные и устные навыки общения на английском языке.
• Знание лучших практик разработки программного обеспечения: тестирование, PR, Git, обзоры кода, проектирование кода, выпуск< /li>
• Подтвержденный успешный опыт создания платформ данных и управления инфраструктурой для Airflow и Databricks.

БЫЛО ПЛЮС

• Сертификация данных в области инженерии данных или аналитики данных.
• 2 или более года опыта работы с Databricks и Airflow.
• Опыт работы с группами DAG и инструментами оркестрации.
• Опыт разработки данных на основе Snowflake. складов
• Опыт разработки событийно-ориентированных конвейеров данных
  
  __________________________________________________________________
  Наш Клієнт — это громадский маркетплейс моди с 30 миллионами зареставрированных клиентов на сумму не более 150 крон. Эта платформа для поиска и повышения индивидуального стиля, которая стала причиной появления мод, продлевающих жизнь миллионам одиницких людей. Основана в 2011 году, со штаб-квартирой в Лондоне и офисами в Манчестере и Нью-Йорке, компания нашего Клиента насчитывает около 400 специалистов. В 2021 году в ее истории стала дочерняя компания Etsy, но продолжает работать независимо. Компания работает с разносторонностью, инклюзивностью и справочными процессами подбора персонала, а также предлагает спонсорство для отдельных ролей и наборов навичек.
  
  Я заинтересована в этом, и это важно для людей. Наша динамическая команда. Наша высокая свобода в создании команд, незавершенность в принятии решений и бажання глубокого разума запиты клиентов и виативати корень проблем. Мы знаем, что люди, которые подражают такому способу замешательства, применяются к успехам, которые имеют визовые профессионалы и рушины сили развернуть в Украине.
  
  Объявления
• Участие в внедрении новых технологий и разработке комплексных решений, поддержание инноваций в сфере питания без пеки, масштабированности и надежности, с акцентом на развитие наших ETL-процессов.
• Работа с современными технологиями, разработка продуманных технических решений и специального кода, а также внедрение процессов управления нашими
• Работа и профессиональная комнікація с командным замком
• Ответственность за реализацию основных функций ій рішення
• Участие в процессе сборки и уточнение возможностей, продвижение оптимальных архитектурных стратегий и активное внедрение в архитектуру данных
• Разработка основных модулей, функций, проектирование и экономико-эффективных решений
• ли><ли >Выбор переработанного кода, написание модульных и интеграционных тестов.
• Масштабирование распределенных систем и инфраструктуры на следующем этапе.
• Побудительные платформы, позволяющие использовать возможности мобильного провайдера AWS.
• Доступ к Созданная платформа для роботизации данных и управления инфраструктурой для Airflow и Databricks.
  Требования
• 3+ года опыта работы с Python как языком программирования для конвейеров данных и связанными с ней инструментами
• Знание и понимание распределенной обработки данных с помощью Spark для оптимизации конвейеров данных и мониторинга рабочих нагрузок
• Подтвержден успешный опыт построения преобразований данных с помощью инструментов построения данных
• Отличное внедрение лучших практик моделирования данных и создания хранилищ li>
• Опыт работы с Looker на уровне разработчика (непользователя) и с LookML
• Сильный опыт в сфере Data Domain — понимание того, как работают инженеры данных, ученые по данным, инженеры-аналитики и аналитики , чтобы тесно сотрудничать с ними и понимать их потребности
• Хорошие навыки письменного и устного английского языка
• Знание лучших практик программной инженерии: тестирование, PR, Git, проверка кода, дизайн кода и релиз

Преимуществом будет:

• Сертификаты в области инженерии данных или аналитики данных
• 2 или более лет опыта работы с Databricks и Airflow
• Опыт работы с DAG и инструментами оркестрирования< /li>
• Опыт разработки хранилищ данных на основе Snowflake
• Опыт разработки конвейеров данных, управляемых событиями