Средний инженер по данным (DP) в Sigma Software

3 сентября 2024 г.

Средний дата-инженер (DP)

Львов, Ивано-Франковск, Луцк, Тернополь, Черкассы, Черновцы, Варшава (Польша), Краков (Польша), Прага (Чехия), Виддалено

Мы ищем мотивированного и целеустремленного человека, который присоединится к нашей динамичной команде. В нашей команде высоко ценятся свобода сотрудников, независимость в принятии решений, стремление глубоко понять запросы клиентов и выявить корень проблемы. Мы считаем, что людям, которые придерживаются такого мышления, суждено добиться успеха в качестве признанных профессионалов и движущей силы в разработке данных в Украине.

КЛИЕНТ
Наш клиент — это общественная торговая площадка моды с более чем 30 миллионами зарегистрированных пользователей в более чем 150 странах. Это платформа для открытия и прославления личного стиля, а также продвижения устойчивой моды путем продления срока службы миллионов предметов одежды. Основанная в 2011 году со штаб-квартирой в Лондоне и офисами в Манчестере и Нью-Йорке, у нашего Клиента работает около 400 человек. В 2021 году он стал 100% дочерней компанией Etsy, но продолжает работать независимо. Компания привержена разнообразию, инклюзивности и справедливому процессу найма, поддерживая спонсорство виз для определенных ролей и наборов навыков.

Описание вакансии

• Участие в исследованиях новых технологий и разработке сложных решений, поддержка культуры инноваций путем рассмотрения вопросов безопасности, масштабируемость и надежность с упором на построение наших процессов ETL
• Работа с современным стеком данных, разработка хорошо продуманных технических решений и надежного кода, а также внедрение процессов управления данными
< li> Работа и профессиональное общение с командой заказчика.
• Берем на себя ответственность за предоставление основных функций решения.
• Участие в процессе сбора и уточнения требований, предложение оптимальных стратегий архитектуры и управление архитектурой данных. внедрение
• Разработка основных модулей и функций, проектирование масштабируемых и экономически эффективных решений
• Выполнение проверок кода, написание модульных и интеграционных тестов
• Масштабирование распределенной системы и инфраструктуры на следующий уровень
• Создание платформы данных с использованием возможностей облачного провайдера AWS

Квалификация

• 3 + многолетний опыт работы с Python как языком программирования для конвейеров данных и связанных с ним инструментов.
• Знакомство и понимание распределенной обработки данных с помощью Spark для оптимизации конвейера данных и мониторинга рабочих нагрузок.
• Проверенный успешный опыт. запись построения преобразований данных с использованием инструментов построения данных.
• Отличное внедрение лучших практик моделирования данных и хранилищ данных.
• Опыт работы с Looker на уровне разработчика (не пользователя) и с LookML < /li>
• Хороший опыт работы в области Data Domain — понимание того, как работают инженеры по обработке и анализу данных, инженеры-аналитики и аналитики, чтобы иметь возможность тесно сотрудничать с ними и понимать их потребности.
• Хороший письменный и устный английский. коммуникативные навыки.
• Лучшее знание программной инженерии.практики: testing, PRs, Git, code reviews, code design, releasing

WOULD BE A PLUS

• Data certifications in Data Engineeringor Data Analytics
• 2 or more years ofperience withDatabricks and Airflow
• Experience with DAGs и orchestration tools
• Experience indeveloping Snowflake-driven data warehouses
• Experience in developing event-driven data pipelines
  __________________________________________________________________
  Наш Клиент — это общественный маркетплейс моды с более чем 30 миллионами зарегистрированных пользователей в более чем 150 странах мира. Это платформа для поиска и подчеркивания личного стиля, которая способствует устойчивому развитию моды, продлевая жизнь миллионам единиц одежды. Основанная в 2011 году, со штаб-квартирой в Лондоне и офисами в Манчестере и Нью-Йорке, компания нашего Клиента насчитывает около 400 сотрудников. В 2021 году она полностью стала дочерней компанией Etsy, но продолжает работать независимо. Компания стремится к разнообразию, инклюзивности и справедливым процессам подбора персонала, поддерживая визовое спонсорство для определенных ролей и наборов навыков.
  Мы ищем мотивированного и целеустремленного человека, желающего присоединиться к нашей динамической команде. Наша команда высоко ценит свободу сотрудников, независимость в принятии решений и желание глубоко понимать запросы клиентов и выявлять корни проблемы. Мы верим, что люди, разделяющие такой образ мышления, обречены на успех как признанные профессионалы и движущие силы развития данных в Украине.
  Обязанности
• Участие в исследовании новых технологий и разработке комплексных решений, поддержка культуры инноваций с учетом вопросов безопасности, масштабируемости и надежности, с акцентом на построении наших ETL-процессов
• Работа с современным стеком данных, разработка хорошо продуманных технических решений и надежного кода, а также внедрение процессов управления данными
• Работа и профессиональная коммуникация с командой заказчика
• Ответственность за реализацию основных функций решения
• Участие в процессе сбора и уточнения требований, предложение оптимальных архитектурных стратегий и руководство внедрением архитектуры данных
• Разработка основных модулей и функций, проектирование масштабируемых и экономически эффективных решений
• Выполнение проверок кода, написание модульных и интеграционных тестов
• Масштабирование распределенной системы и инфраструктуры на следующий уровень
• Построение платформы данных с использованием возможностей облачного провайдера AWS < p>
  Требования
• 3+ года опыта работы с Python как языком программирования для конвейеров данных и связанными с ней инструментами
• Знание и понимание распределенной обработки данных с помощью Spark для оптимизации конвейеров данных и мониторинга рабочих нагрузок
• Подтвержденный успешный опыт построения преобразований данных с помощью инструментов построения данных
• Отличное внедрение лучших практик
• Опыт работы с Looker на уровне разработчика (непользователя) и с LookML
• Сильный опыт в сфереи Data Domain — понимание того, как работают инженеры данных, ученые по данным, инженеры-аналитики и аналитики, чтобы иметь возможность тесно сотрудничать с ними и понимать их потребности
• Хорошие навыки письменного и устного английского языка
• Знание лучших практик программной инженерии: тестирование, PR, Git, проверка кода, дизайн кода и релиз

Преимуществом будет:

• Сертификаты в области инженерии данных или аналитики данных
• 2 или более лет опыта работы с Databricks и Airflow
• Опыт работы с DAG и инструментами оркестрирования
• Опыт разработки хранилищ данных на основе Snowflake
• Опыт разработки конвейеров данных, управляемых событиями