Середній/старший інженер з даних (DP) в Sigma Software

Ми шукаємо вмотивовану та самостійну людину, щоб приєднатися до нашої динамічної команди. Наша команда високо цінує свободу співробітників, незалежність у прийнятті рішень, бажання глибше розуміти запити клієнтів і визначати корінь проблеми. Ми віримо, що люди, які приймають таке мислення, приречені на успіх як визнані професіонали та рушійна сила розробки даних в Україні.

КЛІЄНТ
Наш клієнт – це модний ринок, який працює спільнотою з понад 30 мільйонами зареєстрованих користувачів у понад 150 країнах. Це платформа для відкриття та відзначення особистого стилю, одночасно пропагуючи стійку моду, подовжуючи термін служби мільйонам одягу. Заснована в 2011 році зі штаб-квартирою в Лондоні та офісами в Манчестері та Нью-Йорку, наш Клієнт налічує близько 400 людей. У 2021 році вона стала дочірньою компанією Etsy, але продовжує функціонувати незалежно. Компанія прагне до різноманітності, інклюзивності та чесних процесів найму, підтримуючи візове спонсорство для певних посад і наборів навичок.

Опис роботи

• Внесок у дослідження нових технологій і розробку складних рішень, підтримка культури інновацій шляхом розгляду питань безпеки, масштабованості та надійності з акцентом на створенні наших процесів ETL
• Робота з сучасними даними стек, розробка добре розроблених технічних рішень і надійного коду, а також впровадження процесів керування даними
• Робота та професійне спілкування з командою замовника
• Взяття на себе відповідальності за надання основних функцій рішення
• li>
• Участь у процесі збору та уточнення вимог, пропонування оптимальних стратегій архітектури та керівництво впровадженням архітектури даних
• Розробка основних модулів і функцій, розробка масштабованих і економічно ефективних рішень
• li>Виконання перевірки коду, написання модульних і інтеграційних тестів
• Масштабування розподіленої системи та інфраструктури на наступний рівень
• Створення платформи даних за допомогою потужності хмарного провайдера AWS

Кваліфікація

• 3+ роки значного досвіду роботи з Python як мовою програмування для конвеєрів даних і пов’язаних інструментів
• Знайомство та розуміння розподіленої обробки даних за допомогою Spark для оптимізації та моніторингу конвеєрів даних робочі навантаження
• Доведені хороші результати створення перетворень даних за допомогою інструментів створення даних
• Чудова реалізація моделювання даних і передових методів сховища даних
• Досвід роботи з Looker із кваліфікація розробника (а не користувача) і з LookML
• Потужна підготовка домену даних – розуміння того, як працюють інженери обробки даних, спеціалісти з обробки даних, інженери-аналітики та аналітики, щоб можуть вабо тісно спілкуватися з ними та розуміти їхні потреби
• Гарні навички письмового та розмовного спілкування англійською мовою
• Знайомство з найкращими практиками розробки програмного забезпечення: тестування, PR, Git, перегляд коду, дизайн коду, випуск< /li>
• Доведений досвід створення платформ даних та керування інфраструктурою для Airflow і Databricks

БУДЕ ПЛЮСОМ

• Сертифікація даних у галузі Інженерії даних або Аналітики даних
• 2 або більше років досвіду роботи з Databricks і Airflow
• Досвід роботи з DAG та інструментами оркестровки
• Досвід розробки даних на основі Snowflake склади
• Досвід розробки каналів даних, керованих подіями
  
  _____________________________________________________________________
  Наш Клієнт — це громадський маркетплейс моди з понад 30 мільйонами зареєстрованих користувачів у більш ніж 150 країнах світу. Це платформа для пошуку та підкреслення особистого стилю, яка стала сприятливим розвитку моди, продовжуючи життя мільйонам одиниць одягу. Заснована в 2011 році, зі штаб-квартирою в Лондоні та офісами в Манчестері та Нью-Йорку, компанія нашого Клієнта налічує близько 400 співробітників. У 2021 році вона повністю стала дочірньою компанією Etsy, але продовжує працювати незалежно. Компанія прагне до різноманітності, інклюзивності та справедливих процесів підбору персоналу, підтримуючи візове спонсорство для певних ролей та наборів навичок.
  
  Ми шукаємо вмотивовану та цілеспрямовану людину, яка бажає приєднатися до нашої динамічної команди. Наша команда високо цінує свободу співробітників, незалежність у прийнятті рішень та бажання глибоко розуміти запити клієнтів і виявляти корінь проблем. Ми віримо, що люди, які поділяють такий спосіб мислення, приречені на успіх як відомі професіонали та руйнівні сили розвитку даних в Україні.
  
  Обов'язки
• Участь у дослідженні нових технологій та розробці комплексних рішень, підтримці культурних інновацій з урахуванням питань безпеки, масштабованості та надійності, з акцентом на побудові наших ETL-процесів
• Робота з сучасним стеком даних, розробка добре розроблених технічних рішень та надійного коду, а також впровадження процесів управління даними
• Робота та професійна комунікація з командою замовника
• Відповідальність для реалізації основних функцій рішення
• Участь у процесі збору та уточнення вимог, пропонування оптимальних стратегій та керівництво впровадження архітектурних даних
• Розробка основних модулів та функцій, проектування масштабованих та економічно ефективних рішень
• Виконання перевірок коду, написання модульних та інтеграційних тестів
• Масштабування розподіленої системи та інфраструктури на ступінчастому рівні
• Побудова платформи даних з використанням можливостей хмарного провайдера AWS
• Досвід у створена платформа для роботи з даними та управлінною інфраструктурою для Airflow та Databricks.
  Вимоги
• 3+ роки досвіду роботи з Python як мовою програмування для конвеєрів даних та пов’язаними з нею інструментами
• Знання та розуміння розподіленої обробки даних за допомогою Spark для оптимізації конвеєрів даних та моніторингу робочих навантажень
• Підтверджений успішний досвід побудови перетворень даних за допомогою інструментів побудови даних
• Відмінне впровадження найкращих практик моделювання даних та створення сховищ даних
• Досвід роботи з Looker на рівні розробника (не користувача) та з LookML
• Сильний досвід у сфері Data Domain — розуміння того, як працюють інженери даних, науковці з даних, інженери-аналітики та аналітики, щоб мати змогу тісно співпрацювати з ними та розуміти їхні потреби
• Хороші навички письмової та усної англійської мови
• Знання найкращих практик програмної інженерії: тестування, PR, Git, перевірка коду, дизайн коду та реліз

Перевагою буде:

• Сертифікати в галузі інженерії даних або аналітики даних
• 2 або більше років досвіду роботи з Databricks та Airflow
• Досвід роботи з DAG та інструментами оркестрування
• Досвід розробки сховищ даних на основі Snowflake
• Досвід розробки конвеєрів даних, керованих подіями