Середній інженер даних (DP) в Sigma Software

3 серпня 2024 р

Middle Data Engineer (DP)

Львів, Івано-Франківськ, Луцьк, Тернопіль, Черкаси, Чернівці, Варшава (Польща), Краків (Польща), Прага (Чехія), віддалено

Ми шукаємо вмотивовану та самостійну людину, щоб приєднатися до нашої динамічної команди. Наша команда високо цінує свободу співробітників, незалежність у прийнятті рішень, бажання глибше розуміти запити клієнтів і визначати корінь проблеми. Ми віримо, що люди, які приймають таке мислення, приречені на успіх як визнані професіонали та рушійна сила розробки даних в Україні.

КЛІЄНТ
Наш клієнт – це модний ринок, який працює спільнотою та має понад 30 мільйонів зареєстрованих користувачів у понад 150 країнах. Це платформа для відкриття та відзначення особистого стилю, одночасно пропагуючи стійку моду, подовжуючи термін служби мільйонам одягу. Заснована в 2011 році зі штаб-квартирою в Лондоні та офісами в Манчестері та Нью-Йорку, наш Клієнт налічує близько 400 людей. У 2021 році вона стала дочірньою компанією Etsy, але продовжує функціонувати незалежно. Компанія прагне до різноманітності, інклюзивності та чесних процесів найму, підтримуючи візове спонсорство для певних посад і наборів навичок.

Опис посади

• Сприяння дослідженням нових технологій і розробці складних рішень, підтримці інноваційної культури шляхом розгляду питань безпеки, масштабованість і надійність, зосереджена на розбудові наших процесів ETL
• Робота з сучасним стеком даних, розробка добре розроблених технічних рішень і надійного коду та впровадження процесів управління даними
< li> Робота та професійне спілкування з командою клієнта
• Взяття на себе відповідальності за надання основних функцій рішення
• Участь у процесі збору та уточнення вимог, пропонування оптимальних стратегій архітектури та керування архітектурою даних реалізація
• Розробка основних модулів і функцій, проектування масштабованих і економічно ефективних рішень
• Виконання огляду коду, написання модульних і інтеграційних тестів
• Масштабування розподіленої системи та інфраструктури на наступний рівень
• Створення платформи даних за допомогою потужності хмарного постачальника AWS

Кваліфікація

• 3 + роки значного досвіду роботи з Python як мовою програмування для конвеєрів даних і пов’язаних інструментів
• Знайомство та розуміння розподіленої обробки даних за допомогою Spark для оптимізації конвеєрів даних і моніторингу робочих навантажень
• Перевірена ефективність запис створення перетворень даних за допомогою інструментів побудови даних
• Чудова реалізація моделювання даних і найкращих практик сховища даних
• Досвід роботи з Looker із кваліфікацією розробника (не користувача) та з LookML < /li>
• Сильна підготовка домену даних — розуміння того, як працюють інженери з обробки даних, спеціалісти з обробки даних, інженери-аналітики й аналітики, щоб можуть тісно співпрацювати з ними та розуміти їхні потреби
• Гарна письмова та розмовна англійська комунікативні навички
• Найкраще знайомство з розробкою програмного забезпеченняpractices: testing, PRs, Git, code reviews, code design, releasing

WOULD BE A PLUS

• Data certifications in Data Engineering or Data Analytics
• 2 or more years of experience with Databricks and Airflow
• Experience with DAGs and orchestration tools
• Experience in developing Snowflake-driven data warehouses
• Experience in developing event-driven data pipelines
  __________________________________________________________________
  Наш Клієнт — це громадський маркетплейс моди з понад 30 мільйонами зареєстрованих користувачів у більш ніж 150 країнах світу. Це платформа для пошуку та підкреслення особистого стилю, яка сприяє сталому розвитку моди, продовжуючи життя мільйонам одиниць одягу. Заснована у 2011 році, зі штаб-квартирою в Лондоні та офісами в Манчестері та Нью-Йорку, компанія нашого Клієнта налічує близько 400 співробітників. У 2021 році вона повністю стала дочірньою компанією Etsy, але продовжує працювати незалежно. Компанія прагне до різноманітності, інклюзивності та справедливих процесів підбору персоналу, підтримуючи візове спонсорство для певних ролей та наборів навичок.
  Ми шукаємо вмотивовану та цілеспрямовану людину, яка бажає приєднатися до нашої динамічної команди. Наша команда високо цінує свободу співробітників, незалежність у прийнятті рішень та бажання глибоко розуміти запити клієнтів і виявляти корінь проблеми. Ми віримо, що люди, які поділяють такий спосіб мислення, приречені на успіх як визнані професіонали та рушійні сили розвитку даних в Україні.
  Обов’язки
• Участь у дослідженні нових технологій та розробці комплексних рішень, підтримка культури інновацій з урахуванням питань безпеки, масштабованості та надійності, з акцентом на побудові наших ETL-процесів
• Робота з сучасним стеком даних, розробка добре продуманих технічних рішень та надійного коду, а також впровадження процесів управління даними
• Робота та професійна комунікація з командою замовника
• Відповідальність за реалізацію основних функцій рішення
• Участь у процесі збору та уточнення вимог, пропонування оптимальних архітектурних стратегій та керівництво впровадженням архітектури даних
• Розробка основних модулів та функцій, проєктування масштабованих та економічно ефективних рішень
• Виконання перевірок коду, написання модульних та інтеграційних тестів
• Масштабування розподіленої системи та інфраструктури на наступний рівень
• Побудова платформи даних з використанням можливостей хмарного провайдера AWS
  Вимоги
• 3+ роки досвіду роботи з Python як мовою програмування для конвеєрів даних та пов’язаними з нею інструментами
• Знання та розуміння розподіленої обробки даних за допомогою Spark для оптимізації конвеєрів даних та моніторингу робочих навантажень
• Підтверджений успішний досвід побудови перетворень даних за допомогою інструментів побудови даних
• Відмінне впровадження найкращих практик моделювання даних та створення сховищ даних
• Досвід роботи з Looker на рівні розробника (не користувача) та з LookML
• Сильний досвід у сфері Data Domain — розуміння того, як працюють інженери даних, науковці з даних, інженери-аналітики та аналітики, щоб мати змогу тісно співпрацювати з ними та розуміти їхні потреби
• Хороші навички письмової та усної англійської мови
• Знання найкращих практик програмної інженерії: тестування, PR, Git, перевірка коду, дизайн коду та реліз

Перевагою буде:

• Сертифікати в галузі інженерії даних або аналітики даних
• 2 або більше років досвіду роботи з Databricks та Airflow
• Досвід роботи з DAG та інструментами оркестрування
• Досвід розробки сховищ даних на основі Snowflake
• Досвід розробки конвеєрів даних, керованих подіями