Середній Python/Інженер даних в Sombra

29 серпня 2024 р

Middle Python/Data Engineer

Київ, Львів, Івано-Франківськ

Наш клієнт – приватна інвестиційна компанія зі Сполучених Штатів, яка спеціалізується у сільське господарство та інвестиції, пов’язані з харчовими продуктами.

Основна ідея продукту, який ми розробляємо, — це розвиток сільськогосподарської галузі, забезпечуючи сільськогосподарські компанії продуктом — комплексним інструментом бізнес-аналітики. Це рішення дасть їм змогу збирати, аналізувати та візуалізувати дані, пов’язані з сільськогосподарськими площами, сприяючи прийняттю обґрунтованих рішень і максимізуючи потенційний дохід.

Вимоги:

• 3+ роки досвіду розробки на Python за допомогою FastAPI або подібних веб-фреймворків.
• Пристрасть до безперервного навчання та обміну знаннями з іншими, чудові навички спілкування
• Сильні навички налагодження,
• Добре розуміння всіх частин стеку веб-додатків, < /li>
• Досвід роботи з Pandas/Pyarrow,
• Досвід роботи з архітектурою мікросервісів.
• Значний досвід роботи з методами обробки даних у інструментах
• Досвід роботи з конвеєрами ETL,
• Досвід роботи з Apache Spark/Delta Lake або подібними інструментами
• Бажано досвід оркестрування повітряних потоків.

Приємно мати досвід роботи з:

• AWS EMR/SNS/SQS, Docker,
• Досвід роботи з Apache Airflow, створення робочих груп DAG і планування завдань,
• Досвід роботи з OAuth,
• Деякі навички розробки інтерфейсу користувача можуть бути корисними пізніше в проекті (Dash),
• Досвід роботи з базами даних NoSQL (DynamoDB, Redis).

Обов’язки:

• Розробка та підтримка веб-програм:
  — Створення високопродуктивних і масштабованих веб-програм за допомогою Python із FastAPI або подібних веб-фреймворків .
• Спроектуйте та оптимізуйте конвеєри ETL:
  — обробляйте великі обсяги даних за допомогою таких інструментів, як Apache Spark, Delta Lake або подібних, забезпечуючи ефективну обробку даних.
• Керуйте реляційними базами даних:
  — оптимізуйте та обслуговуйте RDBMS, забезпечуючи продуктивність і надійність бази даних.
• Оркеструйте архітектуру мікросервісів:
  — проектуйте, впроваджуйте та керуйте мікросервісами, забезпечуючи плавний зв’язок і потік даних.
• Налагодження та усунення несправностей:
  — застосуйте сильні навички налагодження, щоб виявляти та вирішувати проблеми в стеку веб-додатків.
• Автоматизація робочого процесу.
  — Використовуйте Airflow або подібні інструменти, щоб автоматизувати робочі процеси та забезпечити своєчасну обробку даних.

Ми пропонуємо:

• Щорічну оплачувану відпустку тривалістю 18 робочих днів.
• Додаткові дні відпустки для довготривалої співпраці.
• Щорічна оплачувана хвороба 10 днів.
• Відпустка по догляду за дитиною/батьком.
• Можливість творчої відпустки.
• Пакет "Шлюб і батьківство".
• Компенсація за заняття спортом (до 6000 грн/рік).
• 50 % компенсація вартості відвідування курсів саморозвитку.
• Корпоративний лікар.
• Внутрішнє навчання (корпоративна бібліотека, курси Udemy).
• План розвитку кар'єри.
• Курси англійської та іспанської мов.
• Сплата податків і управління ПП(Приватний підприємець).
• Технічне оснащення.
• Внутрішня реферальна програма.
• Можливість брати участь у волонтерській діяльності компанії.
• Sombra є володарем нагороди «Дружній до ветеранів».