Средний уровень Python/инженер данных в Sombra

29 сентября 2024 г.

Средний Python/инженер данных

Киев, Львов, Ивано-Франковск

Наш клиент — частная инвестиционная компания, базирующаяся в США, которая специализируется в сельском хозяйстве и инвестициях, связанных с продовольствием.

Основная идея разрабатываемого нами продукта заключается в том, чтобы стимулировать сельскохозяйственную отрасль путем предоставления фермерским компаниям продукта, который является комплексным инструментом бизнес-аналитики. Это решение позволит им собирать, анализировать и визуализировать данные, связанные с сельскохозяйственными областями, что позволит принимать обоснованные решения и максимизировать потенциальный доход.

Требования:

• 3+ года опыта разработки на Python с использованием FastAPI или аналогичных веб-фреймворков.
• Страсть к постоянному обучению и обмену знаниями с другими, отличные коммуникативные навыки.
• Хорошие навыки отладки.
• Хорошее понимание всех частей стека веб-приложений. < /li>
• Опыт работы с Pandas/Pyarrow,
• Опыт работы с микросервисной архитектурой.
• Большой опыт работы с методами обработки данных в инструментах.
• Опыт работы с конвейерами ETL,
• Опыт работы с Apache Spark/Delta Lake или подобными инструментами.
• > Опыт работы оркестратором Airflow — желательно.

Приятно иметь опыт работы с:

• AWS EMR/SNS/SQS, Docker,
• Опыт работы с Apache Airflow, создание групп DAG рабочих процессов и планирование заданий.
• Опыт работы с OAuth.
• Некоторые навыки разработки пользовательского интерфейса могут пригодиться позже в проекте (Dash).
• Опыт работы с базами данных NoSQL (DynamoDB, Redis).

Обязанности:

• Разработка и поддержка веб-приложений:
  — Создание высокопроизводительных и масштабируемых веб-приложений с использованием Python с FastAPI или аналогичных веб-платформ. .
• Проектируйте и оптимизируйте конвейеры ETL:
   — Обрабатывайте большие объемы данных с помощью таких инструментов, как Apache Spark, Delta Lake или аналогичные, обеспечивая эффективную обработку данных.
• Управление реляционными базами данных:
  — Оптимизация и обслуживание РСУБД, обеспечение производительности и надежности базы данных.
• Организуйте архитектуру микросервисов:
  — Проектируйте, внедряйте микросервисы и управляйте ими, обеспечивая бесперебойную связь и поток данных.
• Отладка и устранение неполадок.
    Применяйте сильные навыки отладки, чтобы выявлять и устранять проблемы во всем стеке веб-приложений.
• Автоматизация рабочих процессов.
  — Используйте Airflow или аналогичные инструменты для автоматизации рабочих процессов и обеспечения своевременной обработки данных.

Мы предлагаем:

• Ежегодный оплачиваемый отпуск продолжительностью 18 рабочих дней.
• Дополнительные дни отпуска для долгосрочного сотрудничества.
• Ежегодный оплачиваемый больничный продолжительностью 10 дней.
• Отпуск по беременности и родам/отцовству.
• Возможность творческого отпуска.
• Пакет «Брак и отцовство».
• Компенсация за занятия спортом (до 6000 грн\год).
• 50 % компенсация затрат на посещение курсов саморазвития.
• Корпоративный доктор.
• Внутреннее образование(корпоративная библиотека, курсы Udemy).
• План карьерного роста.
• Занятия английским и испанским языками.
• Уплата налогов и управление частными лицами(частный предприниматель).
• Техническое оборудование.
• Внутренняя реферальная программа.
• Возможность принять участие в волонтерской деятельности компании.
• Сомбра — обладатель награды «Дружелюбно к ветеранам».