Python Data Engineer (перехід на DataOps Engineer) в Reply.io

16 серпня 2024 р

Python Data Engineer (перехід на DataOps Engineer)

віддалено

Ми — продуктова компанія, що працює на глобальному ринку. Наразі ми — команда з 80+ дивовижних українців, які працюють на 100% віддалено з першого дня. Нашу платформу щодня використовують понад 4000 клієнтів у всьому світі. А зараз ми шукаємо чудового агента служби підтримки клієнтів, щоб приєднатися до нашої чудової команди :)

Як інженер з даних Python, який переходить на DataOps, ви почнете з зосередження на скриптах Python і розвитку своїх навичок інженерії даних. Ваші обов’язки включатимуть автоматизацію завдань, розробку та підтримку конвеєрних завдань у DataBricks, а також усунення проблем з інфраструктурою та обробкою даних. Ви також керуватимете та оптимізуєте штучний інтелект та інфраструктуру даних, підтримуватимете робочі процеси аналітики та забезпечуватимете безперебійну роботу з даними. Співпрацюючи з іншими членами команди, ви відстежуватимете продуктивність системи, забезпечуватимете цілісність і безпеку даних і берете участь у розгортанні нових функцій і оновлень. Ця посада розрахована на тих, хто прагне вирости в інженера DataOps, із пристрастю до постійного навчання та вдосконалення процесів розробки даних і автоматизації.

Вимоги

• 1+ років досвіду в розробці даних, аналізі даних або пов’язаній сфері

• Володіння Python Core на середньому рівні

• Технічні навички (приємно мати):
— Досвід роботи з GitHub і Git для контролю версій
— Знайомство з розробкою даних інструменти та бібліотеки, такі як Pandas і PySpark
— Базове розуміння баз даних, включно із запитами та керуванням даними
— Деякий досвід Apache Airflow для керування робочим процесом
— Бажання вивчити та використовувати DataBricks для керування канали даних і завдання
— Базове знання Elasticsearch і Kibana для візуалізації та пошуку даних

• Розвиток міцних навичок усунення несправностей для діагностики та вирішення проблем, пов’язаних з інфраструктурою та даними

• Розуміння обслуговування наявної інфраструктури та систем внутрішньої аналітики

• Здатність ефективно працювати як самостійно, так і в середовищі спільної команди

• Сильні комунікативні навички, як письмові, так і усні, для передачі технічної інформації чітко

• Проактивний, орієнтований на деталі та прагнення навчатися та розвиватися в рамках посади

• Пристрасть до безперервного навчання та бути в курсі останніх розробок інженерії даних і DataOps.

Обов’язки

• Написання сценаріїв на Python для автоматизації різноманітних завдань і процесів
• Розробка та підтримка конвеєрних завдань у DataBricks
• Усунення несправностей і вирішення проблем, пов’язаних з інфраструктурою та обробкою даних
• Підтримка DATA та продажів інфраструктури та процесів ШІ
• Підтримка існуючої інфраструктури для забезпечення безперебійної роботи
• Управління робочими процесами внутрішньої аналітики під наглядом Apache Airflow
• Підтримка та обслуговування завдань у DataBricks для забезпечення ефективної обробки даних
• Співпраця з іншими членами команди для оптимізації робочих процесів даних
• Система моніторингу pпродуктивності та впровадження необхідних покращень
• Забезпечення цілісності та безпеки даних у всіх системах і платформах
• Документування процесів і ведення повних записів змін і оновлень
• Участь у перегляді коду та надання конструктивних відгуків
• Допомога в розгортанні нових функцій і оновлень
• Постійне вдосконалення сценаріїв і процесів автоматизації для підвищення ефективності та надійності
• Бути в курсі останніх розробок у сферах DataOps та інженерії даних

< p> Ми пропонуємо

• Роботу з провідним продуктом на американському та світовому ринку
• Реальну можливість для професійного зростання та самовдосконалення
• Робота з дому чи коворкінгу (ми покриваємо витрати на коворкінг)
• Ми надаємо новітнє обладнання для вашої комфортної роботи
• Доступ до внутрішньої бізнес-літератури, тренінгів, семінарів
• Необмежений кількість лікарняних
• Чудові колеги та приємна робоча атмосфера

З початку російського вторгнення всі наші прибутки були спрямовані на Збройні сили Сили України. Наразі ми пожертвували понад 7 мільйонів гривень і прагнемо розвивати нашу компанію, щоб допомагати більше. Крім того, ми є частиною програми KOLOcи від KOLO ( koloua.com/kolossus ), де щомісяця ми жертвуємо 10 тисяч доларів лише їм.

Приєднуйтесь до нас, щоб допомогти Збройним Силам України надерти дупу Росії!