Python Data Engineer (переход на DataOps Engineer) в Reply.io

16 сентября 2024 г.

Python Data Engineer (переход на DataOps Engineer)

удалено

Мы продуктовая компания, работающая на глобальном рынке. Сейчас мы — команда из более чем 80 замечательных украинцев, работающих на 100% удаленно с первого дня. У нас более 4000 клиентов по всему миру, использующих нашу платформу каждый день. И теперь мы ищем отличного агента службы поддержки клиентов, который присоединится к нашей замечательной команде :)

Будучи инженером по работе с данными Python, переходящим на DataOps, вы начнете с сосредоточения внимания на написании сценариев на Python и развитии своих навыков проектирования данных. В ваши обязанности будет входить автоматизация задач, разработка и поддержка заданий конвейера в DataBricks, а также устранение неполадок инфраструктуры и обработки данных. Вы также будете управлять и оптимизировать инфраструктуру искусственного интеллекта и данных, поддерживать рабочие процессы аналитики и обеспечивать бесперебойную работу с данными. Сотрудничая с другими членами команды, вы будете отслеживать производительность системы, обеспечивать целостность и безопасность данных, а также участвовать в развертывании новых функций и обновлений. Эта роль предназначена для тех, кто хочет вырасти до инженера по эксплуатации данных и стремится к постоянному обучению и совершенствованию процессов обработки данных и автоматизации.

Требования

• Опыт работы от 1 года в области разработки данных, анализа данных или смежных областях

• Владение Python Core на среднем уровне.

• Технические навыки (желательно иметь):
— Опыт работы с GitHub и Git для контроля версий
— Знание в области обработки данных. инструменты и библиотеки, такие как Pandas и PySpark
 — Базовое понимание баз данных, включая запросы и управление данными
  Некоторое знакомство с Apache Airflow для управления рабочими процессами
   Желание учиться и использовать DataBricks для управления конвейеры данных и задания
 — Базовые знания Elasticsearch и Kibana для визуализации и поиска данных.

• Развитие надежных навыков устранения неполадок для диагностики и решения проблем, связанных с инфраструктурой и данными.

• Понимание поддержки существующей инфраструктуры и систем внутренней аналитики.

• Способность эффективно работать как независимо, так и в командной среде.

• Сильные коммуникативные навыки, как письменные, так и устные, для передачи технической информации. ясно

• Проактивный, внимательный к деталям, готовый учиться и расти в рамках своей должности.

• Стремление к постоянному обучению и стремлению быть в курсе последних разработок в области инжиниринга данных. и DataOps.

Обязанности

• Написание скриптов на Python для автоматизации различных задач и процессов
• Разработка и поддержание заданий конвейера в DataBricks
• Устранение неполадок и устранение проблем, связанных с инфраструктурой и обработкой данных
• Поддержание инфраструктуры и процессов DATA и искусственного интеллекта продаж
• Поддержание существующей инфраструктуры для обеспечения бесперебойной работы
• Управление рабочими процессами внутренней аналитики под контролем Apache Airflow
• Поддержка и сопровождение заданий в DataBricks для обеспечения эффективной обработки данных
• Сотрудничество с другими членами команды для оптимизации рабочих процессов с данными
• Система мониторинга pпроизводительность и внедрение необходимых улучшений
• Обеспечение целостности и безопасности данных во всех системах и платформах
• Документирование процессов и ведение полного учета изменений и обновлений
• Участие в проверках кода и предоставление конструктивной обратной связи
/>• Помощь в развертывании новых функций и обновлений
• Постоянное совершенствование сценариев и процессов автоматизации для повышения эффективности и надежности
• Будьте в курсе последних разработок в области DataOps и инженерии данных

< p>Мы предлагаем

• Работу с ведущим продуктом на США и мировом рынке
• Реальную возможность профессионального роста и самосовершенствования
• Работа из дома или коворкинга (мы покрываем расходы на коворкинг)
• Мы предоставляем новейшее оборудование для вашей комфортной работы
• Доступ к внутренней бизнес-литературе, тренингам, семинарам
• Неограниченно количество больничных
• Отличные коллеги и приятная рабочая атмосфера

С начала российского вторжения вся наша прибыль была направлена ​​на нужды вооруженных сил. Силы Украины. На данный момент мы пожертвовали более 7 миллионов гривен и намерены развивать нашу компанию, чтобы помогать больше. Кроме того, мы участвуем в программе KOLOcи от KOLO (koloua.com/kolossus), где ежемесячно жертвуем 10 тысяч долларов только им.

Присоединяйтесь к нам и помогите Вооруженным силам Украины надрать задницу России!