Data Engineer в Xprt Minds

Описание Проекта:

• Создание облачной платформы данных, на которой разрабатываются решения на основе данных с помощью аналитики, машинного обучения и искусственного интеллекта.

• Проект прогнозирования направлен на разработку модулей для автоматизированного линейного прогнозирования охвата ТВ на основе ИИ, чтобы можно было принимать более обоснованные решения по размещению нужного контента на нужном канале в нужное время.

Объем услуги

• Реализация конвейеров данных для подготовки, предоставления и управления версиями данных для обучения модели.

• Консультирование специалистов по данным по разработке моделей машинного обучения, особенно в отношении продуктивной эксплуатации этих моделей.

• Разработка и внедрение микросервисов для предоставления моделей через REST API, включая функции для мониторинга этих моделей в продуктивной эксплуатации.

• Развертывание микросервисов в продуктивной облачной среде с учетом требований высокой доступности.

Используемый стек технологий

• Облачная платформа Google, Terraform, GitLab

• Kubernetes, Docker, Airflow, MLflow

• BigQuery, BigTable

• Python, Pyspark, SQL

• API REST

Операционные ресурсы, используемые клиентом

Заказчик предоставляет КОМПАНИИ в лице DATA ENGINEER доступ к следующим системам:

• DATA Alliance JIRA

• DATA Alliance Confluence

• Bertelsmann GitHub

• Bertelsmann Azure DevOps

• Zugriff zur Azure-Infrastruktur der Datenplattform

• Microsoft Teams

• Отслеживание времени Bifrost

Старт проекта: как можно скорее

Продолжительность: 2 месяца + возможно продление