Data Engineer в ANVI

Описание Проекта:

• Создание облачной платформы данных, на которой разрабатываются решения на основе данных с помощью аналитики, машинного обучения и искусственного интеллекта.

• Проект прогнозирования направлен на разработку модулей для автоматизированного линейного прогнозирования охвата ТВ на основе ИИ, чтобы можно было принимать более эффективные решения для размещения нужного контента на нужном канале в нужное время.

Объем услуги:

• Внедрение конвейеров данных для подготовки, предоставления и версии данных для обучения моделей.

• Консультирование специалистов по данным по разработке моделей машинного обучения, особенно в отношении продуктивной работы этих моделей.

• Проектирование и внедрение микросервисов для предоставления моделей через REST API, включая функции мониторинга этих моделей в продуктивной работе.

• Развертывание микросервисов в продуктивной облачной среде с учетом требований высокой доступности.

Используемый стек технологий

• Облачная платформа Google, Terraform, GitLab

• Kubernetes, Docker, Airflow, MLflow

• Большой запрос, большая таблица

• Python, Pyspark, SQL

• REST API