Data Engineer в Xprt Minds

Опис проекту:

• Створення хмарної платформи даних, на якій розробляються керовані даними рішення за допомогою аналітики, машинного навчання та штучного інтелекту.

• Проект прогнозування спрямований на розробку модулів для автоматизованого, заснованого на штучному інтелекті, лінійного прогнозування телевізійного охоплення, щоб можна було приймати кращі рішення щодо розміщення потрібного контенту на потрібному каналі в потрібний час.

Обсяг послуги

• Реалізація конвеєрів даних для підготовки, надання та версій даних для навчання моделі

• Консультування Data Scientists щодо розробки моделей машинного навчання, особливо щодо продуктивної роботи цих моделей

• Розробка та впровадження мікросервісів для забезпечення моделей через REST API, включаючи функції моніторингу цих моделей у продуктивній роботі

• Розгортання мікросервісів у продуктивному хмарному середовищі з урахуванням високих вимог до доступності.

Використовується стек технологій

• Google Cloud Platform, Terraform, GitLab

• Kubernetes, Docker, Airflow, MLflow

• BigQuery, BigTable

• Python, Pyspark, SQL

• REST API

Операційні ресурси, які використовує клієнт

Замовник надає КОМПАНІЇ, в особі DATA ENGINEER, доступ до таких систем:

• DATA Alliance JIRA

• DATA Alliance Confluence

• Bertelsmann GitHub

• Bertelsmann Azure DevOps

• Zugriff zur Azure-Infrastruktur der Datenplattform

• Microsoft Teams

• Відстеження часу Bifrost

Початок проекту: ASAP

Тривалість: 2 місяці + можливе продовження