Інженер даних в EpicentrK

Вимоги:

Досвід роботи з Docker, Dbt, Gitlab CI\CD, Airflow

Досвід роботи з MSSQL Server, Clickhouse

Досвід роботи з Python

Знання проектування та розробки архітектури даних, включаючи різні типи схем, реплікацію даних, агрегацію та оптимізацію для високої доступності та продуктивності.

Задачі:

Взаємодія з Data Scientist’ами для забезпечення доступу до даних

Розробка та підтримка існуючих ETL-процесів для ефективного обміну та обробки даних.

Розробка сервісів обміну даними для забезпечення інтеграції між різними системами та джерелами даних.

Розробка та підтримка схем даних для роботи пайплайнів машинного навчання та аналітики, забезпечення надійного та швидкого доступу до даних для аналітичних