Dateningenieur in EpicentrK

Anforderungen:

Erfahrung mit Docker, Dbt, Gitlab CI\CD, Airflow

Erfahrung mit MSSQL Server , Clickhouse

Python-Erfahrung

Kenntnisse im Design und der Entwicklung von Datenarchitekturen, einschließlich verschiedener Schematypen, Datenreplikation, Aggregation und Optimierung für hohe Verfügbarkeit und Leistung.

Aufgaben :

Interaktion mit Data Scientists, um den Zugriff auf Daten sicherzustellen

Entwicklung und Unterstützung bestehender ETL-Prozesse für effektiven Datenaustausch und -verarbeitung.

Entwicklung von Datenaustauschdiensten um die Integration zwischen verschiedenen Systemen und Datenquellen sicherzustellen.

Entwicklung und Unterstützung von Datenschemata für den Betrieb von Pipelines für maschinelles Lernen und Analysen, um einen zuverlässigen und schnellen Zugriff auf Daten für Analysen sicherzustellen