Senior Data Engineer (Profisee MDM) in EPAM Ukraine

BESCHREIBUNG

Unser Kunde bietet Sach-, Agrar-, Cyber-Risiko-, Geschäfts-, Unfall- und Rückversicherungsprodukte an.

Wir suchen einen Senior Data Engineer zur Verstärkung unseres Teams. Als Senior Data Engineer spielen Sie eine entscheidende Rolle beim Aufbau und der Optimierung von Datenpipelines und -architekturen sowie der Integration von Daten aus verschiedenen Quellen. Sie sind für den Entwurf, die Entwicklung und die Wartung von Datenintegrationslösungen unter Verwendung von Azure Analytics, Azure Data Factory, Azure Databricks, Azure Pipelines und anderen Datenintegrationsplattformen (ETL/ELT) verantwortlich.

Unser idealer Kandidat verfügt über fundierte Kenntnisse im Bereich Datentechnik und Erfahrung mit dem Profisee Master Data Management Tool.

Verantwortlichkeiten

• Entwerfen und Implementieren von Datenintegrationslösungen mithilfe von Azure Analytics, Azure Data Factory, Azure Databricks und Azure Pipelines
• Entwicklung und Pflege von ETL/ELT-Prozessen zum Sammeln, Umwandeln und Laden von Daten aus verschiedenen Quellen in Data Warehouses
• Optimierung von Datenpipelines und -architekturen zur Verbesserung der Effizienz und Skalierbarkeit
• Zusammenarbeit mit funktionsübergreifenden Teams, um Datenanforderungen zu verstehen und technische Lösungen bereitzustellen
• Fehlerbehebung und Lösung von Datenintegrationsproblemen
• Durchführung von Datenvalidierungen und Qualitätsprüfungen, um die Genauigkeit und Integrität der Daten sicherzustellen
• Bleiben Sie über Branchentrends und Best Practices im Data Engineering auf dem Laufenden

Anforderungen

• Mehr als 3 Jahre Erfahrung als Dateningenieur mit Fachwissen zur Datenintegration
• Azure Analytics, Azure Data Factory, Azure Databricks, Azure Pipelines, Datenintegrationsplattformen (ETL/ELT), PySpark, Azure Synapse Analytics, Python
• Erfahrung in der Entwicklung und Verwaltung von End-to-End-Datenpipelines, ETL-Lösungen (Extract, Transform, Load) und ELT-Lösungen (Extract, Load, Transform).
• Kann End-to-End-Data-Engineering-Lösungen mit Azure Synapse Analytics entwerfen und erstellen
• Solides Verständnis der Prinzipien der Datenmodellierung, Lakehouse, Data Warehousing und Data Governance
• Hervorragende Kommunikations- und Kollaborationsfähigkeiten, um effektiv mit funktionsübergreifenden agilen Teams zusammenzuarbeiten
• Oberes mittleres Englischniveau in Wort und Schrift (B2+)

Schön zu haben

• Microsoft SQL Server, Microsoft SQL Server Integration Services, Python, SQL
• Verständnis von Azure DevOps Pipelines
• Testgetriebene Designprinzipien und Unit-Test-Frameworks wie PyTest verstehen

Wir bieten

• Wettbewerbsfähige Vergütung je nach Erfahrung und Fähigkeiten
• Individueller Karriereweg
• Unbegrenzter Zugriff auf LinkedIn-Lernlösungen
• Krankheitsurlaub und regulärer Urlaub
• Englischunterricht mit zertifizierten Englischlehrern
• Flexible Arbeitszeiten