Leitender Dateningenieur (IT-Lösungen) bei Sigma Software in Sigma Software

Ich suche einen Senior Data Engineer, der ein kleines Team leitet und eine einfache Datenplattform in ein cloudbasiertes Self-Service-Analyseprojekt modernisiert.

KUNDE

Sigma Software bietet erstklassige Softwareentwicklung, Grafikdesign, Tests und Supportdienste. Systeme, die entwickelt wurden, um Kundenvorteile in den Branchen Automobil, Telekommunikation, Luftfahrt, Werbung, Spiele, Banken, Immobilien und Gesundheitswesen zu bieten.

PROJEKT

Im Rahmen eines internen Projekts bei Sigma Software haben wir zwei Hauptziele: die Automatisierung der Berichterstellung und die Schaffung eines Self-Service-Datenanalysesystems für unser Unternehmen.

Sie sind für den Entwurf und die Modellierung von Daten in DWH und Data Marts mithilfe von Spark und MS SQL verantwortlich, stellen diese Daten BI-Ingenieuren zur Verfügung, die Berichte in Apache Superset erstellen, und anderen Rollen, die solche Daten nutzen, und arbeiten mit ihnen zusammen . Darüber hinaus arbeiten Sie mit verschiedenen anderen Teammitgliedern zusammen, die auf diese Daten angewiesen sind. Zu Ihren Aufgaben gehört die Umstellung unserer lokalen Lösung auf eine cloudbasierte Umgebung.

ANFORDERUNGEN

• Konzeptionelle Kenntnisse der Grundlagen der Datenanalyse, z. B. dimensionale Modellierung, ETL/ELT, Berichtstools, Datenverwaltung, Data Warehousing, strukturierte und unstrukturierte Daten
• Umfangreiche SQL-Kenntnisse und Erfahrung mit RDBMS, sichere Kenntnisse der Datenbankgrundlagen
• Erfahrung in der Datenbankentwicklung und Datenmodellierung, idealerweise mit Databricks/Spark
• Erfahrung mit Python
• Praktische Kenntnisse über Serialisierungsformate und deren Kompromisse (spalten- oder zeilenbasiert)
• Erfahrung im Debuggen und Optimieren von Spark-Jobs
• Starke schriftliche und mündliche Kommunikation Fähigkeiten
• Mindestens ein Upper-Intermediate-Niveau in Englisch
• Bachelor in Informatik oder einem verwandten Bereich
• Erfahrung mit einem Business-Intelligence-Tool ist von Vorteil -have

Suche einen Senior Data Engineer, der ein kleines Team leitet und eine einfache Datenplattform in ein cloudbasiertes Self-Service-Analyseprojekt modernisiert.

KUNDE

Sigma Software bietet erstklassige Softwareentwicklung, Grafikdesign, Tests und Supportdienste. Systeme, die entwickelt wurden, um Kundenvorteile in den Branchen Automobil, Telekommunikation, Luftfahrt, Werbung, Spiele, Banken, Immobilien und Gesundheitswesen zu bieten.

PROJEKT

Im Rahmen eines internen Projekts bei Sigma Software haben wir zwei Hauptziele: die Berichterstellung zu automatisieren und ein Self-Service-Datenanalysesystem für zu erstellen unser Unternehmen.

Sie sind für den Entwurf und die Modellierung von Daten in DWH und Data Marts mithilfe von Spark und MS SQL verantwortlich, stellen diese Daten BI-Ingenieuren zur Verfügung, die Berichte in Apache Superset erstellen, und anderen Rollen, die solche Daten nutzen, und arbeiten mit ihnen zusammen . Darüber hinaus arbeiten Sie mit verschiedenen anderen Teammitgliedern zusammen, die auf diese Daten angewiesen sind. Zu Ihren Aufgaben gehört die Umstellung unserer lokalen Lösung auf eine cloudbasierte Umgebung.

,[Unser Ziel ist es, ein effizientes System zum Sammeln, Verarbeiten, Analysieren und Visualisieren großer Datenmengen aus verschiedenen Quellen zu schaffen, die Grundlage zu legen und die Daten zu modellieren, eine Plattform für den Aufbau zu entwickelng und Pflege von Datenpipelines, die Daten aus verschiedenen Quellen sammeln, Erstellen eines Data Warehouse, Analysieren und Vorbereiten von Domänenbeschreibungen in Zusammenarbeit mit Business Analytics, Erstellen von Data Marts, Entwerfen eines Berechtigungsmodells mit flexibler Kontrolle über den vertikalen und horizontalen Zugriff auf Daten]

< /p>Anforderungen: Datenanalyse, Databricks, ETL, Spark, SQL, RDBMS, BS, Datenmodellierung, Python, Kommunikationsfähigkeiten