Dateningenieur in Everstar

Wir sind die Everstar-Agentur. Unsere Aufgabe ist es, privaten Unternehmen im Verteidigungssektor dabei zu helfen, talentierte Leute zu finden und die Ukraine dem Sieg näher zu bringen.

Einer unserer Kunden beschäftigt sich mit der Herstellung von Ausrüstung und radioelektronischen Geräten, die die Effektivität von Kampfeinsätzen verbessern.

Das Unternehmen wächst ständig, entwickelt und verbessert Arbeitsprozesse.

Die IT-Abteilung wächst derzeit, daher suchen wir einen Data Engineer.

Erforderliche Fähigkeiten und Erfahrung:

• Erfahrung als Dateningenieur von 3 Jahren oder mehr.
• Selbstbewusst Beherrschung von SQL und praktische Erfahrung im Umgang mit Datenbanken auf hohem Niveau.
• Kostenlose Nutzung von Airflow. Fähigkeit, stabile Ladeprozesse (Inkrementelles Laden, Vollladen) und Datentransformation innerhalb des Speichers aufzubauen.
• Erfahrung in der RDBMS-Entwicklung (Prozeduren, Trigger, Funktionen), Verständnis von Indizes, Abfrageplänen, Erfahrung in der Abfrageoptimierung.
• Erfahrung in Python zum Schreiben von Datenverarbeitungsskripten. Erfahrung mit Pandas, Requests, Pyodbc.
• Höherer Abschluss (Technik, Kybernetik, Mathematik oder verwandt).
  Wäre von Vorteil:
• Praktische Erfahrung im Einrichten der Datenqualitätsüberwachung.
• Praktische Erfahrung in Containerisierung und Orchestrierung (Docker, Kubernetes).
• Erfahrung in der Arbeit mit Cloud-Diensten (AWS, GCP, Azure) für die Datenverarbeitung und -speicherung.

Zukünftige Verantwortlichkeiten:

• Design, Bereitstellung und Optimierung des Enterprise Data Warehouse, Sicherstellung von Skalierbarkeit und Fehlertoleranz.
• Erstellen von ETL/ELT-Prozessen zum Sammeln und Verarbeiten von Daten aus verschiedenen Quellen (DBs, Google Sheets, HTTP, API, Dateien) und deren Orchestrierung mithilfe von Apache Airflow.
• Sicherung der Datenqualität und -integrität, Implementierung von Validierungs- und Überwachungsmechanismen.
• Metadatenverwaltung,Katalogisierung, Zugriffskontrolle und Erstellung detaillierter technischer Dokumentationen.
• Interaktion und Support: Enge Zusammenarbeit mit Datenanalysten und BI-Analysten, Business zur Aufbereitung der notwendigen Daten, Betreuung und Support bestehender Showcases.

Anstellungsbedingungen: