Dateningenieur (Luftstrom) in RecruitGarden

Herzlichen Glückwunsch! Möchten Sie ein IT-Produkt entwickeln, das von allen Ukrainern genutzt wird?

Mit großem Aufwand Einfluss auf die Architektur nehmen?

Wir suchen einen Data Engineer mit Python/Airflow für ein bekanntes Unternehmen.

TOP Konditionen, Leistungen, Versicherung, ein Projekt, das angenehm sein wird erzählen.

Möchten Sie mehr erfahren?

Hauptaufgaben:

–  Design, Optimierung und Unterstützung des Apache Airflow-Clusters und Python-Codes für die Datenorchestrierung
-Logische Entwicklung und Unterstützung von ETL-Prozessen (Datenerfassung, Transformation, Laden)
– Design der Integrationsinteraktion zwischen Systemen, Erstellen Dienste für Integration und Datenaustausch
– Optimierung der Leistung von Datenverarbeitungsprozessen, Identifizierung und Beseitigung von Engpässen
– Zusammenarbeit mit Analysten und Entwicklern zur Sicherstellung einer qualitativ hochwertigen Datenbereitstellung

Pflichtvoraussetzungen:

– Apache Airflow: Erstellung von DAGs, Betreiberkonfiguration, Leistungsüberwachung und -optimierung
– Erfahrung mit Python (Schwerpunkt Backend- und Integrationslösungen) ab 3 Jahren
– Bash, Docker, DBT, GitLab CI/CD (Prozessautomatisierung, Bereitstellung, Optimierung von Pipelines)
– MS SQL Server und PostgreSQL (Schreiben komplexer SQL-Abfragen, Optimierung, Erstellen von Prozeduren und Funktionen)

Wird von Vorteil sein:
– Erfahrung mit Apache Spark (verteilte Verarbeitung großer Datenmengen)
– Kenntnisse von Tools Big Data oder Cloud-Plattformen (AWS/GCP/Azure)
– Verständnis von DataOps und CI/CD Prinzipien

Wir bieten:

• Hochbelastete Systeme mit echten Skalierungsherausforderungen
• Moderner Stack und Freiheit bei technologischen Lösungen
• Fähigkeit, Einfluss auf die Architektur von Produkten zu nehmen, die von Millionen verwendet werden
Professionell:
• Mentoring durch Senioren mit Erfahrung in Unternehmenslösungen
• Die Kompensation zusätzlicher Kosten im Zusammenhang mit Arbeitsaufgaben erfolgt nach unternehmensinternen Vorgaben Policen
• Kranken- und Lebensversicherung
• Firmenrabatte von Nova-Partnern
• Psychische Gesundheitsunterstützung. Möglichkeit kostenloser Beratungen mit einem Unternehmenspsychologen
• Soziale Verantwortung und Freiwilligenbewegung „Ihr für sich“
• Interessenclubs: Laufen, Schach und andere Initiativen zur Inspiration
• Soziale Feiertage und Entschädigungen gemäß dem Arbeitsgesetzbuch der Ukraine