Lead Data Software Engineer in EPAM Ukraine

Unser Kunde, ein weltbekanntes multinationales Technologieunternehmen mit Sitz in Kalifornien und eines der Big Five-Technologieunternehmen, erweitert seine Partnerschaft mit EPAM.

Kundenspezialisierung:

- Haushaltselektronik

-Software

- online Dienste

Sie arbeiten mit Weltklasse-Experten und -Technologien aus dem Herzen des Silicon Valley zusammen und entwickeln Produkte und Dienstleistungen, die Milliarden von Menschen täglich nutzen.

Wir suchen einen erfahrenen Lead Software Data Engineer für unser Team

Fähigkeiten

• Mehr als 5 Jahre praktische Erfahrung mit Big Data: Hadoop (HDFS, YARN oder Mesos), Spark
• Kenntnisse und praktische Erfahrung in der Verwendung von SQL im Kontext der Arbeit mit Big Data: Spark SQL, Hive QL
• Spark-Kenntnisse
• Optimieren von Spark-Ausführungsplänen mithilfe der Spark-Benutzeroberfläche
• Gute Scala-Kenntnisse, einschließlich Scala-Funktionsbibliotheken (Cats)
• Kenntnisse über die Grundlagen der Stapelverarbeitung und ETL-Prinzipien in Data Warehouses
• Erfahrung mit Datenorchestrierung und Kenntnis der Datenvollständigkeitsbedingungen
• Erfahrung mit Datenbereinigung (Verarbeitung beschädigter, fehlerhafter und duplizierter Daten)
• Kenntnisse in Schemamigration und Datensatzentwicklung
• Englischkenntnisse in Wort und Schrift mindestens auf B2-Niveau
• Fähigkeit, eine neue Reihe von Tools und Technologien, die im Projekt verwendet werden, schnell zu erlernen und zu erlernen: Serviceplattformen, Telemetrieanbieter, Spark-as-a-Service, Sammelsystem und mehr

Aufgaben

• Entwicklung von Datenpipelines, Aufgaben zur Erstellung neuer Ausgabedatensätze im Rahmen der Entwicklung neuer Funktionalitäten
• Anpassung bestehender Datenpipelines zur Integration mit verschiedenen Plattformen, Tools und Diensten
• Bearbeiten von Fehlern in Code und Daten, die aufgrund falscher Logik oder Implementierung generiert wurden
• Schnelle Datenanalyse und Recherche zur Unterstützung des Produktmanagementteams
• Überwachung und Beseitigung von Produktionsproblemen mit bestehenden Datenpipelines
• Entwicklung und Durchführung von Datenqualitätsprüfungen (Qualitätskontrolle)
• Planung des Umfangs von Neuentwicklungen: Einschätzung der notwendigen Ressourcen, Planung der Zeitfenster für die Durchführung von Aufgaben
• Bewahrung der Übersichtlichkeit der Ticketbearbeitungsprozesse
• Verbessern Sie Aufgaben, Anwendungen und das von uns verwaltete System in allen Aspekten: Codequalität, Komplexität, Wartung, Dokumentation
• Kommunizieren Sie mit anderen Dateningenieuren im Team, Kollegen und Projektmanagern über Status, Probleme, Schätzungen, Zeitpläne usw.

Wird von Vorteil sein

• Verständnis der Ideen und Prinzipien der funktionalen Programmierung
• Erfahrung beim Schreiben und Verwenden von Webdiensten
• Erfahrung mit Teradata, Vertica, Oracle oder Tableau
• Erfahrung mit Spark Streaming und Kafka
• Erfahrung oder Kenntnisse der folgenden Technologien: Apache Iceberg, Trino (Presto), Druid, Cassandra, Blob-Speicher wie AWS
• Erfahrung mit Splunk
• Kenntnisse oder Erfahrungen mit Askaban oder Airflow

Bei uns können Sie

• Arbeiten Sie nach einem flexiblen Zeitplan aus der Ferne oder in einem unserer komfortablen Büros oder Co-Working Spaces in der Ukraine
• Besorgen Sie sich die notwendige Ausrüstung, um Arbeitsaufgaben auszuführen
• Ändern Sie Projekte und Technologiestacks innerhalb von EPAM
• Sammeln Sie Erfahrungen in verschiedenen Geschäftsbereichen (Versicherungen, E-Commerce, Gesundheitswesen, Finanzen, Reisen, Medien, künstliche Intelligenz und andere)
• Erwägen Sie Optionen für einen Umzug in mehr als 30 Länder auf der ganzen Welt
• Nehmen Sie an Freiwilligen-, Wohltätigkeitsprogrammen und Gemeinschaften teil (sowohl in technischer Hinsicht als auch in Interessen)

Wir unterstützen Sie bei der beruflichen Weiterentwicklung

• Planen Sie gemeinsam mit der Führungskraft Ihren individuellen Karriereweg
• Holen Sie regelmäßig Feedback von Kollegen ein
• Verbessern Sie Ihr Englisch kostenlos mit zertifizierten Lehrern (Speaking Clubs, Vorbereitungskurse für Kundeninterviews usw.)
• Holen Sie sich kostenlose Schulungen und Zertifizierungen mit AWS, GCP oder Azure Clouds
• Nutzen Sie das interne Schulungsprogramm E-learn (18.200+ spezialisierte Schulungs- und Mentoring-Programme)
• Erhalten Sie Zugang zu Unternehmenskonten auf LinkedIn Learning, Get Abstract und anderen Partnerressourcen
• Studieren Sie an der Solution Architecture School mit praktizierenden Architekten als Lehrern
• Entwickeln Sie sich als Führungskraft, treten Sie der Delivery Management, Resource Management, Leadership Essentials School und anderen bei
• In internen Communities unterrichtet werden (500+ Meetings, technische Diskussionen, Brainstorming-Sitzungen, Online-Events und Konferenzen pro Jahr)

Was wir anbieten

• Urlaubs- und Krankheitstage (auch ohne ärztliches Attest)
• Umfangreiches Versicherungsprogramm der Freiwilligen Krankenversicherung (VMI) mit Leistungen sowohl der medizinischen Behandlung als auch verschiedener Präventionsmöglichkeiten (u. a. sportliche Aktivitäten)
• Ausstellung einer Krankenversicherung für Familienmitglieder zu Firmentarifen
• Unterstützung durch das Unternehmen bei wichtigen Lebensereignissen (Geburt oder Adoption eines Kindes, Heirat etc.)
• Unterstützung für psychologischen Komfort: Rabatte auf die Dienste von Spezialisten für psychische Gesundheit oder Coaches, thematische Schulungen
• E-kids ist ein kostenloses Programmiersprachen-Trainingsprogramm für Kinder von EPAM-ern
• Angenehme Werbegeschenke

Über EPAM

• ERAM ist bestrebt, seinem globalen Team von mehr als 61.600 Fachleuten in mehr als 45 Ländern vom ersten Tag an Möglichkeiten zur beruflichen Weiterentwicklung zu bieten. Unsere Kollegen sind die Quelle des Erfolgs von ERAM, daher schätzen wir die Zusammenarbeit, versuchen immer, das Geschäft unserer Kunden zu verstehen und streben nach den höchsten Qualitätsstandards. Egal wo Sie sind, Sie werden einer engagierten, vielfältigen Community beitreten, die Ihnen hilft, Ihr volles Potenzial auszuschöpfen