Big-Data-Ingenieur in MGID

StellenbeschreibungMGID ist eine globale Werbeplattform, die Marken dabei hilft, einzigartige lokale Zielgruppen in großem Maßstab zu erreichen. Bei MGID ermöglichen wir Marken und Verlagen durch unsere datenschutzorientierte Targeting-Technologie eine transparente Zusammenarbeit, damit Werbetreibende ihre Leistung und Bekanntheit steigern können und Verlage ihre Zielgruppen binden und monetarisieren können. Heute entwickeln wir einzigartige Technologien und mit Ihrer Hilfe wollen wir noch höhere Ziele erreichen. MGID ist: – Ein proprietärer Highload-Dienst, der 185 Milliarden Werbung an 850 Millionen einzelne Benutzer in mehr als 70 Sprachen liefert; – Der Gewinner mehrerer AdTech-Auszeichnungen für Innovation und Produktqualität; – Eine Belegschaft von über 600 Mitarbeitern, die in Niederlassungen in den USA, Europa und Asien tätig sind; – Eine Leidenschaft für Spitzentechnologie und eine nahtlose vertikale Struktur, die es den regionalen Teams ermöglicht, Fähigkeiten und Entwicklungen auszutauschen Praktiken.Wir suchen einen Big-Data-Ingenieur, der effizient mit großen Datensätzen arbeitet und unser Data-Science-Team bei der Entwicklung, Verbesserung und Bereitstellung unserer ML- und KI-Lösungen und -Algorithmen unterstützt.Wenn Sie eine Leidenschaft für die Entwicklung skalierbarer Datenlösungen haben und auf dem Laufenden bleiben - Wir sind über die neuesten Branchentrends und Technologien auf dem Laufenden und möchten von Ihnen hören! Anforderungen Nachgewiesene Erfahrung in der Entwicklung und Optimierung von PySpark-Anwendungen. Fundierte Kenntnisse der Prinzipien und Konzepte des verteilten Rechnens. Praktische Erfahrung in der Arbeit mit großen Datensätzen unter Verwendung von Technologien wie Hadoop, Spark, ClickHouse. Kenntnisse in Programmiersprachen wie Python, SQL. Erfahrung mit der Linux/Unix-Befehlszeilenschnittstelle. Vertrautheit mit Datenvisualisierungs- und Dashboarding-Tools. Starke Kommunikationsfähigkeiten und die Fähigkeit, effektiv in einer Remote-Teamumgebung zu arbeiten. Hervorragende Fähigkeiten zur Problemlösung und Liebe zum Detail. Von Vorteil: Bachelor- oder Master-Abschluss in Informatik oder einem verwandten Bereich. Praktische Erfahrung mit ClickHouse. Praktische Erfahrung mit Stream-Processing- und Messaging-Systemen wie Kafka. Praktische Erfahrung mit NoSQL-Datenbanken (zum Beispiel MongoDB), insbesondere Aerospike. Kenntnisse im AdTech-Bereich – Verständnis von Online-Werbung, RTB. Vertrautheit mit Containerisierungstechnologien wie Docker und Kubernetes, Cloud-Computing-Plattformen. Vertrautheit mit Best Practices für Data Governance und Sicherheit. Kenntnisse über Konzepte und Frameworks für maschinelles Lernen. Aufgaben: Zusammenarbeit mit Datenwissenschaftlern, Datenanalysten und anderen Interessengruppen, um Datenanforderungen zu verstehen und Lösungen zu entwickeln. Entwerfen, entwickeln und optimieren Sie PySpark-Anwendungen für die Verarbeitung und Analyse großer Mengen strukturierter und unstrukturierter Daten. Überwachen und bewerten Sie Daten, um Genauigkeit und Integrität sicherzustellen, Fehler im PySpark-Code zu beheben und zu debuggen. Erstellen und pflegen Sie Datenpipelines zum Erfassen, Verarbeiten und Speichern von Daten und optimieren Sie dabei Leistung und Skalierbarkeit. Entwickeln und pflegen Sie Dashboards und Berichte zur Datenvisualisierung, um Erkenntnisse und Entscheidungsfindung zu ermöglichen. Erstellen und pflegen Sie Tools und Bibliotheken für eine effiziente Datenverarbeitung. Bleiben Sie über Branchentrends und neue Technologien auf dem Laufenden, um die Datenverarbeitungsfunktionen kontinuierlich zu verbessern.Zeig mehr Zeige weniger Positionsebene Assistent Art der Anstellung Vollzeit Berufliche Verantwortlichkeiten Informationstechnologie Branchen Professionelle Dienste