Inżynier Big Data w MGID

Opis stanowiska MGID to globalna platforma reklamowa pomagająca markom docierać na dużą skalę do unikalnych lokalnych odbiorców. W MGID umożliwiamy markom i wydawcom przejrzystą współpracę za pośrednictwem naszej technologii kierowania na prywatność, aby umożliwić reklamodawcom zwiększanie wydajności i świadomości, a wydawcom utrzymanie odbiorców i zarabianie na nich. Dziś tworzymy unikalne technologie i z Waszą pomocą chcemy mierzyć jeszcze wyżej.MGID to:— Autorska usługa Highload, która dostarcza 185 miliardów reklam do 850 milionów unikalnych użytkowników w ponad 70 językach;— Zwycięzca wielokrotnych Nagrody AdTech za innowacyjność i jakość produktów; — Ponad 600 pracowników działających w biurach w USA, Europie i Azji; — Pasja do najnowocześniejszych technologii i płynnej struktury pionowej, która umożliwia zespołom regionalnym wymianę umiejętności i rozwój praktyk. Poszukujemy inżyniera Big Data, który będzie efektywnie pracować z dużymi zbiorami danych i wspierał nasz zespół Data Science w opracowywaniu, ulepszaniu i dostarczaniu naszych rozwiązań i algorytmów ML i AI. Jeśli pasjonujesz się budowaniem skalowalnych rozwiązań w zakresie danych i nadążaniem za zmianami -na bieżąco z najnowszymi trendami i technologiami branżowymi, czekamy na Twoją wiadomość!Wymagania Udokumentowane doświadczenie w tworzeniu i optymalizacji aplikacji PySpark. Dobra znajomość zasad i koncepcji przetwarzania rozproszonego. Praktyczne doświadczenie w pracy z dużymi zbiorami danych z wykorzystaniem technologii takich jak Hadoop, Spark, ClickHouse. Znajomość języków programowania typu Python, SQL. Doświadczenie z interfejsem wiersza poleceń Linux/Unix. Znajomość narzędzi do wizualizacji danych i dashboardów. Silne umiejętności komunikacyjne i umiejętność efektywnej pracy w zdalnym środowisku zespołowym. Doskonałe umiejętności rozwiązywania problemów i dbałość o szczegóły. Dodatkowym atutem będzie: tytuł licencjata lub magistra w dziedzinie informatyki lub pokrewnej dziedziny. Praktyczne doświadczenie z ClickHouse. Praktyczne doświadczenie z systemami przetwarzania strumieni i przesyłania wiadomości, takimi jak Kafka. Praktyczne doświadczenie z bazami danych NoSQL (np. MongoDB), w szczególności Aerospike. Znajomość domeny AdTech - zrozumienie reklamy internetowej, RTB. Znajomość technologii konteneryzacji takich jak Docker i Kubernetes, platform chmurowych. Znajomość najlepszych praktyk w zakresie zarządzania danymi i bezpieczeństwa. Znajomość koncepcji i struktur uczenia maszynowego. Obowiązki: Współpraca z badaczami danych, analitykami danych i innymi interesariuszami w celu zrozumienia potrzeb w zakresie danych i opracowania rozwiązań. Projektuj, rozwijaj i optymalizuj aplikacje PySpark do przetwarzania i analizowania dużych zbiorów danych ustrukturyzowanych i nieustrukturyzowanych. Monitoruj i oceniaj dane, aby zapewnić dokładność i integralność, rozwiązywać problemy i debugować kod PySpark. Twórz i utrzymuj potoki danych do pozyskiwania, przetwarzania i przechowywania danych, optymalizując je pod kątem wydajności i skalowalności. Twórz i utrzymuj pulpity nawigacyjne i raporty wizualizacji danych, aby umożliwić wgląd i podejmowanie decyzji. Twórz i utrzymuj narzędzia i biblioteki w celu wydajnego przetwarzania danych. Bądź na bieżąco z trendami branżowymi i nowymi technologiami, aby stale ulepszać możliwości przetwarzania danych.Pokaż więcej Pokaż mniej Poziom pozycji Asystent Rodzaj zatrudnienia Pełny etat Odpowiedzialność zawodowa Technologia informacyjna Przemysły Profesjonalne usługi