senior big data engineer w Ohires

Jako starszy inżynier danych będziesz współpracować z zespołem, aby tworzyć najnowocześniejsze rozwiązania oparte na danych i analizach, pracując na różnych platformach, wykorzystując zarówno narzędzia i technologie On-prem, Platform, Big Data. Będziesz częścią zespołu inżynierii danych odpowiedzialnego zarówno za AI, jak i ML, rozwijając interfejsy / potoki danych, zazwyczaj obejmujące duże, złożone zbiory danych.

Co będziesz robił:

Przemyślane rozwiązywanie problemów: dla Ciebie rozwiązywanie problemów zaczyna się od jasnego i dokładnego zrozumienia kontekstu. Możesz rozkładać trudne problemy i pracować nad czystym rozwiązaniem, samodzielnie lub z kolegami z zespołu. Możesz swobodnie prosić o pomoc, gdy utkniesz.

Odpowiedzialny za budowanie danych i analitycznych rozwiązań inżynierskich ze standardowymi kompleksowymi wzorcami projektowymi i ETL, wdrażanie potoków danych, modelowanie danych, zużycie danych i optymalizację zapytań.

Odpowiedzialny za umożliwienie dostępu do danych w dostawcach, takich jak warstwy przechowywania AWS i transformacje w hurtowni danych AWS oraz dalszy transport w odpowiednich bazach danych, konsumentach, hurtowniach danych itp.

Wykazać się biegłą znajomością frameworków internetowych, takich jak Flask lub Django, a także frameworków integracji danych, takich jak dbt..

Doświadczenie w środowiskach produkcyjnych o dużej objętości, w tym w infrastrukturze odzyskiwania i odporności. Zidentyfikuj dalsze skutki ładowania/migracji danych (np. jakość danych, regulacje prawne itp.)

Wymagania:

• Wymagane jest minimum 4+ lat podobnego doświadczenia w pracy na bazach danych, hurtowniach danych, platformach ETL i AWS

• Doświadczenie w procesach wdrożeniowych on-premise i on using , Dockers, Jenkins

• Doświadczenie ze stosami technologicznymi, takimi jak ELK, Sentry, AirFlow

• Dostarcza wyniki podczas pracy w ramach krótkoterminowych (tygodniowo-miesięcznych), zorientowanych na wyniki zleceń serwisowych

• Wyraża propozycję wartości istniejących możliwości technologicznych i mapuje je do wymagań klienta, aby zminimalizować przyrostowe koszty rozwoju

• Doświadczenie w pracy z hurtownią danych On-Premise (Teradata) – modelowanie wymiarowe i danych. Doświadczenie w jednym z ETL, takim jak Informatica

• Biegły w językach zapytań i programowania, takich jak , NodeJS

• Wygodna praca z systemem operacyjnym, takim jak Linux i skrypty powłoki

• Doświadczenie w pracy związanej z obliczeniami, pamięcią masową i przetwarzaniem AWS (S3, Glue, Lambda, Redshift, , Dynamo DB, Athena, Sagemaker)

O Websmile

Websmile zapewnia kompleksowe i zaawansowane usługi firmom, które chcą kupić produkt i dążą do odniesienia sukcesu i postępu w cyfrowym świecie, wyznaczając jednocześnie jasne cele krótko- i długoterminowe. Jesteśmy ekspertami w tworzeniu zaawansowanych systemów opartych o technologie open source. Świadczymy kompleksowe usługi Web Development zgodnie z potrzebami naszych klientów.

Nasze biura zlokalizowane są w Izraelu i na Ukrainie