Starszy inżynier danych w N-iX

N-iX poszukuje do zespołu Starszego Inżyniera Platformy Danych.O projekcieNaszym klientem jest wiodąca sieć detaliczna w Uzbekistanie, posiadająca około miliona stałych klientów i ponad 125 sklepów w 11 regionach. Spółka prowadzi supermarkety, sklepy osiedlowe, sklepy ogólnospożywcze, hurtownię i supermarket internetowy. Klient prowadzi także dwa magazyny (suche i z kontrolowaną temperaturą) oraz centrum owoców i warzyw. Naszym celem jest wdrożenie solidnej, elastycznej i skalowalnej hurtowni danych, platformy BI i warstwy analitycznej wraz z narzędziami do przetwarzania danych (np. Python skoroszyty) oraz integracje z systemami informatycznymi Klienta. Projekt ten ulepszy praktyki zarządzania danymi i wesprze znaczący rozwój firmy, kładąc podwaliny pod zaawansowane rozwiązania AI/ML. Obowiązki: Projektowanie i budowanie skalowalnych potoków danych w celu przyjmowania, przetwarzania i przekształcania dużych ilości danych z różnych źródeł. Wdrażanie ETL/ELT procesy integracji danych z hurtownią danych.Tworzenie i optymalizacja zapytań pod kątem wydajności i skalowalności.Utrzymanie i wspieranie hurtowni danych, zapewniając wysoką dostępność i niezawodność.Współpraca z analitykami danych, analitykami i innymi interesariuszami, aby zrozumieć wymagania dotyczące danych i dostarczać rozwiązania.Monitoruj i rozwiązywać problemy z potokiem danych, zapewniając integralność i jakość danych. Wdrażaj najlepsze praktyki inżynierii danych, w tym przeglądy kodu, testowanie i kontrolę wersji. Pracuj w zwinnym środowisku współpracy, aby budować, wdrażać i utrzymywać systemy danych. Upewnij się, że rozwiązania w zakresie danych są zgodne ze standardami bezpieczeństwa, prywatności i zarządzania.Tworzenie i utrzymywanie kompleksowej dokumentacji dla wszystkich procesów inżynierii danych.Wymagania: Licencjat z informatyki, systemów informatycznych lub dziedziny pokrewnej.Udokumentowane doświadczenie (ponad 5 lat) jako inżynier danych, Data Engineer Architekt lub stanowisko na podobnym stanowisku. Biegła znajomość narzędzi i frameworków ETL, takich jak Apache Airflow, dbt, AWS Glue. Dobra znajomość koncepcji hurtowni danych i doświadczenie z platformami takimi jak Snowflake, AWS Redshift lub podobnymi. Doświadczenie w projektowaniu i zarządzaniu skalowalnymi jeziorami danych korzystanie z platform chmurowych (np. AWS S3, Azure Data Lake), zoptymalizowanych pod kątem przechowywania i odzyskiwania danych na dużą skalę. Znajomość formatów Avro, Parquet i ORC, zapewniająca wydajne przechowywanie danych, ewolucję schematu i wysokowydajne przetwarzanie w środowiskach rozproszonych . Solidne doświadczenie z SQL i relacyjnymi bazami danych (np. PostgreSQL, MySQL, SQL Server). Znajomość technologii Big Data (np. Hadoop, Spark). Dobra umiejętność programowania w Pythonie lub innych odpowiednich językach. Doświadczenie z platformami chmurowymi, w szczególności AWS. Zrozumienie najlepszych praktyk w zakresie zarządzania danymi, jakości danych i bezpieczeństwa danych.Doskonałe umiejętności rozwiązywania problemów i dbałość o szczegóły.Doskonałe umiejętności komunikacji, zarówno werbalnej, jak i pisemnej.Miło jest posiadać:Doświadczenie z SAP BW/4HANA, SAP S/4HANA.Wiedza wizualizacji danych i narzędzi BI, takich jak Tableau, PowerBI.Zrozumienie koncepcji AI/ML i integracji w ramach data potoków.Certyfikacja w usługach chmurowych (AWS, Azure, GCP).Oferujemy:Elastyczny format pracy - zdalny, w biurze lub elastycznyA konkurencyjne wynagrodzenie i dobry pakiet wynagrodzeńPezindywidualizowany rozwój karieryNarzędzia rozwoju zawodowego (program mentorski, rozmowy i szkolenia technologiczne, centra doskonałości i nie tylko)Aktywne społeczności technologiczne regularnie dzielące się wiedząZwrot kosztów edukacjiNiezapomniane prezenty rocznicoweWydarzenia korporacyjne i budowanie zespołówInne korzyści zależne od lokalizacji Pokaż więcej Pokaż mniej Poziom pozycji Nie dotyczy Rodzaj zatrudnienia Pełny etat Obowiązki służbowe Inżynieria Przemysły Prace budowlane