Starszy inżynier danych (rozwiązania IT) @ Sigma Software w Sigma Software

Poszukujemy starszego inżyniera danych, który poprowadzi mały zespół i zmodernizuje prostą platformę danych w projekt samoobsługowej analizy w chmurze.

KLIENT

Sigma Software zapewnia najwyższej jakości usługi w zakresie tworzenia oprogramowania, projektowania graficznego, testowania i wsparcia. Systemy opracowane w celu zapewnienia korzyści klientom z branży motoryzacyjnej, telekomunikacyjnej, lotniczej, reklamowej, gier, bankowości, nieruchomości i opieki zdrowotnej.

PROJEKT

W ramach wewnętrznego projektu w Sigma Software mamy dwa główne cele: automatyzację raportowania i stworzenie samoobsługowego systemu analizy danych dla nasza firma.

Będziesz odpowiedzialny za projektowanie i modelowanie danych w DWH i Data Marts przy użyciu Spark i MS SQL, udostępnianie tych danych inżynierom BI tworzącym raporty w Apache Superset i współpracę z nimi oraz za współpracę z nimi . Ponadto będziesz współpracować z różnymi innymi członkami zespołu, którzy korzystają z tych danych. Częścią Twojego zadania będzie przeniesienie naszego rozwiązania lokalnego do środowiska opartego na chmurze.

WYMAGANIA

• Wiedza koncepcyjna z zakresu podstaw analityki danych, np. modelowania wymiarowego, ETL/ELT, narzędzi raportowania, zarządzania danymi, hurtowni danych, danych ustrukturyzowanych i nieustrukturyzowanych
• Dobra znajomość języka SQL i doświadczenie w RDBMS, pewna znajomość podstaw baz danych
• Doświadczenie w tworzeniu baz danych i modelowaniu danych, najlepiej z Databricks/Spark
• Doświadczenie w Pythonie
• Praktyczna wiedza na temat formatów serializacji i ich kompromisów (kolumnowych lub wierszowych)
• Doświadczenie w debugowaniu i optymalizacji zadań Spark
• Dobra komunikacja pisemna i werbalna umiejętności
• Co najmniej wyższy średniozaawansowany poziom znajomości języka angielskiego
• Licencjat z informatyki lub pokrewnej dziedziny
• Doświadczenie z narzędziem Business Intelligence będzie mile widziane -have

Poszukuję starszego inżyniera danych, który poprowadzi mały zespół i zmodernizuje prostą platformę danych w projekt samoobsługowej analizy w chmurze.

KLIENT

Sigma Software zapewnia najwyższej jakości usługi w zakresie tworzenia oprogramowania, projektowania graficznego, testowania i wsparcia. Systemy opracowane w celu zapewnienia korzyści klientom z branży motoryzacyjnej, telekomunikacyjnej, lotniczej, reklamowej, gier, bankowości, nieruchomości i opieki zdrowotnej.

PROJEKT

W ramach wewnętrznego projektu w Sigma Software mamy dwa główne cele: automatyzację raportowania i stworzenie samoobsługowego systemu analizy danych dla nasza firma.

Będziesz odpowiedzialny za projektowanie i modelowanie danych w DWH i Data Marts przy użyciu Spark i MS SQL, udostępnianie tych danych inżynierom BI tworzącym raporty w Apache Superset i współpracę z nimi oraz za współpracę z nimi . Ponadto będziesz współpracować z różnymi innymi członkami zespołu, którzy korzystają z tych danych. Częścią Twojego zadania będzie przeniesienie naszego rozwiązania lokalnego do środowiska opartego na chmurze.

,[Naszym celem jest stworzenie wydajnego systemu gromadzenia, przetwarzania, analizowania i wizualizacji dużych ilości danych z różnych źródeł, Położenie fundamentów i modelowanie danych, Opracowanie platformy do budowaniag i utrzymanie potoków danych zbierających dane z różnych źródeł, Tworzenie Hurtowni Danych, Analizowanie i przygotowywanie opisów domen we współpracy z analityką biznesową, Tworzenie Data Marts, Zaprojektowanie modelu uprawnień z elastyczną kontrolą pionowego i poziomego dostępu do danych]

< /p> Wymagania: Analityka danych, Databricks, ETL, Spark, SQL, RDBMS, BS, modelowanie danych, Python, umiejętności komunikacyjne