Інженер даних в Everstar

Ми — агентство Everstar. Наше завдання — допомагати приватним компаніям оборонної сфери знаходити талановитих людей та наближати перемогу України.

Один з наших клієнтів займається виробництвом техніки та радіоелектронних пристроїв, що покращує ефективність ведення бойових дій.

Компанія постійно зростає, розвивається та вдосконалює робочі процеси.

Зараз розширюється IT відділ, тож ми шукаємо Data Engineer.

Необхідні навички та досвід:

• Досвід роботи інженером даних від 3-х років.
• Впевнене володіння SQL та практичний досвід роботи з базами даних на високому рівні.
• Вільне володіння Airflow. Вміння будувати стабільні процеси завантаження (Incremental load, Full load) та трансформації даних всередині сховища.
• Досвід розробки (процедури, тригери, функції) RDBMS, розуміння індексів, планів запитів, досвід оптимізації запитів.
• Досвід роботи з Python для написання скриптів обробки даних. Досвід з Pandas, Requests, Pyodbc.
• Вища освіта (технічна, кібернетична, математична або суміжна).
  Буде перевагою:
• Практичний досвід налаштування моніторингу якості даних (Data Quality).
• Практичний досвід контейнеризації та оркестрації (Docker, Kubernetes).
• Досвід роботи з хмарними сервісами (AWS, GCP, Azure) для обробки та зберігання даних.

Майбутні обов'язки:

• Проектування, розгортання та оптимізація корпоративного сховища даних, забезпечення масштабованості та відмовостійкості.
• Створення ETL/ELT-процесів для збору й обробки даних з різних джерел (DBs, Google Sheets, HTTP, API, файли) та їх оркестрація за допомогою Apache Airflow.
• Забезпечення якості та цілісності даних, впровадження механізмів валідації та моніторингу.
• Керування метаданими,каталогізація, контроль доступу та підготовка детальної технічної документації.
• Взаємодія та підтримка: Тісна співпраця з дата аналітиками та BI-аналітиками, бізнесом для підготовки необхідних даних, супровід і підтримка існуючих вітрин.

Умови роботи:

• Офіційне працевлаштування;
• Відпустка — 24 календарні дні на рік;
• Медичне страхування після успішного проходження випробувального терміну;
• Можливість пропонувати та втілювати ідеї;
• Постійний розвиток та розширення експертизи;
• Бронювання військовозобов'язаних за умови наявності актуальних військово-облікових документів;
• Відкрита та професійна команда, яка працює з інноваціями.