Старший інженер з даних в N-iX

N-iX шукає Senior Data Platform Engineer, щоб приєднатися до команди. Про проект. Наш клієнт — провідна мережа роздрібної торгівлі в Узбекистані, яка має близько мільйона постійних покупців і більше 125 магазинів в 11 регіонах. Компанія управляє супермаркетами, міськими магазинами, магазинами, гуртовим магазином та онлайн-супермаркетом. Клієнт також керує двома складами (сухими та з контрольованою температурою) і центром фруктів/овочів. Ми прагнемо розгорнути надійне, гнучке та масштабоване сховище даних, платформу BI та рівень аналітики разом із інструментами обробки даних (наприклад, Python). робочі книги) та інтеграції з ІТ-системами Клієнта. Цей проект покращить практику управління даними та сприятиме значному зростанню компанії, заклавши основу для передових рішень AI/ML. Обов’язки: проектування та створення масштабованих конвеєрів даних для прийому, обробки та перетворення великих обсягів даних із різних джерел. Впровадження ETL/ELT процеси для інтеграції даних у сховище даних. Розробляйте та оптимізуйте запити для продуктивності та масштабованості. Обслуговуйте та підтримуйте сховище даних, забезпечуючи високу доступність і надійність. Співпрацюйте з дослідниками даних, аналітиками та іншими зацікавленими сторонами, щоб зрозуміти вимоги до даних і надати рішення. Монітор і вирішуйте проблеми з конвеєром даних, забезпечуючи цілісність і якість даних. Впроваджуйте найкращі методи обробки даних, включаючи перевірку коду, тестування та контроль версій. Працюйте в гнучкому середовищі для спільної роботи, щоб створювати, розгортати та підтримувати системи даних. Переконайтеся, що рішення для обробки даних відповідність стандартам безпеки, конфіденційності та управління. Розробка та підтримка комплексної документації для всіх процесів обробки даних. Вимоги: ступінь бакалавра в галузі комп’ютерних наук, інформаційних систем або суміжної галузі. Перевірений досвід (5+ років) інженером з обробки даних, Архітектор або схожа посада. Знання інструментів і фреймворків ETL, таких як Apache Airflow, dbt, AWS Glue. Глибоке знання концепцій Data Warehouse та досвід роботи з такими платформами, як Snowflake, AWS Redshift або подібними. Досвід проектування та керування масштабованими озерами даних використання хмарних платформ (наприклад, AWS S3, Azure Data Lake), оптимізованих для великомасштабного зберігання та вилучення даних. Досвід у форматах Avro, Parquet і ORC, що забезпечує ефективне зберігання даних, еволюцію схем і високопродуктивну обробку в розподілених середовищах .Великий досвід роботи з SQL і реляційними базами даних (наприклад, PostgreSQL, MySQL, SQL Server). Знайомство з технологіями великих даних (наприклад, Hadoop, Spark). Сильні навички програмування на Python або інших відповідних мовах. Досвід роботи з хмарними платформами, зокрема AWS. Розуміння передових методів керування даними, якості даних і безпеки даних. Відмінні навички вирішення проблем і увага до деталей. Сильні навички спілкування, як усні, так і письмові. Приємно мати: досвід роботи з SAP BW/4HANA, SAP S/4HANA. Знання візуалізації даних та інструментів BI, таких як Tableau, PowerBI. Розуміння концепцій AI/ML та інтеграції в конвеєри даних. Сертифікація в хмарних службах (AWS, Azure, GCP). Ми пропонуємо: Гнучкий робочий формат - віддалений, офісний або гнучкийA конкурентоспроможна заробітна плата та хороший компенсаційний пакетPersonalized career growthProfessional development tools (mentorship program, tech talks and trainings, centers of excellence, and more)Active tech communities with regular knowledge sharingEducation reimbursementMemorable anniversary presentsCorporate events and team buildingsOther location-specific benefits Show more Show less Посадовий рівень Не застосовується Тип зайнятості Повний робочий день Посадові обов’язки Інженерія Галузі Будівельні роботи