Старший инженер данных в N-iX

N-iX ищет в команду старшего инженера по платформе данных.О проектеНаш клиент — ведущая розничная сеть Узбекистана, имеющая около миллиона постоянных клиентов и более 125 магазинов в 11 регионах. Компания управляет супермаркетами, магазинами у дома, магазинами повседневного спроса, оптовым магазином и интернет-супермаркетом. У клиента также есть два склада (сухой и с контролируемой температурой) и центр фруктов и овощей. Мы стремимся развернуть надежное, гибкое и масштабируемое хранилище данных, платформу BI и уровень аналитики, а также инструменты обработки данных (например, Python рабочие книги) и интеграцию с ИТ-системами Клиента. Этот проект улучшит практику управления данными и поддержит значительный рост компании, заложив основу для передовых решений AI/ML. Обязанности: Проектирование и создание масштабируемых конвейеров данных для приема, обработки и преобразования больших объемов данных из различных источников. Внедрение ETL/ELT. процессы для интеграции данных в хранилище данных. Разрабатывайте и оптимизируйте запросы для повышения производительности и масштабируемости. Поддерживайте и поддерживайте хранилище данных, обеспечивая высокую доступность и надежность. Сотрудничайте с учеными, аналитиками и другими заинтересованными сторонами, чтобы понимать требования к данным и предлагать решения. Мониторинг и устранять проблемы с конвейером данных, обеспечивая целостность и качество данных. Внедрять передовые методы проектирования данных, включая обзоры кода, тестирование и контроль версий. Работать в гибкой среде совместной работы для создания, развертывания и обслуживания систем данных. Обеспечивать соответствие решений по работе с данными. соответствие стандартам безопасности, конфиденциальности и управления. Разрабатывать и поддерживать комплексную документацию для всех процессов обработки данных. Требования: Степень бакалавра в области компьютерных наук, информационных систем или смежных областях. Подтвержденный опыт (5+ лет) в качестве инженера по данным, данных Архитектор или аналогичная должность. Владение инструментами и платформами ETL, такими как Apache Airflow, dbt, AWS Glue. Хорошее знание концепций хранилищ данных и опыт работы с такими платформами, как Snowflake, AWS Redshift или аналогичными. Опыт проектирования и управления масштабируемыми озерами данных. использование облачных платформ (например, AWS S3, Azure Data Lake), оптимизированных для крупномасштабного хранения и извлечения данных. Опыт работы с форматами Avro, Parquet и ORC, обеспечивающий эффективное хранение данных, развитие схемы и высокопроизводительную обработку в распределенных средах. .Большой опыт работы с SQL и реляционными базами данных (например, PostgreSQL, MySQL, SQL Server).Знакомство с технологиями больших данных (например, Hadoop, Spark).Сильные навыки программирования на Python или других соответствующих языках.Опыт работы с облачными платформами, особенно с AWS. Понимание передового опыта управления данными, качества данных и безопасности данных. Отличные навыки решения проблем и внимание к деталям. Сильные коммуникативные навыки, как устные, так и письменные. Приятно иметь: Опыт работы с SAP BW/4HANA, SAP S/4HANA. Знания. визуализации данных и инструментов BI, таких как Tableau, PowerBI. Понимание концепций AI/ML и интеграции в конвейеры данных. Сертификация в облачных сервисах (AWS, Azure, GCP). Мы предлагаем: Гибкий формат работы — удаленный, в офисе или гибкийA. конкурентоспособная заработная плата и хороший компенсационный пакетPersonalized career расширитьProfessional development tools (mentoring program, tech talks and trainings, centers of excellence, and more)Active tech communities with regular knowledge sharingEducation reimbursementMemoryable anniversary presentsCorporate events and team building Show more Show less Должностный уровень не применяется Тип занятости Полный рабочий день Должностные обязанности Инженерия Отрасли Строительные работы