Инженер среднего данных в Никс

Стабильное развитие специалиста возможна только в том случае, если его команда стабильна. В NIX мы ищем Инженер средних данных , и мы уверены, что такой специалист будет продолжать расти профессионально и будет Способен достичь новых карьерных высот.

Обязанности:

• Сотрудничать с владельцами продуктов и командами, чтобы идентифицировать, разработать и реализовать новые функции для поддержки растущих потребностей в данных. > Создание и поддержание оптимальной архитектуры для извлечения, преобразования и загрузки данных из широкого спектра источников данных, включая внешние API, потоки данных и озера данных. < /li>
• реализация требований к конфиденциальности данных и безопасности данных, чтобы обеспечить соответствие решениям и структурам безопасности. < /li>
• Мониторинг и предвидеть тенденции в разработке данных и предлагает изменения в соответствии с организационными целями и потребностями. < /li>
• Поделиться знаниями с другими командами по различным инженерам данных или темам, связанным с проектами.
• сотрудничать с командой, чтобы решить, какие инструменты и стратегии использовать в определенных сценариях интеграции данных.

Что мы ожидаем от вас:

• 3+ года коммерческого опыта в разработке данных.
• Сильные навыки программирования в Python или Scala .
• твердые с распределенными вычислительными подходами, шаблонами и технологиями (Spark, Pyspark). /span>
• Опыт работы с любой облачной платформой (GCP, AWS, Azure) и ее ориентированные на данные компоненты .
• Уэрите в SQL и настройке запросов.
• Понимание принципов хранилища данных и концепций моделирования (например, знание типов моделей данных и терминологии, включая OLTP/OLAP, SCD, (DE) Нормализация, размерное, моделирование звезд/снежинок и т. Д.).
• экспертиза в использовании Любые перечисленные реляционные базы данных (PostgreSQL, MSSQL или MySQL).
• Опыт с оркестровкой любого потоки данных (например, Apache Airflow, Prefect, Glue, Azure Data Factory).
• a Командный игрок с отличными навыками сотрудничества.
• Минимальный английский уровень B2.

будет плюс:

• Экспертиза в принципах проектирования данных. Понимание плюсов и минусов решений SQL/NOSQL, их типов и конфигураций (автономный/кластер, колонка/строка, хранилище клавиш-значения/документа).
• Опыт в современном здании хранилища данных с использованием снежинки, AWS Redshift или BigQuery.
• глубокие знания по внутренним искра (настройка, оптимизация запроса).
• Опыт интеграции данных и архитектуры бизнес-разведки. Данные озера и озеро (Azure Data Lake, Apache Hudi, Apache Aceberg, Delta Lake).
• Опыт работы с контейнерными (Docker, ECS, Kubernetes) или без сервера (лямбда) развертывания.
• Хорошие знания о стандартах и ​​форматах популярных данных (например, JSON, XML, Proto, Parquet, Avro, Orc и т. Д.).
• Span Style = "Font-Weight: 400"> Опыт с платформами: Informatica, DataBricks, Talend, FiveTran или Comenuce.
• Опыт в науке о данных и машинном обучении с моделями строительного машинного обучения.

Что мы предлагаем:

• долгосрочная стратегия для вашего развития в качестве эксперта вместе с командой, у которой почти 30 лет профессионала опыт.
• Участие в крупных международных проектах, которые позволяют освоить новые технологии и области.
• образовательные мероприятия и профессиональная подготовка, которые помогут вам построить стабильный карьерный путь.
• гибкая система вознаграждений, где ваш доход будет зависеть от вас и вашего желания расти.
• дружелюбная и уютная корпоративная культура с минимальным уровнем формальности и бюрократии.
• Возможность удаленно присоединяться к проекту.

Чтобы начать успешную карьеру с NIX, отправьте свое резюме в [email protected] . Мы будем рады преодолеть новые профессиональные проблемы вместе с вами!