Старший инженер данных в Go interactive!

Прямое сообщение участника, который объявил о вакансии, с Go Interactive Роман Ткачук Роман Ткачук IT-рекрутер Наш клиент — компания, специализирующаяся на сфере Out-of-Home. В основе этого лежит более чем 50-летний опыт, основанный на уникальных задачах и возможностях этой области. Команда экспертов служит ценным партнером в обеспечении роста и совершенства. Инициатива призвана поддерживать и продвигать местные бистро путем объединения качества поставщиков, аутентичности торговых точек и лояльности потребителей. Культура инноваций компании отражена в ее решении Plug & Play, которое легко интегрируется с POS-системами торговых точек для бесперебойного и безопасного сбора данных. Способность компании интегрировать и анализировать данные о распродажах в режиме реального времени занимает центральное место в ее стратегии по предоставлению ценной информации, повышению операционной эффективности и персонализации обслуживания клиентов. В настоящее время мы ищем старшего инженера по обработке данных, который присоединится к команде и будет оказывать поддержку. компания в достижении своих целей. Обязанности: Проектирование и разработка: создание и поддержка масштабируемых конвейеров данных и архитектур на Google Cloud Platform (GCP) с использованием Python и других соответствующих инструментов. Интеграция данных: интеграция данных из нескольких источников. (например, API, базы данных, плоские файлы) в централизованные хранилища данных или озера данных. Моделирование данных: разрабатывайте и управляйте преобразованиями (например, DBT), чтобы гарантировать модульность, удобство обслуживания и производительность моделей данных. Разработка системы OLAP: проектирование, внедрение, и оптимизировать решения OLAP для эффективных аналитических запросов, включая кубы данных и стратегии агрегации. Автоматизация: автоматизируйте процессы сбора, преобразования и загрузки данных (ETL/ELT), чтобы обеспечить высокую доступность данных и надежность. Оптимизация производительности: отслеживайте, устраняйте неполадки и оптимизируйте рабочие процессы обработки данных для обеспечения скорости, экономической эффективности и масштабируемости. Сотрудничество: тесно сотрудничайте с аналитиками данных, учеными и другими инженерными группами, чтобы понимать потребности в данных и предоставлять индивидуальные решения. Безопасность и соответствие требованиям: Убедитесь, что решения для обработки данных соответствуют действующим нормам и соответствуют лучшим практикам обеспечения безопасности и качества данных. Требования: 4+ года опыта работы в качестве инженера по обработке данных. Большой опыт работы с Google Cloud Platform (BigQuery, Dataflow, Pub/Sub, облачное хранилище и т. д.). Знание Python для обработки и автоматизации данных. Уверенное знание SQL, особенно в оптимизации сложных запросов для аналитических рабочих нагрузок (OLAP). Практический опыт работы с системами OLAP, включая проектирование кубов данных, агрегаты и схемы (например, схемы «звезда» или «снежинка»). Опыт проектирования и реализации конвейеров ETL/ELT. Знакомство с контейнеризацией иd инструменты оркестрации (например, Docker, Kubernetes, Cloud Run). Понимание конвейеров CI/CD и контроля версий (например, Git). Английский язык на уровне выше среднего. Будет плюсом: Знакомство с Terraform или другим IaC (инфраструктура как код). инструменты для управления ресурсами GCP. Опыт работы с Apache Airflow для оркестрации рабочих процессов. Знание инфраструктур потоковой передачи данных (например, Kafka, Pub/Sub). Знакомство с рабочими процессами и инструментами машинного обучения на GCP (например, Vertex AI). Знакомство с Looker или другими инструментами визуализации данных. Владение французским языком. Мы предлагаем: Возможность работать удаленно. Открытый, прозрачный и веселая культура работы. Многонациональная команда и совместная рабочая среда. Постоянный обмен знаниями с заинтересованными коллегами. Возможности карьерного и профессионального роста. Показать больше Показать меньше Посадовый ровень Старший середний рівень Тип занятости Повний рабочий день Посадовые обвязки Информационные технологии Галузи Информационные технологии и услуги