Lead Big Data Engineer в DAXX

### Описание проекта Наш клиент - один из ведущих мировых производителей оборудования. В компании работает более 250 000 сотрудников в 30 странах мира. Он ориентирован на высококачественные технические и дизайнерские продукты, производственные ноу-хау, создание решений для цепочек поставок для ведущих мировых брендов. ### Обязанности * Создание и улучшение архитектуры конвейера данных * Написание и оптимизация новых процессов ETL в SQL * Подготовка обучающих наборов данных для группы аналитики данных * Создание новых рабочих процессов данных на основе функций AWS Step ### Требования * Python * PySpark * Bash * Hadoop (HDFS, Hive / Impala, YARN) * SQL (оптимизация SQL-запросов, написание хранимых процедур и функций, отладка SQL) * AWS S3 * Git, AWS CodeCommit / CodePipeline ### Будет плюсом * AWS Aurora * AWS Glue * AWS SQS / SNS * AWS Step Functions управление рабочим процессом ### Daxx предлагает * Прямое сотрудничество с клиентом * Выделенный менеджер по персоналу / клиентам * Регулярные проверки эффективности * Конкурентоспособная заработная плата, медицинская страховка, 20 рабочих дней отпуска * Регулярные корпоративные мероприятия, тимбилдинги и т. Д. .