Старший инженер данных в VeliTech

VeliTech — это продуктовая компания, в которой каждый увлечен технологиями и стремится быть на шаг впереди. Наша команда основана на глубоком понимании передовых фреймворков, технологий и непрерывном обучении. Эта комбинация принесла нам успех, более 35 миллионов пользователей, обслуживаемых нашими продуктами iGaming, революционный Tech Radar и команду из более чем 200 ярких умов, которые создали такое случается. И эта команда готова приветствовать вас в мире возможностей для роста и расширения вашего опыта. Если это вас интересует, не ищите дальше — это идеальная возможность для вас! Мы приглашаем старшего инженера по обработке данных присоединиться к нам. Команда разработчиков VeliHorizon. Horizon — это платформа на основе микросервисов, управляемая API, которая выводит онлайн-казино, ставки на спорт и многое другое на новый уровень. Наша передовая технология интегрируется с ведущими игровыми поставщиками для создания высокозащищенной и совместимой игровой среды, которая разработан для удовлетворения потребностей всех клиентов. Технический стек: Python 3, Kubernetes, PostgreSQL, AWS RDS, Clickhouse, BigQuery, Apache Airflow, Kafka, AWS S3, AWS DMS, Git, Docker, Jenkins, ELK, Prometheus, Grafana. В этой роли Вы будете: разрабатывать, проектировать и реализовывать конвейеры ETL для нескольких источников данных, ежедневно принимающих огромные объемы данных; разрабатывать и поддерживать новые проекты и инструменты для хранилища данных; оптимизировать, улучшать и реорганизовывать текущие приложения, если это будет сочтено целесообразным; сотрудничать с разработчиками программного обеспечения для сбора, форматирования и подготовка данных для различных целей. Разработка и поддержка API-интерфейсов, необходимых для доступа к данным. Необходимые навыки и опыт: минимум 4+ года опыта работы в области инженерии данных. Знание SQL и РСУБД, предпочтительно PostgreSQL. Профессиональный опыт использования Python для целей обработки данных, разработки серверных микросервисов. , RESTful APIОпыт работы с Kubernetes.Сильные навыки обработки/обработки данных.Опыт понимания принципов построения хранилищ данных.Практический опыт проектирования конвейеров данных ETL, ELT, предоставления обработанных данных конечным пользователям. Будет большим плюсом:Опыт работы с Airflow, т. е. создания групп DAG, проектирования и мониторинга данных. конвейерыОпыт работы с потоковыми хранилищами данных в режиме реального времени, в основном интересуется Apache Kafka или аналогичным.Знакомство с CI/CD с использованием конвейеров Jenkins или аналогичных инструментов.Инструменты/процессы синхронизации данных между разнородными источниками данных (SQL, NoSQL, DMS, Clickhouse, BigQuery, ElasticSearch и т. д.). ) Высшее образование в области науки о данных, статистики, прикладной математики, эконометрики, информатики или других смежных областях. Мы предлагаем: Здравоохранение Медицинскую страховку - полное покрытие Оплаченные больничные дни - 10 дней Программа благополучия Заслуженный отдых Оплачиваемый отпуск - 20 дней Возможности работы из любой точки мира Домой Офис Смешайте оба варианта так, как вы хотитеОбучение и развитиеВозможность посещать конференции и профессиональные мероприятияВнутренние образовательные программыОбраз жизниПродукционное мышлениеИнженерная культура в нашей модели набора навыков в форме ДНК Показать больше Показывай меньше Посадовый ровеньСтарший средний уровень Тип занятости Полный рабочий день Должностные обязанности Инженерия Отрасли Разработка программного обеспечения