Старший инженер данных в Simplify

Мы ищем опытного инженера по обработке данных, который присоединится к нашей элитной команде и внесет свой вклад в передовой проект в области кибербезопасности.

 < /p>

Наш партнер — инновационный стартап, разрабатывающий новаторскую платформу обнаружения приложений и реагирования на них. Используя OpenTelemetry и расширенную аналитику трассировки, их решение предоставляет предприятиям информацию в режиме реального времени о транзакциях и поведении во время выполнения, чтобы предотвратить атаки из контекста приложения. Их цель — преобразовать безопасность приложений за счет немедленного обнаружения аномалий, автоматического управления инцидентами и комплексного контекста.

Обязанности

Как старший инженер по данным, ваш основной ответственность будет заключаться в разработке и внедрении надежных конвейеров данных, способных эффективно принимать, обрабатывать и интегрировать огромные наборы данных. Эта роль требует знаний в области распределенных систем, архитектуры данных и оптимизации производительности для обеспечения бесперебойного потока и целостности данных на платформе.

Основные квалификации

• Минимум 4 года профессионального опыта работы в качестве инженера по обработке данных, с глубоким пониманием отраслевых стандартов и лучших практик.
• Знание Python для построения конвейеров данных.
• Практический опыт работы с:< ul>
• Инструменты оркестрации данных и ETL.
• Системы управления реляционными базами данных.
• Облачные или столбцовые хранилища данных, такие как Clickhouse, Redshift, Snowflake или Hive/Presto.
• >Базы данных NoSQL, такие как OpenSearch и Cassandra.
• Инструменты потоковой обработки, включая Kafka, Kafka Streams и Apache Flink.

Предпочтительная квалификация

• Знакомство с OpenTelemetry и трассировкой
• Заядлый читатель и поклонник «Проектирования приложений с интенсивным использованием данных»
• Навыки DevOps с возможностью самостоятельно управлять базовой инфраструктурой данных
• li>
• Опыт работы в сфере кибербезопасности.
• Активный участник проектов с открытым исходным кодом или личных программных инициатив.

Преимущества

• Станьте ключевым сотрудником специализированной консалтинговой компании по программному обеспечению, решая сложные технические задачи для известных международных клиентов.
• Конкурентное вознаграждение.
• Оплачиваемый отпуск и больничный.
>
• Поддержка культуры удаленной работы.
• Возможности внутреннего наставничества и развития навыков.
• Годовой бюджет на обучение и развитие в размере 400 долларов США.

• Административная поддержка частные предприниматели