Senior Data Engineer for Seeking Alpha в Ciklum

От имени Seeking Alpha Ciklum ищет старшего инженера по обработке данных, который присоединится к киевской команде на постоянной основе. Seeking Alpha - лидер рынка краудсорсинговых исследований капитала в США. У нас работает более 150 человек на предприятиях в Нью-Йорке, Израиле и Индии. Компания является ведущим веб-сайтом, на котором можно найти действенные мнения и анализ фондового рынка, а также живые и интеллектуальные финансовые обсуждения. Каждый месяц наш краудсорсинговый инвестиционный анализ привлекает аудиторию более 5,2 миллиона посетителей в месяц к нашим продуктам оповещений в реальном времени по электронной почте и мобильным устройствам. Мы вручную отбираем статьи из ведущих мировых рыночных блогов, финансовых менеджеров, финансовых экспертов и инвестиционных бюллетеней, ежедневно публикуя 500 уникальных статей и обновлений новостей. Компания предоставляет право голоса более 5,5 миллионам зарегистрированных пользователей, в том числе более 12 000 участников и отдельных лиц, которые в среднем оставляют более 130 000 комментариев в месяц, обеспечивая доступ к наиболее сообразительным и любознательным инвесторам страны. Наш сайт является единственным бесплатным онлайн-источником отчетов о ежеквартальных отчетах о доходах более 5000 публичных компаний, включая S&P 500. Компания была названа самым информативным веб-сайтом журналом Kiplinger's Magazine и получила награду Forbes «Лучшее в Интернете». Обязанности: \ - Решать сложные проблемы в быстро меняющейся среде, сохраняя при этом бескомпромиссное качество. \ - Участвовать в разработке основной архитектуры данных, моделей и схем данных, а также плана реализации. \ - Разработка, создание и поддержка оптимальной архитектуры конвейера данных для извлечения, преобразования и загрузки данных из самых разных источников данных, включая внешние API, потоки данных и хранилища данных. \ - Разработка, создание и обслуживание инфраструктуры для приема данных в наше озеро данных и хранилище данных, а также предоставление платформ и услуг для работы с этими данными. \ - Проектируйте, создавайте и поддерживайте инфраструктуру для потоковой аналитики в реальном времени, аналитики больших данных и аналитики машинного обучения. Реализуйте требования к конфиденциальности и безопасности данных, чтобы решения оставались совместимыми со стандартами и структурами безопасности. \ - Расширьте возможности команды разработчиков. Требования: \ - Бакалавр в области CS / математики / статистики / физики / EE или эквивалентный опыт. \ - Более 5 лет проверенного опыта разработки крупномасштабного программного обеспечения с использованием объектно-ориентированного или функционального языка. \ - Выдающиеся навыки разработки программного обеспечения. \ - Подтвержденный опыт работы с облачными конвейерными / серверными службами данных с использованием AWS. \ - Владеет реляционным и нереляционным моделированием данных. \ - Владеет потоковой обработкой с использованием текущих отраслевых стандартов (например, Akka, AWS Kinesis, Kafka, Spark, Flink и т. Д.). \ - Знакомство с различными фреймворками и инструментами для работы с большими данными, включая EMR, - Athena, Glue, Airflow и т. Д. \ - Английский язык высокого уровня - обязательно. \ - Командный игрок с отличными навыками совместной работы. Желательно: \ - Опыт работы с контейнерным (Docker, ECS, Kubernetes) или бессерверным (Lambda) развертыванием. \ - Опыт построения моделей машинного обучения \ - Опыт работы с Data Lineage \ - Глубокие знания внутреннего устройства Spark (настройка, оптимизация запросов). Что вам нужно: \ - Очень тесное сотрудничество с клиентом \ - Возможность предлагать решения по проекту \ - Динамичные и сложные задания. \ - Возможность влиять на технологии проекта. \ - Команда профессионалов: учитесь у коллег и добивайтесь признания своих навыков. \ - Низкая бюрократия, европейский стиль управления. #### Про компанию Ciklum International Ciklum входит в пятерку крупнейших мировых компаний по разработке цифровых решений для Fortune 500 и быстрорастущих организаций по всему миру. Более 3000 наших разработчиков, расположенных в центрах доставки по всему миру, предоставляют нашим клиентам ряд услуг, включая аутсорсинг разработки программного обеспечения, разработку корпоративных приложений, обеспечение качества, безопасность, исследования и разработки, большие данные и аналитику. ** Сайт компанії: ** https://www.ciklum.com/