Старший інженер з даних (потокове передавання подій) в Intellias

Пряме повідомлення учасника, який розмістив вакансію, з Intellias Юлія Середня Юлія Середня Пишіть мені, якщо шукаєте нові проекти ;) Пориньте глибоко в Digital! Протягом 20 років Intellias розробляє першокласні цифрові рішення для провідних компаній світу, тримаючи їх у відповідності до останніх технологічних тенденцій. Приєднуйтеся та запропонуйте інновації для майбутнього! Який проект у нас для вас. Як інженер з обробки даних, ви відіграватимете вирішальну роль у створенні та оптимізації нашого каналу даних, який є ключовим для надійності та продуктивності нашої платформи. Ви відповідатимете за розробку та підтримку ефективних потоків даних та інтеграцію новітніх технологій, з особливим акцентом на обробці складних подій (CEP), для підтримки наших стратегічних цілей і побудови надійної екосистеми обробки даних. Що ви будете робитиОбов’язки: моніторинг, спостережливість & Оптимізація• Використовуйте Apache Flink для обробки потоків у реальному часі та моніторингу для ефективної обробки складних подій і перетворень даних.• Використовуйте такі інструменти, як Prometheus і Grafana, для спостереження, щоб забезпечити працездатність і ефективність конвеєра даних.• Постійний моніторинг, усунення несправностей, і оптимізуйте продуктивність конвеєра даних, щоб обробляти мільярди подій на місяць. Співпраця та інтеграція• Тісно співпрацюйте з міжфункціональними командами, включаючи розробників інтерфейсу та дослідників даних, щоб створити надійну платформу даних, яка відповідає поточним і майбутнім потребам бізнесу.• Беріть участь. у проектуванні та архітектурі масштабованих систем даних, інтеграції нових джерел даних та оптимізації існуючих процесів обробки даних.• Написання коду виробничого рівня в Kotlin і Python для створення програм обробки даних, сценаріїв автоматизації та логіки CEP. Що вам потрібно для цієї кваліфікації: • Ступінь бакалавра в галузі комп’ютерних наук або суміжної галузі або еквівалентний досвід.• 3+ роки досвіду в інженерії даних або на подібній посаді.• Значне володіння такими службами AWS, як Kinesis, Glue, Firehose, Lambda та Redshift.• Експертиза у структурах обробки потоків, таких як Apache Flink і Kafka.• Досвід у розробці та впровадженні рішень Complex Event Processing (CEP) для потоків даних у реальному часі.• Солідний досвід програмування з Kotlin; знання Python або інших мов програмування є плюсом.• Продемонстрований досвід у розробці, оптимізації та підтримці конвеєрів потокових даних у великомасштабних середовищах.• Доведена здатність створювати, оптимізувати та підтримувати складні конвеєри даних, які обробляють мільярди подій на місяць .• Сильні аналітичні навички та навички вирішення проблем із здатністю керувати кількома складними проектами та дедлайнами.• Хороша комунікабельністьуміння працювати в багатофункціональних командах, а також досвід роботи з методологіями гнучкого управління проектами. Бажані навички• Досвід роботи з рішеннями хмарної інфраструктури даних в AWS.• Досвід роботи з розподіленими фреймворками обробки даних, такими як Apache Spark або подібні.• Знайомство з базами даних OLAP, такими як Snowflake або Redshift.• Знання ядра C#/.NET або розробка та підтримка спеціальних програм обробки даних.• Знайомство з інструментами інтеграції даних, такими як Metillion, і досвід роботи з великомасштабними середовищами даних.• Здатність працювати спільно і адаптуватися до динамічних потреб проекту. Як це – працювати в Intellias? У Intellias ми прагнемо бути роботодавцем із рівними можливостями, заохочуючи справедливість, різноманітність та залучення. Ми вітаємо та відзначаємо відмінності всіх кваліфікованих заявників. Приєднуйтеся до Intellias для кар’єри, де ваші унікальні перспективи не тільки цінуються, але й мають вирішальне значення для нашого успіху. Показати більше Показувати менше Посадовий рівень Старший середній рівень Тип зайнятості Повний робочий день Посадові обов’язки Інженерія Галузі ІТ-послуги та ІТ Консалтинг