Senior Data Engineer for Seeking Alpha в Ciklum

Від імені Seeking Alpha, Ciklum шукає старшого інженера з даних, щоб приєднатися до київської команди на повний робочий день. Seeking Alpha - лідер на ринку краудсорсингових досліджень капіталу в США. У нашій компанії в Нью -Йорку, Ізраїлі та Індії працює 150+ людей. Компанія є провідним веб -сайтом для дійової думки та аналізу фондового ринку та активного, розумного обговорення фінансів. Щомісяця наш аналіз краудсорсингових інвестицій залучає аудиторію у 5,2 млн+ відвідувачів щомісяця до наших сповіщень у режимі реального часу на електронну пошту та мобільний. Ми збираємо статті з провідних світових блогів ринку, менеджерів з грошей, фінансових експертів та інвестиційних бюлетенів, публікуючи щоденно 500 унікальних статей та новин. Компанія надає голос понад 5,5 мільйонам зареєстрованих користувачів, включаючи 12 000+ авторів та приватних осіб, що в середньому складає 130 000+ коментарів на місяць, забезпечуючи доступ до найрозумніших та допитливих інвесторів країни. Наш сайт - єдине безкоштовне джерело в Інтернеті для стенограми дзвінків понад 5000 публічних компаній, включаючи S&P 500. Компанія була названа журналом Kiplinger's за найбільш інформативний веб -сайт і отримала премію Forbes 'Best of the Web'. Обов’язки: \- Вирішуйте складні проблеми в швидкоплинному та мінливому середовищі, зберігаючи безкомпромісну якість. \- Внесіть вклад у основний дизайн архітектури даних, моделей даних та схем та плану впровадження. \- Розробка, побудова та підтримка оптимальної архітектури конвеєрів даних для вилучення, перетворення та завантаження даних із самих різних джерел даних, включаючи зовнішні API, потоки даних та сховища даних. \- Спроектуйте, побудуйте та підтримуйте інфраструктуру для передавання даних у наше озеро даних та сховище даних та надання фреймворків та послуг для роботи з цими даними. \- Проектуйте, створюйте та підтримуйте інфраструктуру для потокової аналітики в реальному часі, аналізу великих даних та можливостей аналізу машинного навчання. Реалізуйте вимоги щодо конфіденційності та безпеки даних, щоб рішення залишалися сумісними зі стандартами безпеки та рамками. \- Розширення можливостей команди для розробки. Вимоги: \- бакалавр CS/математики/статистики/фізики/EE або аналогічний досвід. \-5+ років перевіреного досвіду розробки масштабного програмного забезпечення з використанням об'єктно-орієнтованої або функціональної мови. \- Видатні навички інженерії програмного забезпечення. \- Перевірений досвід роботи з хмарними службами конвеєрів даних/бекендом за допомогою AWS. \- володіє реляційним та нереляційним моделюванням даних. \- володіє поточною обробкою з використанням чинних галузевих стандартів (наприклад, Akka, AWS Kinesis, Kafka, Spark, Flink тощо). \- Знайомство з різними рамками та інструментами великих даних, включаючи EMR,- Athena, Glue, Airflow тощо.- Англійська на високому рівні- обов’язкова умова. \- Командний гравець з відмінними навичками співпраці. Бажано: \- досвід роботи з контейнерним (Docker, ECS, Kubernetes) або безсерверним (лямбда) розгортанням. \- Досвід у створенні моделей машинного навчання \- Досвід роботи з Data Lineage \- Глибоке знання внутрішніх елементів Spark (налаштування, оптимізація запитів) Що вам це сподобається: \- Дуже тісна співпраця з клієнтом \- Можливість пропонувати рішення щодо проекту \- Динамічні та складні завдання. \- Здатність впливати на проектні технології. \- Команда професіоналів: навчайтеся у колег і отримуйте визнання своєї майстерності. \- Низька бюрократія, європейський стиль управління. #### Про компанію Ciklum International Ciklum входить у п’ятірку світових компаній із цифрових рішень, що належать до списку Fortune 500 та швидко зростаючих організацій у всьому світі. Наші понад 3000 розробників, розташованих у центрах доставки по всьому світу, надають нашим клієнтам ряд послуг, включаючи розробку програмного забезпечення для аутсорсингу, розробку корпоративних програм, забезпечення якості, безпеку, науково -дослідницьку роботу, великі дані та аналітику. ** Сайт компанії: ** https://www.ciklum.com/