Старший инженер-программист (парсинг) в Competera

В Competera мы создаем место, где можно легко принимать оптимальные ценовые решения. Мы верим, что технологии искусственного интеллекта вскоре будут определять все сложные решения и способны помочь людям стать лучше. Сейчас мы ищем старшего инженера-программиста, который поможет нам превратить бизнес-идеи в передовые технологические решения, которые будут явно продвигать продукт и компанию в стратегическом направлении. Технический стек: Python, PostgreSQL, asyncio, FastAPI, Apache Kafka, ClickHouse, BigQuery, GCS, Scrapy, Selenium, PyppeteerИнфраструктура: Kubernetes, Helm, ArgoCD, Grafana, Prometheus, Sentry, OpsGenie. Вы идеально подойдете на эту должность, если хотите: Разрабатывать и внедрять масштабируемые и эффективные сервисы для системы парсинга веб-страниц. используя Python и соответствующие библиотеки. Возглавьте команду разработчиков в преодолении мер защиты от парсинга, таких как CAPTCHA, ограничение скорости и динамическая загрузка контента. Наставляйте и направляйте младших инженеров в команде, способствуя их росту и развитию. Автоматизируйте существующие процессы разработки парсеров с помощью инструментов. и платформы для повышения эффективности и удобства обслуживания. Отслеживайте производительность системы, заранее выявляйте и устраняйте любые проблемы. Проектируйте и внедряйте архитектуру микросервисов для обеспечения модульности и масштабируемости. Применяйте принципы доменно-ориентированного проектирования (DDD) для обеспечения чистоты и удобства обслуживания кода. Будьте в курсе последних событий. познакомьтесь с последними достижениями и лучшими практиками в области веб-скрапинга. У вас есть: 5+ лет опыта работы в качестве инженера-программиста с большим послужным списком в веб-скрапинге. Подтвержденный опыт работы с Python и соответствующими библиотеками, такими как Scrapy, Selenium, Pyppeteer, Playwright. -глубокое понимание веб-протоколов и принципов работы современной сети (SSL, прокси, файлы cookie, заголовки, браузеры). Опыт работы с методами обнаружения и обхода анти-скрейпинга. Опыт работы с Kafka, Redis и архитектурой микросервисов. Знакомство с доменно-ориентированным дизайном ( DDD) принципы.Английский — временный +Приятные дополнения:Опыт работы с облачными платформами, такими как AWS или GCP.Опыт работы с качеством данных и методами очистки.Знание методов машинного обучения и анализа данных.Мягкие навыки:Способность руководить и наставлять младших инженеров в решении технических проблем. задачи. Проактивный подход к выявлению и решению проблем, поиску новых возможностей. Способность работать независимо и в составе команды в быстро меняющейся среде. Способность изучать новые технологии и адаптироваться к меняющимся условиям веб-скрапинга. Вам понравится. это, и вот почему: Богатый инновационный стек программного обеспечения, свобода выбора наиболее подходящих технологий. Идеология удаленной работы: свобода работать из домашнего офиса или любого подходящего коворкинга. Гибкий график работы (мы начинаем с 8 до 11 утра) и никаких Включены системы учета рабочего времени. Регулярные обзоры производительности и вознаграждений. Регулярные встречи и измеримые OKR. Углубленная адаптация с четким треком успеха. Competera покрывает 70 % стоимости вашего обучения/курса. 20 дней отпуска, 15 выходных и более. до одной недели оплачиваемых рождественских каникул. 20 рабочих дней отпуска по болезни. Частичное медицинское страхование. Мы возмещаем расходы на коворкинг. Внедряйте инновации вместе с нами. Будьте конкурентом.