Старший инженер-программист (парсинг) в Competera

InCompetera мы создаем место, где можно легко принимать оптимальные ценовые решения. Мы верим, что технологии искусственного интеллекта вскоре будут определять все сложные решения и способны помочь людям стать лучше. Сейчас мы ищем старшего инженера-программиста, который поможет нам превратить бизнес-идеи в передовые технологические решения, которые явно направляют продукт и компанию в стратегическом направлении. Наш стек: Языки программирования: Python. Технический стек: PostgreSQL, asyncio, FastAPI, Apache Kafka, ClickHouse, BigQuery, GCS, Scrapy, Selenium, Pyppeteer. Инфраструктура: Kubernetes, Helm, ArgoCD, Grafana, Prometheus, Sentry, OpsGenie. Вы можете идеально подойти на эту должность, если хотите: Разрабатывать и внедрять масштабируемые и эффективные сервисы для системы парсинга веб-страниц с использованием Python и соответствующие библиотеки. Возглавьте команду разработчиков в преодолении мер по борьбе с парсингом, таких как CAPTCHA, ограничение скорости и динамическая загрузка контента. Наставляйте и направляйте младших инженеров в команде, способствуя их росту и развитию. Автоматизируйте существующие процессы разработки парсеров, используя инструменты и структуры для повышения эффективности и удобства обслуживания. Мониторьте производительность системы, заранее выявляйте и устраняйте любые проблемы. Проектируйте и внедряйте архитектуру микросервисов для обеспечения модульности и масштабируемости. Применяйте принципы доменно-ориентированного проектирования (DDD) для обеспечения чистого и удобного в обслуживании кода. Будьте в курсе последних достижений и лучших практик. У вас есть: 5+ лет опыта работы в качестве инженера-программиста с большим опытом работы в веб-скрапинге. Подтвержденный опыт работы с Python и соответствующими библиотеками, такими как Scrapy, Selenium, Pyppeteer, Playwright. Глубокое понимание веб-протоколов и того, как работает современный Интернет (SSL, прокси, куки, заголовки, браузеры).Опыт работы с методами обнаружения и обхода анти-скрейпинга.Опыт работы с архитектурой Kafka, Redis и микросервисов.Знакомство с принципами доменно-ориентированного проектирования (DDD).Английский язык — временный +Приятные дополнительные услуги:Опыт работы с облачными платформами, такими как AWS или GCP.Опыт работы с качеством данных и методами очистки.Знание методов машинного обучения и анализа данных.Мягкие навыки: способность руководить и наставлять младших инженеров в решении технических проблем.Проактивный подход к выявлению и решению проблем, поиску новых возможностей.Умение работать независимо и в составе команды. в быстро меняющейся среде. Возможность изучать новые технологии и адаптироваться к меняющимся условиям веб-скрапинга. Вам это понравится, и вот почему: Богатый инновационный стек программного обеспечения, свобода выбора наиболее подходящих технологий. Идеология удаленного подхода: свобода работать из домашнего офиса или из любого другого места. подходящий коворкинг. Гибкий график работы (мы начинаем с 8 до 11 утра) и отсутствие систем отслеживания времени. Регулярные обзоры производительности и вознаграждений. Регулярные встречи 1-1 и измеримые OKR. Углубленная адаптация с четким треком успеха. Competera покрывает 70% стоимости вашего обучения/курсов. 20 дней отпуска , 15 выходных и до одной недели оплачиваемых рождественских каникул. 20 рабочих дней отпуска по болезни. Частичное медицинское страхование. Мы компенсируем расходы на коворкинг. Внедряйте инновации вместе с нами. BeaCompeterian.