Старший програміст (скрейпінг) в Competera

InCompetera ми створюємо місце, де можна легко приймати оптимальні цінові рішення. Ми віримо, що технології штучного інтелекту незабаром керуватимуть усіма складними рішеннями та зможуть допомогти людям стати кращими. Зараз ми шукаємо старшого інженера-програміста, який допоможе перетворити бізнес-ідеї на передові технологічні рішення, які чітко спрямовують продукт і компанію до стратегічного напрямку. Наш стек: мови програмування: Python. Технічний стек: PostgreSQL, asyncio, FastAPI, Apache Kafka, ClickHouse, BigQuery, GCS, Scrapy, Selenium, PyppeteerІнфраструктура: Kubernetes, Helm, ArgoCD, Grafana, Prometheus, Sentry, OpsGenie. Ви можете бути ідеальним підходом для цієї посади, якщо хочете: Спроектувати та впровадити масштабовані й ефективні служби для системи веб-збирання за допомогою Python і відповідні бібліотеки. Очолюйте команду розробників у подоланні заходів захисту від сканування, таких як CAPTCHA, обмеження швидкості та динамічне завантаження вмісту. Наставляйте та направляйте молодших інженерів у команді, сприяючи їх зростанню та розвитку. Автоматизуйте існуючі процеси розробки скребків за допомогою інструментів і фреймворків для підвищення ефективності та зручності обслуговування .Відстежуйте продуктивність системи та завчасно виявляйте та вирішуйте будь-які проблеми. Розробляйте та впроваджуйте архітектуру мікросервісів для модульності та масштабованості. Застосовуйте принципи проектування, орієнтованого на домен (DDD), щоб забезпечити чистий і підтримуваний код. Будьте в курсі останніх досягнень і найкращих практик у веб-скрапінгу. У вас є: понад 5 років досвіду програмного інженера з великим досвідом у веб-скрапінгу. Перевірені знання Python і відповідних бібліотек, таких як Scrapy, Selenium, Pyppeteer, Playwright. Глибоке розуміння веб-протоколів і того, як працює сучасний Інтернет (SSL, проксі, файли cookie, заголовки, браузери). Досвід роботи з виявленням антискребків і техніками обходу. Досвід роботи з Kafka, Redis і архітектурою мікросервісів. Знайомство з принципами Domain-Driven Design (DDD). Eng— interm +Приємні додаткові переваги: ​​досвід роботи з хмарними платформами, такими як AWS або GCP. Досвід роботи з якістю даних і техніками очищення. Знання методів машинного навчання та аналізу даних. М’які навички: Здатність керувати та наставляти молодших інженерів у подоланні технічних проблем. Проактивний підхід до виявлення та вирішення проблем, пошук нових можливостей. Здатність працювати самостійно та в складі команди у швидкоплинному середовищі. Можливість вивчати нові технології та адаптуватися до мінливих ландшафтів веб-скрапінгу. Вам це сподобається, і ось чому: багатий інноваційний пакет програмного забезпечення, свобода вибору найкращих підходящих технологій. Ідеологія дистанційного керування: свобода працювати з домашнього офісу чи будь-коли відповідний коворкінг. Гнучкий робочий час (початок роботи з 8 до 11 ранку) і система відстеження неробочого часу. Регулярні перевірки продуктивності та винагороди. Періодичні оцінки 1-1 і вимірювані OKR. Поглиблене навчання з чітким відстеженням успіху. Competera покриває 70% плати за навчання/курс. 20 днів відпустки , 15 вихідних і до одного тижня оплачуваних різдвяних канікул. 20 робочих днів лікарняного. Часткове медичне страхування. Ми відшкодували витрати на коворкінг. Розвивайте інновації разом з нами. BeaCompeterian.