Leitender Softwareentwickler (Scraping) in Competera

Mit Competera bauen wir einen Ort auf, an dem optimale Preisentscheidungen einfach getroffen werden können. Wir glauben, dass KI-Technologien bald alle schwierigen Entscheidungen vorantreiben werden und den Menschen dabei helfen können, besser zu werden. Wir sind jetzt auf der Suche nach einem Senior Software Engineer, der uns dabei hilft, Geschäftsideen in hochmoderne Technologielösungen umzuwandeln, die das Produkt und das Unternehmen explizit in seine strategische Richtung lenken.Tech Stack: Python, PostgreSQL, asyncio, FastAPI, Apache Kafka, ClickHouse, BigQuery, GCS, Scrapy, Selenium, PyppeteerInfrastruktur: Kubernetes, Helm, ArgoCD, Grafana, Prometheus, Sentry, OpsGenie. Sie könnten die perfekte Besetzung für die Position sein, wenn Sie:Skalierbare und effiziente Dienste für ein Web-Scraping-System entwerfen und implementieren möchten Verwenden von Python und relevanten Bibliotheken. Führen Sie das Entwicklungsteam bei der Überwindung von Anti-Scraping-Maßnahmen wie CAPTCHAs, Ratenbegrenzung und dynamischem Laden von Inhalten. Mentor und Anleitung für Nachwuchsingenieure im Team und Förderung ihres Wachstums und ihrer Entwicklung. Automatisieren Sie bestehende Scraper-Entwicklungsprozesse mithilfe von Tools und Frameworks zur Verbesserung der Effizienz und Wartbarkeit. Überwachen Sie die Systemleistung und identifizieren und beheben Sie proaktiv alle Probleme. Entwerfen und implementieren Sie eine Microservices-Architektur für Modularität und Skalierbarkeit. Wenden Sie DDD-Prinzipien (Domain-Driven Design) an, um sauberen und wartbaren Code sicherzustellen. Bleiben Sie auf dem Laufenden. Informieren Sie sich über die neuesten Fortschritte und Best Practices im Web Scraping. Sie verfügen über: 5+ Jahre Erfahrung als Software-Ingenieur mit einer starken Erfolgsbilanz im Web Scraping. Nachgewiesene Fachkenntnisse in Python und relevanten Bibliotheken wie Scrapy, Selenium, Pyppeteer, Playwright.In -tiefes Verständnis von Webprotokollen und der Funktionsweise modernen Webs (SSL, Proxys, Cookies, Header, Browser). Erfahrung mit Anti-Scraping-Erkennungs- und Bypass-Techniken. Erfahrung mit Kafka, Redis und Microservices-Architektur. Vertrautheit mit Domain-Driven Design ( DDD) Prinzipien.Eng – interm +Angenehme Extras:Erfahrung mit Cloud-Plattformen wie AWS oder GCP.Erfahrung mit Datenqualitäts- und Bereinigungstechniken.Kenntnisse über maschinelles Lernen und Datenanalysetechniken.Soft Skills:Fähigkeit, Nachwuchsingenieure bei der Bewältigung technischer Herausforderungen zu führen und zu betreuen Herausforderungen. Proaktiver Ansatz zur Identifizierung und Lösung von Problemen, Suche nach neuen Möglichkeiten. Fähigkeit, unabhängig und als Teil eines Teams in einer schnelllebigen Umgebung zu arbeiten. Fähigkeit, neue Technologien zu erlernen und sich an sich ändernde Web-Scraping-Landschaften anzupassen. Sie werden es lieben Das ist es, und hier ist der Grund: Reichhaltiger innovativer Software-Stack, Freiheit bei der Auswahl der am besten geeigneten Technologien. Remote-First-Ideologie: Freiheit, vom Home-Office oder jedem geeigneten Coworking aus zu arbeiten. Flexible Arbeitszeiten (wir beginnen von 8 bis 11 Uhr) und nein Zeiterfassungssysteme aktiviert.Regelmäßige Leistungs- und Vergütungsüberprüfungen.Wiederkehrende Einzelgespräche und messbare OKRs.Detailliertes Onboarding mit klarem Erfolgstrack.Competera übernimmt 70 % Ihrer Schulungs-/Kursgebühr.20 Urlaubstage, 15 freie Tage und mehr auf eine Woche bezahlten Weihnachtsurlaub.20 Arbeitstage Krankenurlaub.Teilweiser Krankenversicherungsschutz.Wir erstatten die Kosten für Coworking.Fahren Sie mit uns Innovationen voran. Seien Sie ein Wettkämpfer.