Leitender Softwareentwickler (Scraping) in Competera

InCompetera bauen wir einen Ort auf, an dem optimale Preisentscheidungen einfach getroffen werden können. Wir glauben, dass KI-Technologien bald alle schwierigen Entscheidungen vorantreiben werden und in der Lage sind, Menschen zu einem besseren Leben zu verhelfen. Wir sind jetzt auf der Suche nach einem leitenden Software-Ingenieur, der uns dabei hilft, Geschäftsideen in hochmoderne technische Lösungen umzuwandeln, die das Produkt und das Unternehmen explizit in seine strategische Richtung lenken. Unser Stack: Programmiersprachen: Python. Tech-Stack: PostgreSQL, Asyncio, FastAPI, Apache Kafka, ClickHouse, BigQuery, GCS, Scrapy, Selenium, Pyppeteer Infrastruktur: Kubernetes, Helm, ArgoCD, Grafana, Prometheus, Sentry, OpsGenie. Sie könnten perfekt für die Position geeignet sein, wenn Sie: Skalierbare und effiziente Dienste für ein Web-Scraping-System mit Python entwerfen und implementieren möchten Relevante Bibliotheken. Leiten Sie das Entwicklungsteam bei der Bewältigung von Anti-Scraping-Maßnahmen wie CAPTCHAs, Ratenbegrenzung und dynamischem Laden von Inhalten. Mentor und Anleitung für Nachwuchsingenieure im Team, Förderung ihres Wachstums und ihrer Entwicklung. Automatisieren Sie bestehende Scraper-Entwicklungsprozesse mithilfe von Tools und Frameworks, um die Effizienz und Wartbarkeit zu verbessern Überwachen Sie die Systemleistung und identifizieren und beheben Sie proaktiv alle Probleme. Entwerfen und implementieren Sie eine Microservices-Architektur für Modularität und Skalierbarkeit. Wenden Sie DDD-Prinzipien (Domain-Driven Design) an, um sauberen und wartbaren Code sicherzustellen. Bleiben Sie über die neuesten Fortschritte und Best Practices auf dem Laufenden im Web-Scraping. Sie verfügen über: 5+ Jahre Erfahrung als Software-Ingenieur mit einer starken Erfolgsbilanz im Web-Scraping. Nachgewiesene Fachkenntnisse in Python und relevanten Bibliotheken wie Scrapy, Selenium, Pyppeteer, Playwright. Tiefgehendes Verständnis von Web-Protokollen und der Funktionsweise von modernem Web (SSL, Proxys, Cookies, Header, Browser).Erfahrung mit Anti-Scraping-Erkennung und Bypass-Techniken.Erfahrung mit Kafka, Redis und Microservices-Architektur.Vertrautheit mit Domain-Driven Design (DDD)-Prinzipien.Eng – Zwischensemester +Angenehme Extras:Erfahrung mit Cloud-Plattformen wie AWS oder GCP.Erfahrung mit Datenqualitäts- und Bereinigungstechniken.Kenntnisse über Techniken des maschinellen Lernens und der Datenanalyse.Soft Skills:Fähigkeit, Nachwuchsingenieure bei der Bewältigung technischer Herausforderungen zu führen und zu betreuen.Proaktiver Ansatz zur Identifizierung und Lösung von Problemen, Suche nach neuen Möglichkeiten.Fähigkeit, unabhängig und als Teil eines Teams zu arbeiten in einer schnelllebigen Umgebung. Fähigkeit, neue Technologien zu erlernen und sich an sich ändernde Web-Scraping-Landschaften anzupassen. Sie werden es lieben, und hier ist der Grund: Umfangreicher innovativer Software-Stack, Freiheit bei der Auswahl der am besten geeigneten Technologien. Remote-First-Ideologie: Freiheit, vom Home-Office oder von jedem beliebigen Ort aus zu arbeiten Passendes Coworking.Flexible Arbeitszeiten (von 8 bis 11 Uhr) und keine Zeiterfassungssysteme.Regelmäßige Leistungs- und Vergütungsüberprüfungen.Wiederkehrende Einzelgespräche und messbare OKRs.Detailliertes Onboarding mit klarem Erfolgstrack.Competera übernimmt 70 % Ihrer Schulungs-/Kursgebühr.20 Urlaubstage , 15 freie Tage und bis zu einer Woche bezahlter Weihnachtsurlaub. 20 Werktage Krankheitsurlaub. Teilweiser Krankenversicherungsschutz. Wir übernehmen die Kosten für Coworking. Treiben Sie Innovationen mit uns voran. BeaCompeterian.