Senior Software Engineer (Scraping) in Competera

Mit Competera bauen wir einen Ort auf, an dem optimale Preisentscheidungen einfach getroffen werden können. Wir glauben, dass KI-Technologien bald alle schwierigen Entscheidungen vorantreiben werden und in der Lage sind, Menschen dabei zu helfen, besser zu werden. Wir sind jetzt auf der Suche nach einem Senior Software Engineer, der uns dabei hilft, Geschäftsideen in hochmoderne Technologielösungen umzuwandeln, die das Produkt und das Unternehmen explizit in seine strategische Richtung lenken.

< strong>Unser Stack:
Programmiersprachen: Python.

Tech Stack: PostgreSQL, asyncio, FastAPI, Apache Kafka, ClickHouse, BigQuery, GCS, Scrapy, Selenium, Pyppeteer

Infrastruktur: Kubernetes, Helm, ArgoCD, Grafana, Prometheus, Sentry, OpsGenie.

Sie könnten perfekt für die Position passen, wenn

Sie möchten:

• Skalierbare und effiziente Dienste für ein Web-Scraping-System mit Python und relevanten Bibliotheken entwerfen und implementieren.
• Leitung das Entwicklungsteam bei der Überwindung von Anti-Scraping-Maßnahmen wie CAPTCHAs, Ratenbegrenzung und dynamischem Laden von Inhalten.
• Mentor und Anleitung für junge Ingenieure im Team, um ihr Wachstum und ihre Entwicklung zu fördern.
• Automatisieren Sie bestehende Scraper-Entwicklungsprozesse mithilfe von Tools und Frameworks, um die Effizienz und Wartbarkeit zu verbessern.
• Überwachen Sie die Systemleistung und identifizieren und beheben Sie proaktiv alle Probleme.
• Entwerfen und implementieren Sie eine Microservices-Architektur für Modularität und Skalierbarkeit.
• Wenden Sie die Prinzipien des Domain-Driven Design (DDD) an, um einen sauberen und wartbaren Code zu gewährleisten.
• Bleiben Sie über die neuesten Fortschritte und Best Practices beim Web Scraping auf dem Laufenden.

Sie verfügen über:

• Mehr als 5 Jahre Erfahrung als Softwareentwickler mit einer starken Erfolgsbilanz im Web Scraping.
• Nachgewiesene Fachkenntnisse in Python und relevanten Bibliotheken wie Scrapy, Selenium, Pyppeteer, Playwright.
• Tiefgehendes Verständnis von Webprotokollen und der Funktionsweise moderner Webfunktionen (SSL, Proxys, Cookies, Header, Browser).
• Erfahrung mit Anti-Scraping-Erkennungs- und Bypass-Techniken.
• Erfahrung mit Kafka, Redis und Microservices-Architektur.
• Vertrautheit mit Domain-Driven Design (DDD) Prinzipien.
• Eng — interm +

Angenehme Extras:

• Erfahrung mit Cloud-Plattformen wie AWS oder GCP.
• Erfahrung mit Datenqualität und Bereinigungstechniken.
• Kenntnisse über Techniken des maschinellen Lernens und der Datenanalyse.

Soft Skills :

• Fähigkeit, Nachwuchsingenieure bei der Bewältigung technischer Herausforderungen anzuleiten und zu betreuen.
• Proaktiver Ansatz zur Identifizierung und Lösung von Problemen und Suche nach neuen Möglichkeiten.
• Fähigkeit, unabhängig und als Teil eines Teams in einer schnelllebigen Umgebung zu arbeiten.
• Fähigkeit, neue Technologien zu erlernen und sich an sich ändernde Web-Scraping-Landschaften anzupassen.

• Umfassender innovativer Software-Stack, Freiheit bei der Auswahl der am besten geeigneten Technologien.
• Remote-First-Ideologie: Freiheit zu Arbeiten Sie im Homeoffice oder einem geeigneten Coworking-Bereich.
• Flexible Arbeitszeiten (wir beginnen von 8 bis 11 Uhr) und keine Zeiterfassungssysteme.
• Regelmäßige Leistungs- und Vergütungsüberprüfungen.< /li>
• Wiederkehrende Einzelgespräche und messbare OKRs.
• Umfassendes Onboarding mit einer klaren Erfolgsspur.
• Competera übernimmt 70 % Ihrer Schulungs-/Kursgebühr.< /li>
• 20 Urlaubstage, 15 freie Tage und bis zu eine Woche bezahlter Weihnachtsurlaub.
• 20 Geschäftstage Krankheitsurlaub.
• Teilweiser Krankenversicherungsschutz.
• Wir erstatten die Kosten für Coworking.

Fördern Sie mit uns Innovationen. Seien Sie ein Wettbewerber.