Starszy inżynier oprogramowania (scraping) w Competera

InCompetera, buduj miejsce, w którym można łatwo podejmować optymalne decyzje cenowe. Wierzymy, że technologie AI wkrótce będą podstawą wszystkich trudnych decyzji i będą w stanie lepiej pomagać ludziom. Obecnie poszukujemy starszego inżyniera oprogramowania, który pomoże nam przekształcić pomysły biznesowe w najnowocześniejsze rozwiązania technologiczne, które wyraźnie poprowadzą produkt i firmę w kierunku strategicznym. Nasz stos: Języki programowania: Python. Stos technologiczny: PostgreSQL, asyncio, FastAPI, Apache Kafka, ClickHouse, BigQuery, GCS, Scrapy, Selenium, Pyppeteer Infrastruktura: Kubernetes, Helm, ArgoCD, Grafana, Prometheus, Sentry, OpsGenie. Możesz być idealnie dopasowany do stanowiska, jeśli chcesz: Projektować i wdrażać skalowalne i wydajne usługi dla systemu scrapingu aweb przy użyciu języka Python i odpowiednie biblioteki. Kieruj zespołem programistów w przezwyciężaniu środków zapobiegających skrobaniu, takich jak CAPTCHA, ograniczanie prędkości i dynamiczne ładowanie treści. Mentoruj i kieruj młodszymi inżynierami w zespole, wspierając ich wzrost i rozwój. Automatyzuj istniejące procesy rozwoju skrobaków za pomocą narzędzi i frameworków, aby poprawić wydajność i łatwość konserwacji .Monitoruj wydajność systemu oraz proaktywnie identyfikuj i rozwiązuj wszelkie problemy. Projektuj i wdrażaj architekturę mikrousług pod kątem modułowości i skalowalności. Stosuj zasady projektowania opartego na domenie (DDD), aby zapewnić czysty i łatwy w utrzymaniu kod. Bądź na bieżąco z najnowszymi osiągnięciami i najlepszymi praktykami inweb scraping. Masz: ponad 5 lat doświadczenia jako inżynier oprogramowania z dużym doświadczeniem w inweb scrapingu. Udokumentowaną wiedzę w języku Python i odpowiednich bibliotekach, takich jak Scrapy, Selenium, Pyppeteer, Playwright. Dogłębne zrozumienie protokołów sieciowych i działania współczesnej sieci (SSL, proxy, cookies, nagłówki, przeglądarki).Doświadczenie w wykrywaniu anti-scrapingu i technikach omijania.Doświadczenie z Kafką, Redis i architekturą mikroserwisów.Znajomość zasad Domain-Driven Design (DDD).Eng — średnioterminowo +Przyjemne dodatki:Doświadczenie z platformami chmurowymi takimi jak AWS lub GCP.Doświadczenie w zakresie jakości danych i technik czyszczenia.Znajomość uczenia maszynowego i technik analizy danych.Kompetencje miękkie:Umiejętność przewodzenia i mentorowania młodszych inżynierów w pokonywaniu wyzwań technicznych.Proaktywne podejście do identyfikowania i rozwiązywania problemów, poszukiwanie nowych możliwości.Umiejętność pracy samodzielnej i w ramach zespołu w szybko zmieniającym się środowisku. Możliwość uczenia się nowych technologii i dostosowywania się do zmieniającego się środowiska web scrapingu. Spodoba Ci się to, a oto dlaczego: Bogaty, innowacyjny stos oprogramowania, swoboda wyboru najlepszych, odpowiednich technologii. Ideologia „najpierw zdalna”: swoboda pracy z domowego biura lub z dowolnego miejsca odpowiedni coworking.Elastyczne godziny pracy (zaczynamy od 8 do 11 rano) i systemy śledzenia notime.Regularne przeglądy wyników i wynagrodzeń.Powtarzające się 1-1 i mierzalne OKR.Dogłębne wdrożenie z jasną ścieżką sukcesu.Competera pokrywa 70% opłaty za szkolenie/kurs.20 dni urlopu , 15 dni wolnych i do jednego tygodnia płatnych świąt Bożego Narodzenia. 20 dni roboczych zwolnienia lekarskiego. Częściowe ubezpieczenie medyczne. Pokrywamy koszty coworkingu. Razem z nami wprowadzamy innowacje. BeaCompeterian.