Web Scraping Engineer (Python)

O stanowisku

Do zespołu pracującego nad systemem pozyskiwania danych zewnętrznych poszukujemy Mid Web Scraping Engineer'a (Python), który będzie odpowiedzialny za rozwój oraz utrzymanie parserów web scrapingowych.

Rola koncentruje się na ekstrakcji danych z serwisów internetowych, analizie struktury stron oraz bieżącym utrzymaniu działających rozwiązań, które często wymagają aktualizacji ze względu na zmiany po stronie źródeł danych.

Zakres obowiązków

• Tworzenie i rozwój parserów danych w Pythonie (Scrapy)
• Analiza stron internetowych pod kątem możliwości ekstrakcji danych (HTML, DOM, dynamiczne elementy JS)
• Projektowanie i implementacja rozwiązań do web scrapingu od etapu analizy po wdrożenie
• Utrzymanie oraz refaktoryzacja istniejących parserów (częste dostosowania do zmian na stronach źródłowych)
• Debugowanie i naprawa parserów produkcyjnych
• Monitorowanie działania systemów i reagowanie na anomalie (support / incident handling)
• Współpraca przy analizie danych oraz ich weryfikacji (Excel / Google Sheets)
• Praca z metrykami i podstawowymi dashboardami (monitoring działania procesów)

Must-have

• Bardzo dobra znajomość Pythona (praca z danymi / automatyzacja / scraping)
• Doświadczenie lub bardzo dobre zrozumienie web scrapingu
• Bardzo dobra znajomość HTML i DOM oraz umiejętność analizy struktury stron
• Zrozumienie działania dynamicznych stron WWW (JavaScript w kontekście renderowania danych)
• Praktyczna znajomość narzędzi deweloperskich (Chrome DevTools)
• Umiejętność pracy z powtarzalnymi i utrzymaniowymi zadaniami
• Gotowość do pracy w środowisku, gdzie duża część czasu to maintenance i debugging
• Język polski - native; Język angielski - B2 (głównie do czytania i pisania dokumentacji technicznej)

Nice to have

• Doświadczenie z Scrapy
• Znajomość Kafka (komunikacja między systemami)
• Znajomość Grafana (monitoring, metryki, alerty)