Szukamy wyjątkowego Web Scraping Experta, który będzie architektem i budowniczym zaawansowanego web scrapingu w naszym wielofunkcyjnym zespole źródeł danych, kluczowej funkcji w misji MP.
Jako Data Engineer Web Scraping będziesz odpowiedzialny za pozyskiwanie danych z serwisów internetowych przy użyciu narzędzi do crawlowania. W tej roli będziesz właścicielem procesu tworzenia tych narzędzi, usług i przepływów pracy w celu poprawy analizy, raportów i zarządzania danymi. Będziemy polegać na Tobie, aby przetestować dane i scrape, aby zapewnić poprawność i jakość. Będziesz właścicielem procesu identyfikacji i usuwania wszelkich problemów z przerwami, jak również skalowania scrapów w razie potrzeby.
Jesteśmy nowym startup’em w Polsce i budujemy strategiczną platformę nowej generacji, która będzie służyć jako podstawa wielu usług.
Wymagania:
- 2+ lat doświadczenia w web scrappingu
- Doświadczenie z jednym lub kilkoma z następujących frameworków i narzędzi web scrapingowych: Scrapy , Puppeteer, Selenium, Import.io, Webhose.io, ScrapingHub itp.
- Podstawowa wiedza z zakresu inżynierii danych (ingestion database, ETL, etc.)
- Zorientowanie na rozwiązania i nastawienie “can do” – z chęcią do rozwiązywania złożonych problemów.
Reviews
There are no reviews yet.