- 3+ years of building distributed crawlers in production. - Experience with proxy infrastructure: residential, mobile, ISP.
Responsibilities:
— Develop scraping solutions for marketplaces, overcoming complex anti-bot protections.
Requirements:
— At least 3 years of experience building distributed crawlers in production.
— Strong skills in Python (Scrapy/Playwright) or Node.js (Puppeteer/Crawlee).
— Experience working with proxy infrastructure including residential, mobile, and ISP proxies.
— Ability to reverse engineer private APIs using tools like mitmproxy or Burp.
— Active use of large language models (LLMs) and an experimental mindset.
Benefits:
— Assistance with relocation to Portugal.
Зарплаты и спрос: Дата-инженер
Сейчас в каталоге 531 вакансия по этому направлению, удалённо можно работать в 46%.
Зарплата здесь не указана. Медиана по направлению: 245 000 ₽ в месяц. У половины вакансий от 121 000 ₽ до 290 000 ₽ (вакансий с вилкой: 37).
Навыки этой вакансии, которые чаще всего просят по направлению: Python (41%). В скобках доля вакансий направления.
Автоотклики