Задачи: — Управлять полным циклом извлечения данных с комплексных веб-сайтов, обеспечивая полное покрытие, точность и надежную доставку структурированных наборов данных. — Использовать внутренние инструменты (Apify, OpenRouter) и собственные методы для ускорения сбора данных, проверки и выполнения задач в соответствии с требованиями. — Обеспечивать надежное извлечение данных с динамических и интерактивных веб-источников, адаптируя подходы для работы с контентом, рендеренным JavaScript, и изменяющимся поведением сайтов. — Поддерживать стандарты качества данных через проверки валидации, контроль согласованности между источниками, соблюдение форматов и систематическую проверку перед доставкой. — Масштабировать операции по сбору данных для больших наборов, используя эффективное пакетирование или параллелизацию, мониторить сбои и поддерживать стабильность при незначительных изменениях структуры сайтов. Требования: — Минимум 3 года релевантного опыта в области инженерии данных, веб-скрапинга, автоматизации или разработки ПО. — Высшее образование (бакалавр или магистр) в инженерии, прикладной математике, компьютерных науках или смежных технических областях является плюсом. — Опыт веб-скрапинга на Python с использованием BeautifulSoup, Selenium или аналогичных инструментов, включая работу с динамическим контентом (JS, AJAX, бесконечная прокрутка) и API через прокси. — Умение извлекать данные из сложных структур (иерархии, архивные страницы, нестабильный HTML). — Опыт очистки, нормализации и валидации данных, предоставление структурированных наборов данных в форматах CSV, JSON, Google Sheets. — Практический опыт работы с большими языковыми моделями (LLM) и AI-фреймворками для улучшения автоматизации и решения задач. — Внимательность к деталям и ответственность за точность данных. — Самостоятельность в работе и умение решать проблемы без постоянного контроля. — Знание английского языка на уровне Upper-intermediate (B2) или выше. Условия: — Частичная занятость, удаленная работа с гибким графиком. — Работа в уникальной гибридной среде, где человеческий опыт и AI-агенты работают совместно. — Возможность участия в бонусных программах, основанных на производительности и качестве работы. Оплата: — До $30 в час в зависимости от уровня и темпа вклада. — Компенсация варьируется в зависимости от проекта, сложности и требуемой экспертизы.
5 200 – 5 200 $
