• Искать точки роста. Разбираться, где и почему сценарий работает недостаточно хорошо.
Задачи:
— Искать точки роста: разбираться, где и почему сценарий работает недостаточно хорошо, формулировать гипотезы, проводить эксперименты и доводить изменения до продакшена.
— Развивать систему оценки качества еком-агентов: проектировать автоматизированные eval-пайплайны для оценки качества работы агентов.
— Работать с данными и моделями: собирать датасеты, разбираться в логах, решать проблемы качества данных, использовать классические ML-модели, LLM, VLM и другие методы.
— Развивать аналитическую систему: поддерживать систему данных, на которой строится аналитика еком-агентов, включая витрины, метрики и документацию.
Требования:
— Уверенное владение Python и SQL.
— Опыт работы с большими объёмами событийных данных и логами.
— Опыт работы с пайплайнами обработки данных и инструментами оркестрации.
— Понимание принципов работы LLM-систем, AI-агентов и классического ML.
Условия:
— Гибридный формат работы (офис и удалёнка).
— Дополнительные бонусы и комьюнити внутри компании Яндекс.
Контакты работодателя доступны по кнопке «Откликнуться» после входа.
67/100
Средняя вакансия
Оценка от Job Hunters AI
Аналитик-разработчик в команду еком-агентов Алисы; зарплата не указана; понятные задачи; гибкий формат.
Из чего сложилась оценка. Нажмите, чтобы узнать подробнее
Зарплата не указана
В объявлении отсутствует информация о зарплате, нет ни минимальной, ни максимальной суммы.
Из объявления
Что мы предлагаем: … Это не все бонусы — полный список тут [контакт]