Вакансии

Задачи: — разобраться в существующем коде и логике V3 — восстановить требования по уже реализованным функциям — превратить основные сценарии в test cases — писать Flutter-тесты — постепенно покрывать критические user flows golden и E2E тестами — подключать тесты и coverage к CI — ловить регрессии между версиями V3, V4, V5 — находить edge cases до того, как их находят beta users — тестирование AI-функций Holisto, развивать подход к автоматическому тестированию LLM Требования: — Dart / Flutter на уровне чтения чужого кода и самостоятельного написания тестов — базовое понимание unit, widget, integration, E2E testing — умение точно формулировать требования — внимательность к деталям — интерес к AI / LLM и современной разработке — желание разбираться в существующем продукте, а не только писать новые функции — коммерческий опыт не обязателен, важна хорошая база и способность быстро разбираться Условия: — удалённая работа, частичная занятость (part-time), можно совмещать с учебой или основной работой — формат и мотивация обсуждаются отдельно в зависимости от опыта и уровня вовлечённости — возможно получение доли в зарегистрированной Delaware-компании — возможен переход на оплачиваемый формат при хорошем результате — роль может вырасти вместе с engineering-командой Holisto Особенности: — значительная часть разработки автоматизируется через AI-агентов — тест-кейсы являются машинопроверяемыми контрактами — поддержка тимлида, помощь с погружением и review каждого PR Дополнительно: — приветствуются примеры кода, GitHub, pet-проекты — в отклике желательно указать опыт с Dart / Flutter, виды тестов, опыт с CI/CD, используемые AI-инструменты, время, готовое уделять проекту

Обязанности: — анализировать данные для проверки гипотез — разрабатывать методологию формирования драйверов, прототипировать логику расчетов, подготавливать данные для Data Science-команд, вести end-to-end процесс от идеи до реализации — проводить валидацию качества данных, согласованности метрик и результатов расчетов — выявлять пробелы в данных и нелогичности в выходных результатах и работе моделей — участвовать в процессах тестирования, проектировании витрин данных — подготавливать и анализировать данные для интерактивных отчетов (дашбордов) — участвовать в разработке автоматизированных отчетов для регулярного мониторинга — оказывать техническую поддержку и проводить оперативный анализ данных по запросам бизнес-пользователей — подготавливать документацию по данным и расчетам. Требования: — релевантный опыт от 2 лет в роли Data Analyst или BI-аналитика в финансовом секторе, финтехе или риск-менеджменте — опыт создания и разработки моделей (финансовых и продуктовых), проектирования расчетных систем, витрин данных или формализации бизнес-правил — высшее образование (математика, статистика, информатика, финансы) — владение SQL и Python, уверенный практический опыт работы с большими наборами данных — глубокое понимание экономики банковских продуктов, принципов управленческого учета и структуры P&L, способность оценивать влияние аналитических моделей на маржинальность бизнеса — понимание принципов работы ML-моделей, умение проверять A/B-тесты и сложные многомерные гипотезы — навыки создания работающих прототипов (MVP) для демонстрации бизнес-ценности идеи — инициативность, готовность к решению нестандартных задач и эффективной работе в команде — использование нейросетей в рабочих задачах. Условия: — комфортный современный офис рядом с м. Кутузовская — ежегодный пересмотр зарплаты, годовая премия — корпоративный спортзал и зоны отдыха — уникальная система обучения Сбера для профессионального и карьерного развития — расширенный ДМС и льготное страхование для семьи — гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ — подписка Прайм с возможностью совместного использования на трёх близких — вознаграждение за рекомендацию друзей в команду Сбера — корпоративная пенсионная программа

Задачи: — Разработка и поддержка инфраструктуры проектов в Timeweb Cloud. — Развитие Infrastructure as Code с использованием OpenTofu / Terraform. — Разработка и поддержка Ansible-ролей и playbook'ов. — Настройка и поддержка Docker / Docker Compose окружений. — Разработка и поддержка GitLab CI/CD пайплайнов для инфраструктуры и приложений. — Настройка сетевой инфраструктуры: VPC, NAT, firewall, reverse proxy, DNS, SSL/TLS. — Поддержка stage и production окружений. — Настройка и развитие мониторинга, логирования и алертинга на базе Prometheus, Grafana и Loki. — Участие в расследовании инфраструктурных проблем и инцидентов. — Автоматизация инфраструктурных и эксплуатационных задач. Требования: — Уверенное знание Linux. — Опыт работы с Docker и Docker Compose. — Опыт работы с Terraform / OpenTofu или другими IaC-инструментами. — Опыт работы с Ansible. — Опыт построения и поддержки CI/CD пайплайнов. — Понимание сетей: TCP/IP, DNS, HTTP/HTTPS, NAT, firewall. — Опыт работы с nginx, Angie, Traefik или другими reverse proxy. — Понимание принципов работы PostgreSQL, Redis и других типичных сервисов веб-приложений на инфраструктурном уровне. — Опыт работы с Git. Будет плюсом: — Опыт работы с Timeweb Cloud или другими облачными провайдерами. — Опыт работы с GitLab CI/CD и self-hosted GitLab. — Опыт работы с Prometheus, Grafana, Loki, Grafana Alloy. — Опыт работы с Nexus или другими registry/repository manager'ами. — Опыт построения инфраструктуры для PHP, Node.js или Go-приложений. — Опыт работы с RabbitMQ, Centrifugo и другими инфраструктурными компонентами веб-приложений. — Опыт настройки security-проверок инфраструктурного кода: Checkov, Gitleaks, Trivy и аналоги. — Опыт работы с Kubernetes.

Требуется дизайнер сайта на WordPress, который также сможет сверстать лендинг по собственному дизайну. Желательно, чтобы один человек совмещал обе роли: создание дизайна и верстку лендинга.

Задачи: — Распределять трафик между рекламодателями по установленным правилам; — Распределять доступные лимиты между партнёрами с учётом их приоритета, ставки и графика работы колл-центра; — Следить за заполнением лимитов и максимально эффективно использовать доступные объемы; — Каждый день собирать информацию по лимитам из рабочих чатов и вносить её в таблицу; — Работать с таблицами и внутренними системами учёта. Требования: — Умение работать с цифрами и понимание важности точности; — Уверенное владение таблицами в Google Sheets / Excel; — Владение английским языком на уровне переписки (А2-В1); — Внимательность к деталям, ответственность и скрупулезность; — Готовность учиться и быстро адаптироваться к изменениям; — Опыт работы не менее 6 месяцев в операционной роли, связанной с данными, таблицами, цифрами. Условия: — Удаленный формат работы из любой точки мира; — Возможности карьерного роста при показе результата; — Поддержка руководителя и обучение внутри команды.

Задачи: — Развивать antifraud-направление: определять стратегию, roadmap и приоритеты; — Руководить командой scientists/developers и развивать экспертизу; — Разрабатывать и внедрять antifraud-правила, scoring-модели и автоматизировать ручные процессы; — Развивать единый antifraud-сервис и выводить решения в production. Требования: — Опыт построения fraud prevention в iGaming, fintech, marketplace или payments; — Опыт работы с разными типами фрода и управления antifraud-направлением; — Опыт управления разработкой в роли лида + готовность самостоятельно писать и выводить код в production; — Уверенный SQL и Python; опыт Machine Learning для classification и scoring-задач будет плюсом; — Опыт взаимодействия с бизнесом и другими стейкхолдерами. Условия: — Компенсация на основании ваших ожиданий; — 24 дня оплачиваемого отпуска; — Корпоративные занятия английским; — Для сотрудников офиса на Кипре - компенсация питания, GYM & SPA в офисе и корпоративные мероприятия.

Задачи: — Управление полным циклом рекрутинга для ролей BDM и Sales на рынках Африки и Азии — Поиск, скрининг и взаимодействие с кандидатами через LinkedIn и другие релевантные каналы — Проведение HR-интервью и оценка мотивации, стиля коммуникации и соответствия кандидатов рынку — Координация этапов интервью с менеджерами по найму и поддержание процесса — Поддержание организованного и здорового пула кандидатов — Регулярное предоставление обновлений о ходе найма, проблемах и рыночных инсайтах — Обеспечение плавного, профессионального и дружелюбного опыта для кандидатов Требования: — Опыт работы в рекрутинге от 3 лет — Минимум 1 год опыта международного найма — Опыт найма BDM, Sales Managers или других коммерческих ролей — Опыт работы с рынками Африки и/или Азии — Уверенное управление ролями от начала до предложения — Сильные навыки поиска, скрининга и управления заинтересованными сторонами — Хорошие организационные навыки и ответственность — Владение английским языком на уровне B2 и выше — Опыт работы с LinkedIn и ATS инструментами — Знание русского языка будет плюсом — Опыт в финтехе будет значительным преимуществом Условия: — Международный опыт найма на быстрорастущих рынках — Возможность тесного взаимодействия с бизнес-стейкхолдерами — Энергия стартапа с реальными возможностями для роста — Высокий уровень доверия и автономии — Четкие цели и видимый эффект от рекрутинга — Дружелюбная и поддерживающая команда

Задачи: — Анализировать тренды рынка, маркетплейсов и потребительского спроса. — Искать перспективные идеи для новых продуктов и линеек. — Создавать новые форматы продуктов: наборы, фасовки, упаковки, линейки, вариации существующих SKU. — Формировать концепцию продукта: УТП, позиционирование, подача, ценность для клиента. — Участвовать в разработке упаковки и визуального позиционирования продукта. — Запускать новые продукты и доводить их до выхода в продажу. — Контролировать результаты запусков и выводить новинки на плановые показатели. — Работать в связке с аналитикой, маркетингом, дизайном, закупками и производством. — Постоянно искать точки роста, новые идеи и рыночные возможности для масштабирования бренда. Ориентир по результату роли — запуск около 10 новинок в месяц с последующим выводом их на целевые показатели продаж. Что НЕ входит в роль: — Глубокая аналитика и ручной расчёт unit-экономики. — Поиск производств и поставщиков. — Ведение закупочной части. — Полная операционная организация запуска руками. Для этого внутри уже есть отдельные специалисты и ресурсы. Основная ценность роли — продуктовое мышление, сильная насмотренность и создание востребованных новинок. Требования: — Опыт запуска товаров на маркетплейсах. — Умение чувствовать рынок и быстро адаптироваться под тренды. — Понимание влияния упаковки, позиционирования и формата на продажи. — Умение превращать гипотезы в реальные коммерческие продукты. — Понимание unit-экономики, маржинальности и окупаемости продукта. — Способность работать без микроменеджмента и постоянной постановки задач. — Ориентация на результат запусков. Будет преимуществом: — Опыт в БАДах, wellness, beauty или FMCG. — Опыт работы с marketplace-oriented брендами. — Высокая насмотренность в e-commerce и потребительских трендах. Условия: — Удалённая работа, full-time. — Предпочтительно нахождение в Москве или готовность регулярно быть на связи с командой. — Фиксированный оклад: 120 000 ₽. — KPI по результатам запусков и выполнению плановых показателей продаж. — Выплаты 2 раза в месяц. — Компенсация спорта и хобби. — Компенсация психолога и обучающих программ. — Подарки на дни рождения и важные семейные события. Компания предлагает: — Работа с сильной командой маркетинга и аналитики. — Возможность напрямую влиять на рост бренда и продуктовую стратегию. — Участие в создании продуктов, которые выходят в массовый рынок. Атмосфера и культура: — Высокая скорость и ориентация на результат. — Свобода инициативы и решений. — Отсутствие микроменеджмента. — Команда, которая ценит сильные идеи и реальный вклад в рост бизнеса.

Задачи: — Документировать и наполнять базы знаний (Jira/Confluence) — Разработка и актуализация HLD/LLD — Решать типовые задачи, обрабатывать инциденты совместно с архитекторами/экспертами — Осуществлять подготовку deplоyment-приложений для установки их в кластер — Автоматизировать рутинные процессы — Поддерживать пользователей и помогать им в выполнении шаблонных задач — Разработка автоматизации и средств мониторинга на Python Обязательные навыки: — Опыт в роли от 3 лет — Установка и администрирование ОС Linux/Ubuntu — Создание и поддержка кластеров K8s, Kafka, Greenplum, Cassandra — Понимание принципов работы DevOps, процессовCI\CD — Опыт работы с системой управления конфигурацией (Ansible) — Опыт работы с оркестраторами — Опыт настройки мониторинга и алертинга — Автоматизация на Python, bash — Навыки работы с Docker — Умение работать c git — Опыт написания веб сервисов (api) на python — Написание скриптов по автоматизации на python — Опыт работы с реляционными БД (Oracle, ClickHouse, PostgreSql) на уровне администратора

О компании Международная компания развивает экосистему премиальных финансовых и lifestyle-сервисов для состоятельных частных клиентов и предпринимателей. О роли Ищем B2B Partnerships Manager для развития партнёрского канала на Кипре. Задача — находить компании и профессиональных партнёров с релевантной аудиторией, договариваться о сотрудничестве и развивать referral-канал привлечения клиентов. Обязанности — Поиск и привлечение B2B/B2B2C партнёров — Формирование pipeline и выход на decision makers — Cold outreach через LinkedIn, email, звонки и networking — Проведение встреч и презентаций — Согласование коммерческих условий — Ведение переговоров до запуска партнёрства — Развитие действующих партнёров и увеличение referrals — Контроль KPI партнёрского канала — Участие в бизнес-мероприятиях на Кипре С кем предстоит работать Юридические, консалтинговые, corporate services, accounting, tax, real estate, relocation, family office, financial advisory и другие компании, работающие с состоятельными клиентами и международными предпринимателями. Требования — От 3 лет опыта в B2B sales, business development, partnerships или account management — Опыт cold outreach и самостоятельного привлечения партнёров — Сильные переговорные навыки и опыт общения с C-level — Умение вести полный цикл сделки — Свободный русский и английский — Проживание на Кипре — Готовность к офлайн-встречам и networking — Самостоятельность и ориентация на результат Будет плюсом: network на Кипре, опыт в fintech, banking, investments, corporate или premium services, работа с HNW/UHNW клиентами, греческий язык. Успех в роли Активный pipeline и партнёрства, которые стабильно приводят новых клиентов и revenue. Условия — €2 500 net / месяц + % с каждой сделки — Комиссия по отдельной сделке может составлять €4 000–5 000 — Полная занятость — Офис + активная выездная работа — Частичная удалённая работа по согласованию — Водительские права — Испытательный срок — 3 месяца

Задачи: — Развивать и администрировать стек сбора метрик Grafana, Graphite, VictoriaMetrics, Moira. — Повышать отказоустойчивость и масштабируемость системы. — Разворачивать и поддерживать решения в Kubernetes, писать и дорабатывать Helm-чарты. — Осуществлять миграции, обновлять систему. — Разбираться с инцидентами и их причинами. — Взаимодействовать с командами разработки по вопросам наблюдаемости сервисов. Требования: — Опыт администрирования Linux от двух лет: управление сервисами, настройка окружения, работа по SSH. — Практический опыт работы с Kubernetes: понимание манифестов и написание Helm-чартов. — Опыт построения CI/CD пайплайнов. — Опыт администрирования систем телеметрии: Grafana, VictoriaMetrics, Sentry, Kibana. — Знание Ansible: написание ролей и плейбуков для автоматизации развертывания. — Уверенная работа с Git. — Понимание принципов отказоустойчивости распределенных систем. — Навыки дебага приложений и инфраструктуры по логам и метрикам.

Цель и задачи роли: 1) Формировать бизнес-инсайты на основе анализа массивов данных о посещаемости, поведении посетителей ТЦ и ситуации на рынке. 2) Обеспечивать руководство сети ТЦ данными об эффективности маркетинговых активностей для принятия решений об оптимизации маркетинг микса. 3) Прогнозировать посещаемость объектов, учитывая позитивные и негативные факторы, влияющие на трафик. Обязанности: 1) Анализ трафика и поведения посетителей: Анализ данных системы подсчёта трафика на регулярной основе. Расчёт и мониторинг ключевых метрик. Сегментация аудитории. 2) Анализ рынка и трендов: Мониторинг ключевых изменений в конкурентном окружении. Анализ макро и микро трендов ритейла. Анализ трендов в покупательском изменении. 3) Отчётность: Контроль корректности данных о трафике в дашбордах BI-системы. Формирование еженедельных и ежемесячных аналитических отчётов по динамике трафика. Формирование аналитических отчётов по итогам кампаний для оценки эффективности маркетинговых активностей (реклама, мероприятия, программа лояльности и т.д.). 4) Проведение опросов и исследований: Опросы потребителей с использованием онлайн-панелей для проверки бизнес-гипотез (подготовка и программирование анкеты, обработка результатов, формирование выводов). Организация и контроль проведения исследований агентством. Формирование потребности, закупка и презентация результатов внешних готовых исследований. Геоаналитика. 5) Подготовка STEEP и SWOT анализа на 14 ТЦ МЕГА. Требования: Высшее образование. Опыт работы от 5 лет в аналитике (желательно в сфере коммерческой недвижимости и/или ритейла). Понимание метрик и ключевых KPI коммерческой недвижимости, принципов работы систем подсчета трафика. Умение переводить «язык цифр» на «язык бизнеса», формируя понятные презентации и рекомендации для принятия бизнес-решений. Знание инструментов визуализации данных (DataLens). Продвинутый пользователь Excel. Базовые знания SQL для самостоятельной выгрузки данных (желательно). Опыт работы с эконометрическим моделированием (желательно). Условия: Полное соблюдение ТК РФ, официальное трудоустройство, бессрочный ТД. График работы 5/2, гибкое начало и окончание рабочего дня (офис). Добровольное медицинское страхование (ДМС). Страхование жизни от несчастных случаев и заболеваний. Частичная компенсация питания. Программа поддержки сотрудников Добросервис. Платформа скидок и специальных предложений BestBenefits. Заработная плата обсуждается по итогам успешного прохождения интервью.

О нас: Мы, TOPHOUSE, разрабатываем и издаём adult-игры более 3 лет. Наша страница в Steam: https://store.steampowered.com/publisher/TopHouse Мы масштабируемся и создаем новую команду под один из новых проектов. Нам нужен сильный продюсер, который организует команду, успешно выпустит этот проект и продолжит вести следующие. Задачи: - Управление командой на всех этапах разработки - от старта до релиза. - Планирование проекта: составление дорожной карты, ведение спринтов, контроль дедлайнов и приоритетов. - Продюсирование проекта: участие в формировании видения (vision), контроль качества и сроков, умение сохранить изначальный замысел и донести его до команды. - Выстраивание и оптимизация рабочих процессов внутри команды. - Коммуникация между отделами, решение блокеров и управление рисками. - Ведение и актуализация проектной документации. Обязательные требования к кандидату: - Опыт работы в геймдеве в роли продюсера или product/project менеджера. - Наличие подтверждённых релизов в портфолио (это принципиально важное требование). - Навыки выстраивания процессов и people management. - Уверенное владение Agile-подходами на практике. - Позитивное отношение к ИИ-инструментам и готовность активно использовать и внедрять их для оптимизации пайплайна. Будет огромным плюсом, если вы: - Имеете опыт работы с Unreal Engine и/или Unity. - Понимаете специфику 3D-разработки изнутри. - Работали с проектами разных жанров и форматов (2D, 3D, казуальные игры). - Имеете успешный опыт формирования команд с нуля. - Глубоко понимаете принципы Scrum и Kanban, а также знакомы с фреймворками SAFe, LeSS, Scrum of Scrums. Мы предлагаем: - Полностью удалённый формат работы, полная занятость 5/2. - Стабильные выплаты и премии за успешные релизы проектов. - Интересные и амбициозные задачи в быстрорастущей нише. - Реальное влияние на продукт и процессы, без лишних согласований. - Дружную команду, адекватное руководство и отсутствие бюрократии. - Тимбилдинги. -Подарки на день рождения)

Задачи: — Владение и развитие стратегии качества компании, включая дорожную карту и рамки ответственности для инженеров, EM и PM на каждом этапе разработки ПО. — Разработка стратегии тестирования по всему стеку: unit, component, contract, API, end-to-end, мобильное и нефункциональное тестирование (производительность, нагрузка, доступность), согласованная с каждой командой. — Развитие AI-ориентированных инструментов качества, включая агенты и навыки, такие как Claude Code, для генерации тестов, ревью кода и руководства по качеству. — Управление CI/CD и инфраструктурой тестирования: обязательные проверки, quality gates, E2E и визуальные регрессионные пайплайны, бюджеты производительности, стратегия мобильной автоматизации на эмуляторах и реальных устройствах. — Связь сигналов качества из продакшена с инцидент-менеджментом и создание рабочих дашбордов. — Техническое наставничество QA-инженеров по всей организации, поддержка их технического роста и взаимодействие с EM для оценки производительности. Требования: — Опыт использования AI для генерации тестов и создания агентных инструментов (Claude Code, MCP workflows). — Стратегическое мышление с умением адаптировать подходы к уровню зрелости команды. — Глубокий практический опыт создания и поддержки тестовых наборов: компонентных, контрактных, API, E2E, производительности. — Умение обучать и наставлять инженеров, а также заниматься hands-on разработкой CI/CD и инструментов. — Готовность влиять на дисциплину QA без непосредственного управления персоналом на старте, опыт управления QA-командой будет плюсом. Условия: — Годовая зарплата $80,000-$100,000 USD. — Полностью удалённая работа с гибким графиком, ориентированным на результат. — Работа с партнёрами из США, требуется организация рабочего времени с учётом часовых поясов. Роль не предполагает традиционного управления QA-инженерами на старте, не является ролью по утверждению тикетов или блокировке релизов, не требует создания стратегии с нуля и не измеряется ростом команды, а улучшением качества всей инженерной организации.

Задачи: — Владение и развитие стратегии качества компании, включая дорожную карту и рамки ответственности для инженеров, EM и PM на каждом этапе разработки ПО. — Разработка стратегии тестирования по всему стеку: unit, component, contract, API, end-to-end, мобильное и нефункциональное тестирование (производительность, нагрузка, доступность), согласованной с каждой командой. — Развитие AI-ориентированных инструментов качества, включая агенты и навыки, такие как Claude Code, для генерации тестов, ревью кода и руководства по качеству. — Управление CI/CD и инфраструктурой тестирования: контрольные проверки, quality gates, E2E и визуальные регрессионные пайплайны, бюджеты производительности, стратегия мобильной автоматизации на эмуляторах и реальных устройствах. — Интеграция сигналов качества из продакшена с инцидент-менеджментом и создание рабочих дашбордов. — Техническое наставничество QA-инженеров по всей организации, поддержка их технического роста и взаимодействие с EM для оценки производительности. Требования: — Опыт использования AI для генерации тестов и создания агентных инструментов (Claude Code, MCP workflows). — Стратегическое мышление с умением адаптировать подходы к уровню зрелости команды, без навязывания конкретных инструментов или метрик. — Глубокий практический опыт создания и поддержки тестовых наборов: компонентных, контрактных, API, E2E и производительных тестов. — Умение обучать и наставлять инженеров, а также самостоятельно строить CI-пайплайны и инструменты. — Готовность влиять на техническую дисциплину без непосредственного управления командой на старте, с возможностью развития управленческих функций. Условия: — Годовая зарплата от 80,000 до 100,000 USD. — Полностью удалённая работа с гибким графиком, ориентированным на результат. — Работа с партнёрами из США, требуется организация рабочего времени с учётом часовых поясов. Роль не предполагает традиционного управления QA-инженерами на старте, не требует переписывания существующих процессов и инструментов, не является ролью по утверждению тикетов или блокировке релизов, и не оценивается по росту численности команды, а по улучшению качества всей инженерной организации.

Мы ищем Senior PHP Developer в команду, развивающую продукт для автоматизации управления кухней в ресторанном бизнесе. Основной фокус роли — оптимизация высоконагруженных баз данных и повышение производительности.

Крупный успешный IT-интегратор Казахстана ищет СЕО. Роль возникает впервые — до этого обязанности СЕО выполнял собственник. Это вакансия для СОО или CFO, желающего стать СЕО. Рассматриваются кандидаты с релевантным опытом из России, Казахстана и Узбекистана. Главный интерес позиции: если вы были успешным СОО в IT, телекоме, большом финтехе, энтерпрайзе с численностью сотрудников от 500 человек и годовым оборотом не менее 50 миллионов долларов, то для вас это возможность впервые стать СЕО. Позиция предполагает постоянное проживание в Казахстане, при необходимости релокацию обеспечивают.

Location: Москва Наша команда отвечает за оценку модельного риска и независимый контроль генеративных моделей Банка. В нашей зоне ответственности GigaChat — текстовые и мультимодальные LLM — и open-source модели: команда первой видит, на что способна новая версия, прежде чем она выйдет к пользователям. Нам нужен специалист, который возьмет на себя измерение качества GigaChat: * разработку бенчмарков и измерение на них качества модели — на собственных данных, а не по публичным лидербордам * развитие собственной библиотеки валидации LLM полного цикла: от сбора данных и разметки до финальных метрик и отчетов * вынесение заключения по модельному риску: при каких условиях версию можно выпускать и что осталось непроверенным. Эта роль про независимое измерение фундаментального качества модели: не про обучение GigaChat — этим занимается отдельная команда — и не про продуктовые метрики вроде DAU и retention. Обязанности **Развивать собственный фреймворк оценки LLM** * писать чистый код фреймворка и проверять чужой: регулярные код-ревью, PR, поддержка растущей кодовой базы * настраивать автоматизацию и CI под растущую аудиторию и вести регулярную валидацию версий GigaChat и open-source альтернатив по единой методике — фреймворком пользуются команды по всему Банку. **Разрабатывать бенчмарки и проектировать проверку** * разрабатывать и актуализировать собственные бенчмарки под ключевые сценарии Банка: подбор задач, редкие и намеренно трудные случаи, эталонные ответы * превращать запрос «модель стала лучше?» в план проверки: что измеряем, на какой выборке, с чем сравниваем. **Строить LLM-судей и автоматические метрики** * делать судей под задачу, знать их перекосы (self-preference, position bias, length bias) и калибровать оценки против человеческих * понимать, где автоматическая оценка не годится и нужен другой подход, и снижать стоимость измерений без потери достоверности. **Давать заключение по модельному риску** * оценивать автономность модели в сценарии и цену ее ошибки: что она делает без человека, что необратимого может произойти, какой худший реалистичный исход * формулировать условия выпуска — доля трафика, ограничения по сценариям, митигации, мониторинг — с явным перечнем непроверенного и защищать выводы перед командой разработки и руководством. **Следить за фронтиром** * следить за новыми подходами в научном сообществе, читать статьи, писать собственные, внедрять лучшие практики оценки в процессы Банка * когда нужного инструмента не существует — создавать его самостоятельно. **Стек:** Python, pandas, NumPy, PyTorch, HuggingFace (transformers, datasets), vLLM, SGLang, инференс-API, S3, Git, Docker, CI/CD, Linux, Bash. Требования * **Python на продакшн-уровне:** чистый код по PEP 8, ООП и типовые паттерны проектирования, аннотации типов, привычка к линтерам и статическому анализу (ruff, mypy). Создаете и поддерживаете production-код eval-пайплайнов, читаете и ревьюите чужой * **статистика и дизайн эксперимента:** доверительные интервалы, оценка необходимого размера выборки, проверка гипотез, поправки на множественные сравнения, разница между статистической и практической значимостью * **понимаете, как устроены LLM изнутри:** как работает трансформер и механизм внимания, почему текст разбивается на токены и к чему это приводит, как параметры генерации влияют на ответ, чем отличаются этапы обучения — предобучение, дообучение на инструкциях и обучение на человеческих предпочтениях * **опыт работы с LLM** и понимание, как оценивают генеративные модели: метрики, human evaluation, LLM-as-a-judge и его ограничения * **привычка выяснять цену ошибки до начала работы** — не бросаться считать метрики, не поняв, что именно проверяете * Готовность работать без готовой методологии, проактивность, умение декомпозировать большие задачи на решаемые. --- **Будет плюсом:** * опыт с open-source моделями и инференсом: vLLM, SGLang, inference API, prompt engineering * опыт работы с мультимодальными моделями: изображения, аудио * опыт построения evaluation-фреймворков и evaluation harness, встраивание оценок в CI/CD * работа с асессорами: постановка задачи разметчикам, контроль согласованности разметки * работа с coding-агентами (Claude Code, Codex, Cursor и аналоги) * представление о том, как удешевляют инференс: квантизация, дистилляция, PEFT/LoRA, спекулятивное декодирование * опыт с RAG: умеете оценивать поиск и генерацию по отдельности, понимаете, почему модель выдумывает факты и как на это влияют разбиение документов на фрагменты и их ранжирование; работали с векторным поиском и эмбеддингами. Условия * комфортный современный офис рядом с м. Кутузовская * возможность выбрать удобный график — офис / гибрид * ежегодный пересмотр зарплаты и годовая премия по итогам работы 2–4 оклада * программа адаптации и помощь руководителя на старте * более 400 образовательных программ СберУниверситета для профессионального и карьерного развития * корпоративный спортзал и зоны отдыха * расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа * гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ * подписка Прайм с возможностью совместного использования на трех близких * скидки на продукты компаний-партнеров * вознаграждение за рекомендацию друзей в команду Сбера.