Senior Big Data Infrastructure Engineer

Задачи: — Деплоить, обновлять и эксплуатировать сервисы Big Data платформы: HDFS, Ozone S3, Iceberg и др. — Поддерживать пилот: перестраивать работу кластера под тысячи мелких таблиц и файлов — Внедрять квоты на вычисления и хранение для бизнес-юнитов: продумать, как их считать и заводить, чтобы потом не утонуть в конфигурациях — Мигрировать с дефолтного Iceberg-каталога на Lakekeeper или Gravitino — Навести порядок в мониторинге и алертинге Требования: — Опыт проектирования, внедрения и эксплуатации Big Data платформы от 5 лет — Практический опыт с HDFS / Hadoop: деплой, апгрейды, траблшутинг — Опыт самостоятельного деплоя и эксплуатации S3-хранилища (в идеале Ozone, но MinIO и аналоги тоже подойдут) — Опыт работы с Apache Iceberg — Английский на уровне чтения технической документации — Возможность работать по московскому времени (разница до 3 часов) Будет большим плюсом: — Опыт с Trino, Kafka или Flink — Опыт с REST-каталогами для Iceberg (Lakekeeper, Gravitino, Polaris и др.) — Опыт работы с AI-инструментами не только на уровне чата: Copilot, агенты, автоматизация своих задач Условия: — Можно работать удалённо и по гибкому графику — Выстроенный онбординг, корпоративная школа английского, внутренние программы обучения — Компенсация внешних курсов и конференций — Корпоративные цены на отели — Дополнительный оплачиваемый выходной MyTime Day Off