Задачи: — Администрирование, конфигурация, оптимизация и поддержка платформы Databricks. — Управление рабочими пространствами Databricks в средах разработки, тестирования и продакшена. — Конфигурация и управление кластерами, пулами, заданиями и рабочими процессами для поддержки ETL, потоковых и ML задач. — Мониторинг состояния платформы, емкости и производительности, проактивное выявление и устранение проблем. — Управление версиями Databricks runtime, библиотеками и интеграциями с облачным хранилищем и сервисами данных. — Реализация и поддержка процедур резервного копирования, восстановления и обеспечения непрерывности бизнеса. — Настройка и поддержка управления идентификацией и доступом (IAM) в Databricks. — Внедрение и соблюдение лучших практик безопасности, включая шифрование, сетевой контроль и политики доступа к данным. — Сотрудничество с командами безопасности и соответствия для соблюдения организационных и нормативных требований. — Поддержка стандартов управления данными (например, Unity Catalog). — Оптимизация конфигураций кластеров, автоскейлинга и планирования заданий для баланса производительности и затрат. — Анализ метрик использования и затрат, внедрение стратегий контроля затрат. — Рекомендации и реализация стратегий настройки и оптимизации платформы для больших данных. — Взаимодействие с инженерами данных, аналитиками и дата-сайентистами для понимания требований и рекомендаций по использованию Databricks. — Предоставление поддержки уровня Tier 2/3 по инцидентам и запросам, связанным с Databricks. — Разработка и поддержка документации, инструкций и стандартных операционных процедур. — Проведение обучения пользователей и обмен знаниями по возможностям и лучшим практикам Databricks. — Автоматизация развертывания рабочих пространств и кластеров, конфигураций и политик с использованием Infrastructure as Code (Terraform, ARM/Bicep, CloudFormation). — Интеграция Databricks с CI/CD пайплайнами для развертывания кода и управления средами. — Поддержка лучших практик контроля версий для ноутбуков, заданий и конфигураций. Требования: — Высшее образование в области компьютерных наук, информационных систем, инженерии или смежных областях либо дополнительный опыт работы 4 года при отсутствии диплома. — Опыт работы не менее 8 лет в администрировании облачных платформ данных или сред больших данных. — Практический опыт администрирования Databricks (Azure, AWS или GCP Databricks). — Глубокое понимание рабочих пространств, кластеров, заданий, пулов и ноутбуков Databricks. — Знание облачных хранилищ (Azure Data Lake Storage, S3, GCS) и сетевых концепций. — Опыт управления идентификацией и доступом в соответствующем облачном провайдере (Azure AD, IAM и др.). — Навыки скриптинга и автоматизации (Python, PowerShell, Bash). — Знакомство с концепциями Spark (кластеры, исполнители, задания, партиции) и вопросами производительности. — Опыт мониторинга и устранения проблем с производительностью и надежностью платформы. — Сильные аналитические и проблемно-ориентированные навыки. — Умение объяснять сложные технические концепции технической и нетехнической аудитории. — Ориентация на клиента и качество сервиса. — Способность работать самостоятельно и в команде в динамичной agile-среде. Желательные квалификации: — Сертификация Databricks (например, Databricks Certified Data Engineer Associate/Professional, Lakehouse Fundamentals, Administrator). — Опыт работы с Unity Catalog и тонкой настройкой доступа к данным. — Опыт работы с CI/CD инструментами (Azure DevOps, GitHub Actions, Jenkins). — Опыт работы с Infrastructure as Code (предпочтительно Terraform). — Опыт работы с инструментами агрегации логов и мониторинга (Azure Monitor, CloudWatch, Datadog, Splunk). — Знание Delta Lake, структурированного стриминга и архитектур Lakehouse. — Опыт работы в корпоративных средах с высокими требованиями к безопасности и соответствию. Условия: — Удаленная работа из любой точки. — Полная занятость, 40 часов в неделю. — Требуется получение и поддержание уровня безопасности Public Trust с обязательной процедурой снятия отпечатков пальцев. — Требования к резидентству в США: проживание в США или территориях последние 5 лет с ограничениями на время отсутствия. — Конкурентная зарплата в диапазоне $10,669 – $14,435 в месяц ($128,039 - $173,229 в год), зависит от опыта и местоположения. — Пакет социальных льгот, включая медицинское страхование, 401(k) с компанией-матчем, оплачиваемый отпуск и другие выплаты. — Гибкий график работы и поддержка баланса работы и личной жизни. — Процесс верификации личности с использованием биометрии и ИИ для предотвращения мошенничества.
10 669 – 14 435 $