NextChallenge

Задачи: — проектировать, разрабатывать и поддерживать масштабируемые и надёжные пайплайны и ETL/ELT‑процессы; — оптимизировать решения для хранилища данных; — развивать инфраструктуру на AWS и поддерживать части legacy‑инфраструктуры; — разрабатывать API и интеграции данных; — участвовать в создании real‑time‑пайплайнов на Kafka; — автоматизировать и оптимизировать процессы и рабочие потоки; — мониторить, устранять неполадки и повышать надёжность, производительность, безопасность и качество данных; — взаимодействовать с аналитической командой и другими стейкхолдерами для реализации решений под их потребности; — вести актуальную документацию по пайплайнам, инфраструктуре и процессам; — участвовать в модернизации существующих процессов и архитектуры. Требования: — опыт в data‑инженерии от 2 лет; — уверенное владение SQL и Python; — практический опыт с AWS (S3, Redshift, Glue, Lambda); — опыт работы с Apache Airflow; — понимание концепций хранилищ данных и моделирования данных; — опыт проектирования, разработки и поддержки production‑пайплайнов с фокусом на надёжность, мониторинг и качество данных; — знание реляционных и нереляционных баз данных; — знакомство с Git и CI/CD (предпочтительно GitLab); — опыт разработки API и интеграций данных. Будет плюсом: — опыт с Kafka и real‑time‑обработкой данных; — опыт с MS SQL Server и SSIS. Требуется уровень английского Upper‑Intermediate и выше, хорошие навыки письменной и устной коммуникации.