Data Engineer

Задачи: — Анализ существующих решений и витрин данных — Миграция витрин со стека Hadoop на стек Apache Iceberg, Spark 3.5 и Apache Airflow — Реализация недостающих реплик — Переработка текущих решений на целевом стеке — Построение и развитие витрин данных — Участие в тестировании — Наполнение и актуализация технической документации Требования: — Уверенные знания SQL и Python — Опыт работы с Apache Spark, Hadoop и S3 — Знание Apache Iceberg и Apache Airflow — Понимание форматов хранения данных, включая Parquet — Опыт работы с Git, CI/CD, Jira, Confluence — Базовые знания Kafka Условия: — Удалённая работа в России