Data Engineer

Задачи: — поддержка и развитие решения по обогащению данных на основе event sourcing — построение витрин данных с использованием Airflow, dbt и Materialized Views в ClickHouse — внедрение проверок качества данных — автоматизация рутинных задач — внедрение стандартов Data Engineering — ведение технической документации Требования: — от 3 лет опыта в data engineering — уверенное владение SQL (сложные аналитические запросы, оптимизация) — сильный Python (фундаментальные знания и опыт с библиотеками для DE — pandas, SQLAlchemy, PySpark) — опыт разработки production‑кода (ООП, архитектура приложений, тестирование, Git, CI/CD) — практический опыт работы с Airflow (создание и поддержка DAG) — опыт работы с dbt (модели, тесты, макросы) — опыт работы с ClickHouse (движки таблиц, Materialized Views, тюнинг производительности) — опыт работы с Kafka (продюсеры/консьюмеры, топики и партиционирование, гарантии доставки) — опыт с инструментами контроля качества данных (dbt tests, Great Expectations, Soda) — ориентация на результат и ответственность за итоги работы