Задачи:
— поддержка и развитие решения по обогащению данных на основе event sourcing
— построение витрин данных с использованием Airflow, dbt и Materialized Views в ClickHouse
— внедрение проверок качества данных
— автоматизация рутинных задач
— внедрение стандартов Data Engineering
— ведение технической документации
Требования:
— от 3 лет опыта в data engineering
— уверенное владение SQL (сложные аналитические запросы, оптимизация)
— сильный Python (фундаментальные знания и опыт с библиотеками для DE — pandas, SQLAlchemy, PySpark)
— опыт разработки production‑кода (ООП, архитектура приложений, тестирование, Git, CI/CD)
— практический опыт работы с Airflow (создание и поддержка DAG)
— опыт работы с dbt (модели, тесты, макросы)
— опыт работы с ClickHouse (движки таблиц, Materialized Views, тюнинг производительности)
— опыт работы с Kafka (продюсеры/консьюмеры, топики и партиционирование, гарантии доставки)
— опыт с инструментами контроля качества данных (dbt tests, Great Expectations, Soda)
— ориентация на результат и ответственность за итоги работы
Компания HelioCore, работающая в сфере HRTech, расширяет команду и приглашает на позиции Business Analyst и HR Analyst уровня Middle и Senior. Вакансии предполагают работу в офисе в Варшаве, Польша. Основные задачи включают анализ данных и процессов в области HR, выявление возможностей для оптимизации и внедрение решений с использованием искусственного интеллекта и автоматизации.