Задачи:
— построение ETL-процессов: разработка и настройка конвейеров по сбору и трансформации данных из различных источников;
— работа с современным стеком трансформации: освоение и применение DBT для превращения «сырых» данных в чистые аналитические витрины;
— оркестрация данных: настройка и поддержка рабочих процессов (pipelines) в Dagster для своевременного и безошибочного обновления данных в отчетах;
— управление хранилищами: работа с Postgres и высокопроизводительной колончатой базой данных Clickhouse для обеспечения скорости работы отчетов;
— визуализация смыслов: разработка интерактивных BI-отчетов в Apache Superset для поддержки принятия бизнес-решений;
— оптимизация выборок: анализ и ускорение тяжелых запросов для повышения производительности системы отчетности.
Требования:
— уверенное владение SQL (сложные выборки, агрегатные функции, оптимизация запросов);
— понимание устройства реляционных баз данных, в частности PostgreSQL, и принципов построения аналитических хранилищ;
— базовые знания Python, умение писать скрипты для обработки данных и автоматизации простых задач;
— аналитический склад ума, способность работать с большими массивами данных, выявлять закономерности и структурировать информацию.
Желательный опыт:
— создание дашбордов в BI-инструментах (Apache Superset, Tableau, Power BI или аналогичных);
— понимание концепций ETL/ELT;
— понимание архитектуры данных, разницы между OLTP и OLAP системами (например, использование Clickhouse для аналитики);
— интерес к современным инструментам DBT и оркестраторам данных (Airflow, Dagster).
Условия:
— срочный трудовой договор на 3 месяца;
— график 5/2, не более 30 часов в неделю;
— возможность работы удаленно, в офисе или в гибридном формате;
— стажировка открыта для студентов любых ВУЗов и форм обучения, включая заочную и магистратуру.
Контакты работодателя доступны по кнопке «Откликнуться» после входа.
Зарплаты и спрос: Дата-инженер
Сейчас в каталоге 597 вакансий по этому направлению, удалённо можно работать в 40%.
Зарплата здесь не указана. Медиана по направлению: 245 000 ₽ в месяц. У половины вакансий от 160 000 ₽ до 294 000 ₽ (вакансий с вилкой: 38).
Навыки этой вакансии, которые чаще всего просят по направлению: Python (36%), SQL (34%), PostgreSQL (13%), ClickHouse (11%). В скобках доля вакансий направления.