Задачи:
- разработка и оптимизация скриптов и витрин
- реализация дата‑продуктов
- анализ качества данных
- разработка проверок качества витрин и их мониторинг
- проектирование решений
- оптимизация хранения и доступа к большим массивам данных
- подготовка технической документации и описание логики расчёта витрин
- участие в развитии практики data quality и улучшении процессов работы с данными
- создание и сопровождение ETL/ELT‑процессов на базе SQL, Python, Spark, Airflow
Требования:
- высшее образование
- знание SQL (Oracle, Postgres)
- Hadoop (HDFS, Hive, Impala, Sqoop, Spark) выше среднего уровня с умением оптимизировать код
- знание инструментов обработки и трансформации данных (Spark, Apache Airflow)
- теория баз данных
- умение структурировать информацию
- знание Python и опыт анализа и обработки данных
- понимание принципов работы моделей DS / опыт работы с машинным обучением (ML)
Контакты работодателя доступны по кнопке «Откликнуться» после входа.
ГибридGibraltar; Georgia; Bulgaria; Isle of Man; Poland; Romania; Ukraine; We also welcome candidates from non-traditional career journeys and value diverse perspectives that challenge conventional thinking
seniorUkraine - Remote; We review all candidates based on skills, experience, and potential
Зарплаты и спрос: Дата-инженер
Сейчас в каталоге 621 вакансия по этому направлению, удалённо можно работать в 39%.
Зарплата здесь не указана. Медиана по направлению: 245 000 ₽ в месяц. У половины вакансий от 160 000 ₽ до 294 000 ₽ (вакансий с вилкой: 38).
Навыки этой вакансии, которые чаще всего просят по направлению: Python (36%), SQL (35%), Airflow (25%), Spark (14%), PostgreSQL (13%). В скобках доля вакансий направления.