Задачи:
— проектировать, разрабатывать и поддерживать масштабируемые и надёжные пайплайны и ETL/ELT‑процессы;
— оптимизировать решения для хранилища данных;
— развивать инфраструктуру на AWS и поддерживать части legacy‑инфраструктуры;
— разрабатывать API и интеграции данных;
— участвовать в создании real‑time‑пайплайнов на Kafka;
— автоматизировать и оптимизировать процессы и рабочие потоки;
— мониторить, устранять неполадки и повышать надёжность, производительность, безопасность и качество данных;
— взаимодействовать с аналитической командой и другими стейкхолдерами для реализации решений под их потребности;
— вести актуальную документацию по пайплайнам, инфраструктуре и процессам;
— участвовать в модернизации существующих процессов и архитектуры.
Требования:
— опыт в data‑инженерии от 2 лет;
— уверенное владение SQL и Python;
— практический опыт с AWS (S3, Redshift, Glue, Lambda);
— опыт работы с Apache Airflow;
— понимание концепций хранилищ данных и моделирования данных;
— опыт проектирования, разработки и поддержки production‑пайплайнов с фокусом на надёжность, мониторинг и качество данных;
— знание реляционных и нереляционных баз данных;
— знакомство с Git и CI/CD (предпочтительно GitLab);
— опыт разработки API и интеграций данных.
Будет плюсом:
— опыт с Kafka и real‑time‑обработкой данных;
— опыт с MS SQL Server и SSIS.
Требуется уровень английского Upper‑Intermediate и выше, хорошие навыки письменной и устной коммуникации.
Контакты работодателя доступны по кнопке «Откликнуться» после входа.
Зарплаты и спрос: Дата-инженер
Сейчас в каталоге 525 вакансий по этому направлению, удалённо можно работать в 42%.
Зарплата здесь не указана. Медиана по направлению: 245 000 ₽ в месяц. У половины вакансий от 160 000 ₽ до 290 000 ₽ (вакансий с вилкой: 37).
Навыки этой вакансии, которые чаще всего просят по направлению: Python (38%), SQL (36%), Airflow (26%), Kafka (15%), Git (11%). В скобках доля вакансий направления.
Автоотклики