Задачи:
— Развивать корпоративную платформу данных и DWH;
— Переводить существующие ETL-процессы с SSIS на Apache Airflow 3 и внутренний YAML-driven Python-фреймворк;
— Разрабатывать и поддерживать надежные data-пайплайны;
— Обеспечивать стабильную промышленную эксплуатацию: retry, backfill, идемпотентность, дедупликацию и корректную обработку сбоев;
— Развивать проверки качества данных;
— Оптимизировать SQL и работу с Microsoft SQL Server;
— Развивать CI/CD-процессы для работы с данными;
— Создавать переиспользуемые инструменты и self-service решения для аналитических команд;
— Участвовать в развитии архитектуры DWH и подходов к моделированию данных.
Требования:
— Опыт работы Data Engineer от 3 лет;
— Уверенный SQL и практический опыт работы с Microsoft SQL Server;
— Знание Python: ООП, модульная архитектура, type hints, тестирование, логирование, работа с REST API и БД;
— Опыт работы с Apache Airflow или другим промышленным оркестратором;
— Опыт работы с dbt или аналогичным SQL transformation framework;
— Понимание ETL/ELT, batch- и near-real-time-обработки;
— Умение строить надежные и отказоустойчивые data-пайплайны;
— Опыт Git и CI/CD;
— Опыт реализации Data Quality-проверок;
— Понимание архитектуры DWH и организации слоев данных;
— Знание подходов к моделированию данных: Kimball, Inmon, Data Vault, Anchor Modeling.
Условия:
— Возможность влиять на продукт, открытость к новым идеям и обратной связи;
— Возможность работать удаленно из любой точки мира, с опцией работы из офиса в Москве, Нижнем Новгороде, Коврове, Владимире;
— Дружелюбная атмосфера, внутренние митапы, участие в конференциях, обмен опытом;
— Возможность стать амбассадором ИТ бренда;
— Высокий уровень удовлетворенности сотрудников (eNPS);
— Перфоманс ревью два раза в год с премией до двух окладов и описанными грейдами;
— Расширенный ДМС со стоматологией, возможность подключения семьи со скидкой;
— Комфортное рабочее место с предоставлением техники или возможностью работать на своей.
Контакты работодателя доступны по кнопке «Откликнуться» после входа.
São Paulo, Brazil; Hybrid, with on-site attendance twice per week
Зарплаты и спрос: Дата-инженер
Сейчас в каталоге 532 вакансии по этому направлению, удалённо можно работать в 42%.
Зарплата здесь не указана. Медиана по направлению: 245 000 ₽ в месяц. У половины вакансий от 160 000 ₽ до 290 000 ₽ (вакансий с вилкой: 37).
Навыки этой вакансии, которые чаще всего просят по направлению: Python (39%), SQL (36%), Airflow (26%), Git (11%). В скобках доля вакансий направления.