Data engineer

Требования: — Владение одним из языков программирования Java или Groovy, знание принципов ООП, умение читать чужой код; — Навыки сборки проекта, компиляции и деплоя в Rancher с использованием Docker; — Опыт проектирования, реализации, развития и поддержки интеграционных решений на стеке BigData; — Знание SQL, включая индексы, функции, чтение планов запросов и оптимизацию запросов; — Опыт работы с реляционными базами данных (Oracle, Postgres, MySQL, MsSQL, DB2 и др.); — Умение работать с Git в консоли; — Знание особенностей работы ETL-инструментов, таких как Apache Nifi, Airflow, интеграционные шины SAP BW, Talend, Informatica, SAS и др.; — Опыт работы с Hadoop, понимание устройства HDFS и форматов данных; — Опыт работы с Hive или другими хранилищами на основе Hadoop; — Опыт использования систем ведения проектов и документации; — Умение работать с архитектурными схемами; — Понимание принципов построения и хранения данных в DWH и DataLake. Задачи: — Самостоятельная разработка, реализация и поддержка интеграционных решений на стеке технологий Java, Groovy, Apache Nifi, Airflow; — Определение стека технологий для конкретных проектов и задач; — Решение технически сложных задач, которые не могут решить другие инженеры в команде; — Оперативное реагирование на информацию о проблемах в зоне ответственности и выполнение задач в установленные сроки; — Разработка и контроль актуальности документации по взаимодействию конфигурационных единиц платформы больших данных; — Предоставление отчетов о деятельности начальнику отдела или руководителю; — Контроль качества интеграционных решений с созданием задач и дефектов для рефакторинга; — Определение технологической стратегии развития проекта или продукта; — Выстраивание процессов CI/CD, код-ревью, внедрение и развитие инженерных практик. Условия: — Полный рабочий день; — Возможна удалённая работа; — Оформление как ИП; — Зарплата от 250 000 до 270 000 рублей в месяц, гросс.