Инженер данных

Location: Москва Workplace: Гибрид, Офис Объединённая компания Wildberries и Russ — это международная технологическая компания, образованная в результате слияния двух лидеров рынка — IT-компании Wildberries и оператора наружной рекламы Russ. Мы в поиске Data инженера в Платформу данных департамента Финтех. Обязанности Писать и поддерживать ETL на Spark для больших потоков событий из Kafka; Развивать модель данных (ODS, CDM, витрины) и выгрузки в ClickHouse; Настраивать мониторинг пайплайнов и сервисов, участвовать в дежурствах; Разрабатывать ETL-пайплайны (Python, SQL, Spark) и DAG в Airflow; Развивать модели данных и хранилища (S3/Ceph/MinIO, Hadoop, Greenplum, ClickHouse); Разрабатывать прикладные сервисы платформы данных; Настраивать мониторинг и алертинг сервисов. Требования Уверенный Python и SQL; Опыт со Spark, ClickHouse, Hadoop, Kafka, Greenplum, S3 (Ceph, MinIO); Опыт написание DAG для Airflow; Опыт с Docker и Kubernetes; Опыт с Linux и Git; Опыт с Iceberg и Trino; Опыт с Prometheus, Grafana, VictoriaMetrics; Опыт построения feature store для ML; Опыт в финтехе или работе с финансовыми данными. Условия Обучение и развитие: языковые клубы, собственный корпоративный университет, программы развития управленческих навыков и многое другое; Благополучие сотрудников: корпоративный пакет ДМС со стоматологией, корпоративный спорт, консультации психолога и дополнительные возможности аккредитованной IT-компании; Множество сообществ: клуб спикеров, футбола, йоги, шахмат и т.д.; Забота о семьях: создаем условия, в которых легко сочетать карьеру и заботу о близких – от гибкого подхода до масштабных проектов для детей сотрудников; Скидки и партнерские программы: на обучение, страхование, покупки и многое другое; Комфортная рабочая среда: бесплатное питание в офисе, современные офисы рядом с метро, корпоративная техника и портал для сотрудников.