Senior Data Engineer

Задачи: — Разработка и развитие пайплайнов данных и платформенного слоя, обеспечивающего работу AI-продуктов компании; — Анализ использования LLM, включая стоимость, экономику токенов, кеширование и финансовую отчетность по расходам на AI; — Развитие RAG-систем, таких как контекстные базы знаний и инфраструктура векторного и семантического поиска; — Обеспечение эксплуатационной надежности платформы через профилирование, мониторинг и observability пайплайнов; — Разработка интерфейсов и сервисов поверх данных, включая авторизацию, API и интерактивный доступ для пользователей. Требования: — Сильный коммерческий опыт в Data Engineering с современным стеком технологий, включая Databricks, dbt, Airflow, Dagster, Greenplum, Snowflake или аналогичные; — Уверенное владение Python и понимание backend-разработки, включая авторизацию и взаимодействие с сервисами; — Комфорт в создании интерактивных решений, а не только передаче готовых датасетов downstream-потребителям; — Практическое понимание профилирования и мониторинга data-систем в production; — Глубокое понимание AI/LLM-стека, включая векторные базы данных, embeddings, контекстный и семантический поиск, RAG-архитектуры и принципы работы автономных агентов; — Концептуальное понимание технологий AI Platform; — Опыт работы с облачными технологиями, предпочтительно AWS. Стек: PySpark, Databricks, dbt, Redshift, RDS, PostgreSQL, Python, GitHub, Asana, Amplitude. Формат работы: удалённо, можно работать из любой страны. Офисы компании расположены в Армении, Грузии, Казахстане, Сербии и на Кипре.