Ритейл Эксперт · Москва

Data Platform Engineer — Ритейл Эксперт

Разработка ETL/ELT пайплайнов: Проектирование и реализация инкрементальной загрузки и трансформации больших объемов данных с использованием PySpark. Проектирование DWH и...

Коротко о вакансии

Зарплату работодатель не назвал — вилку обсуждают на собеседовании.

Описание вакансии

Компания "Retail Expert" - поставщик данных о ритейле, который берет на себя не только сбор, структурирование и подготовку информации к анализу, но и сам анализ.

Мы специализируемся в IT разработках и продаже аналитики, исследований и консалтинга для ТОПов FMCG уже более 10 лет.

Наша миссия — обеспечить нашим клиентам максимально точное определение настоящего и планирование их будущего.

Наши эксперты всегда идут в ногу со временем и используют в своей работе передовые технологии, чтобы обеспечить сервис высокого уровня быстро, качественно и эффективно.

В данный момент, в рамках плановой трансформации процессов и поддержки текущих бизнес-задач, мы находимся в поисках Data Platform Engineer, который совмещает data engineering, backend и platform: проектирует архитектуру, развивает ETL и Python-проекты, поддерживает сервисы и инфраструктуру - от MSSQL и Airflow до Docker/Kubernetes и мониторинга.

Чем предстоит заниматься:
  • Разработка ETL/ELT пайплайнов: Проектирование и реализация инкрементальной загрузки и трансформации больших объемов данных с использованием PySpark.

  • Проектирование DWH и витрин: Создание схем таблиц в ClickHouse для витрин, кубов и отчетности Power BI. Настройка движков MergeTree, партиционирования, materialized views и оптимизация производительности запросов.

  • Построение Lakehouse-архитектуры: Развитие слоя хранения с нуля (Raw → Staging → Marts) на базе S3-совместимого хранилища с использованием форматов Parquet и Apache Iceberg.

  • Миграция данных: Перенос логики и данных из legacy-систем (MSSQL, хранимые процедуры) в новую целевую архитектуру.

  • Поддержка и оптимизация Python-пайплайнов: Работа с текущим стеком на Python/Polars (хеширование, дробление файлов), рефакторинг и повышение отказоустойчивости.

  • Оркестрация: Разработка и поддержка DAG-ов в Apache Airflow для управления всеми процессами обработки данных.

  • Проактивная оптимизация: Самостоятельный поиск узких мест в текущих решениях, предложение и реализация улучшений без ожидания отдельной постановки задачи.

Требования

Hard skills:

  • Python (продвинутый): pandas, Polars, PySpark, FastAPI(написание пайпланов как код)
  • SQL / MSSQL / PG - проектирование БД, оптимизация запросов
  • Apache Airflow - разработка и поддержка DAG-ов
  • PySpark - трансформация и агрегация данных
  • Data Lake / Lakehouse: S3, Parquet, Iceberg
  • Docker - контейнеризация, деплой и оркестрация сервисов
  • ClickHouse — именно проектирование схем, не только SELECT
  • Pandas, Polars

Будет плюсом:

  • опыт с dbt, Great Expectations, Trino, опыт работы с LLM в разработке
  • Работа с продакшн-данными
Мы предлагаем:
  • Возможность работать с реальной задачей — построить Lakehouse и схемы ClickHouse практически с нуля, а не поддерживать чужое
  • Офис на м. Бутырская
  • Официальное трудоустройство
  • Конкурентную зарплату по итогам собеседования

Вакансия опубликована 6 ноября, проверена 18.11.2026. Открыть оригинал.

Как откликнуться

Отклик оформляется на странице работодателя — кнопка выше ведёт туда напрямую. Перед отправкой стоит подогнать резюме под текст вакансии: работодатели читают первые строки и ищут в них свои слова. Если рассылаете отклики десятками, посмотрите сервис автооткликов — он отправляет их за вас по заданным настройкам, до 50 в сутки. Про сам поиск работы есть разбор в статье как быстро найти работу.

Спросите нейросети о вакансии

Отвечает DeepSeek по данным этой страницы: зарплата против рынка, условия, работодатель

Вопросы по этой вакансии

Сколько платят на позиции «Data Platform Engineer»?

Вилку работодатель не назвал — обсуждать деньги придётся на собеседовании. Для ориентира: в среднем по направлению «Дата-сайентист» платят 174 000 ₽.

Какой опыт нужен?

В требованиях указано: от 1 года до 3 лет. Работать нужно на месте, город — Москва.

Вакансия ещё открыта?

Да, на 18.11.2026 она активна: каждую ночь каталог сверяется с источником, закрытые предложения помечаются и уходят из списков.

О компании

Ритейл Эксперт

Компания "Retail Expert" -  поставщик данных о ритейле, который берет на себя не только сбор, структурирование и подготовку информации к анализу, но и сам анализ. Мы специализируемся в IT разработках и продаже аналитики, исследований и консалтинга ТОП FMCG компаниям уже более 10 лет. Наша миссия — обеспечить нашим клиентам максимально точное определение настоящего и планирование их будущего. На…

Открытых вакансий: 3

Похожие вакансии

Соседи по направлению с близкими требованиями.

Senior Data Scientist (ИЦО)

Зарплата не указана

СБЕР · Москва

Глубокий анализ данных для построения и калибровки моделей. Опыт построения uplift-моделей и кривых отклика для оптимизации процентных ставок/Разработка...

От 3 до 6 летДата-сайентистОпубликована 30 октября

Эксперт SOC

Зарплата не указана

ФГАОУ ВО МГТУ им. Н.Э. Баумана · Москва

Развитие процессов SOC. Оптимизация и автоматизация процессов мониторинга, анализа и реагирования на инциденты ИБ. Экспертная поддержка Аналитиков SOC.

От 3 до 6 летДата-сайентистОпубликована 11 ноября

Инженер данных (Data Science, Москва)

Зарплата не указана

Rambler&Co · Москва

Поддержание работоспособности текущей структуры баз данных, таблиц и скриптов для обработки данных. Выстраивание системы сбора, предобработки и хранения данных веб...

От 1 года до 3 летДата-сайентистОпубликована 6 ноября

Senior ML Engineer/Data Scientist в команду Пополнения (направление RL)

Зарплата не указана

X5 Tech · Москва

Разработка и внедрение RL-алгоритмов для оптимизации решений по пополнению: проектирование среды (environment), reward-функции, обучение и валидация, интеграция с...

Можно удалённоОт 3 до 6 летДата-сайентистОпубликована 5 ноября

Senior Data Scientist/ML Engineer в направление Антифрод

Зарплата не указана

X5 Tech · Москва

Аналитика и стратегия: глубокий анализ транзакционных данных, поиск аномалий, сегментирование, анализ причин изменений ключевых показателей. Разработка и внедрение ML-моделей...

Можно удалённоОт 3 до 6 летДата-сайентистОпубликована 12 ноября

Расчёты по этой вакансии

Пригодится до собеседования: сколько останется на руки от названной суммы, как считаются отпускные и переработки.

Ещё по направлению

Модели машинного обучения, прогнозы и рекомендации: Python, статистика, продакшен.