Senior Data Engineer в Core команду Лояльности

договорная
Москва • Полная занятость
Откликнуться на вакансию

Условия работы

Обязанности
Core Портал продавцов — это юнит со всеми продуктами WB для продавцов. Здесь есть личный кабинет, загрузка и хранение контента, интеграция с поиском и каталогом, баланс продавца, отгрузка товаров и доставка до покупателя, аналитика и многое другое. Это 1/4 всего бизнеса WB. В сервисе более 1 млн. поставщиков, ежедневный оборот - 5 млрд. рублей.

Вам предстоит:
  • Участвовать в разработке data-transfer инструмента, который позволит автоматизировать процесс перегрузки данных с различных источников;
  • Формировать хранилище данных на HDFS и ClickHouse;
  • Дорабатывать и оптимизировать существующие, а также писать новые Airflow-операторы;
  • Оптимизировать интеграции со стриминговыми источниками данных (Kafka);
  • Формировать витрины для аналитики и поставлять их в BI-инструмент.

Формат работы — удаленный формат.

Вы нам подойдете, если:

  • Имеете уверенный опыт программирования на Python (от 5 лет);
  • Имеете опыт работы с Java/Scala (Flink огромным плюсом);
  • Имеете опыт с hadoop (spark/yarn/hdfs/hive), с apache Airflow / Dagster и со Spark (Pyspark);
  • Имеете опыт в оптимизации SQL запросов (индексы, партицирование, шардирование и тд);
  • Имеете опыт работы с MPP СУБД (ClickHouse/GreenPlum/Vertica).
* Уточняйте актуальность вакакнсии на сайте работодателя

Полезные статьи

Сколько зарабатывает техник-монтажник в 2026 году

Профессия техника-монтажника в 2026 году остается востребованной, поскольку эти специалисты обеспечивают создание и поддержку коммуникационной и технологической инфраструктуры. Они занимаются установкой, настройкой и обслуживанием различного оборудования — от сетей доступа в интернет до систем видеонаблюдения и автоматизации. Уровень их дохода напрямую зависит от целого ряда факторов, включая квалификацию, сложность выполняемых …
515

Сколько зарабатывает Техник-метролог в 2026 году

В 2026 году профессия техника-метролога остается востребованной во многих отраслях промышленности, где точность измерений является критически важным фактором. Эти специалисты отвечают за исправность, калибровку и поверку измерительного оборудования, обеспечивая соответствие продукции и технологических процессов установленным стандартам.Чем занимается техник-метрологКруг обязанностей техника-метролога широк и зависит от специфики предприятия. Основные задачи включают в …
449

Сколько зарабатывает техник-лаборант в 2026 году

В 2026 году профессия техника-лаборанта остается востребованной в самых разных отраслях: от медицины и науки до промышленности и сельского хозяйства. Этот специалист выполняет ключевую роль в проведении анализов, исследований и экспериментов, обеспечивая точность и достоверность результатов. От его внимательности и профессионализма напрямую зависит качество продукции, правильность постановки диагноза или успех …
595

Читайте также

Сколько зарабатывает Техник-конструктор в 2026 году

Техник-конструктор в 2026 году является важным специалистом в проектных и производственных организациях. Его работа заключается в создании чертежей, разработке трехмерных моделей и подготовке технической документации, на основе которой изготавливаются различные изделия, от отдельных деталей до сложных механизмов и конструкций.Доход техника-конструктора в 2026 годуУровень заработной платы техника-конструктора в 2026 году варьируется …
511

Зарплата техника-инженера в 2026 году: обзор доходов и факторов влияния

Профессия техника-инженера в 2026 году остается востребованной в различных отраслях экономики. Эти специалисты выполняют широкий круг задач, связанных с эксплуатацией, наладкой и ремонтом оборудования. Уровень их дохода не является фиксированной величиной и зависит от множества факторов, которые определяют ценность специалиста на рынке труда.Уровень дохода техника-инженера в 2026 годуВ 2026 году …
446

Сколько зарабатывает техник-геофизик в 2026 году

Профессия техника-геофизика в 2026 году остается востребованной в отраслях, связанных с разведкой и добычей полезных ископаемых, инженерными изысканиями и мониторингом окружающей среды. Уровень дохода этих специалистов напрямую зависит от множества факторов, включая квалификацию, опыт и условия труда.Доход техника-геофизика в 2026 годуЗаработная плата техника-геофизика в 2026 году демонстрирует широкий разброс. Как …
427