Tech Lead Data Lakehouse Engineer в Корпоративное хранилище
Зарплата не указана-
Проектировать и развивать Data Lakehouse платформу;
-
Разрабатывать ETL/ELT пайплайны на базе Spark, DBT и Trino;
-
Работать с объектным хранилищем S3 и организовывать эффективную работу с данными в Data Lake;
-
Строить наблюдаемость платформы: метрики, дашборды и алертинг на базе Prometheus, VictoriaMetrics и Grafana;
-
Управлять инфраструктурой и конфигурацией платформы через GitOps (ArgoCD, Helm);
-
Взаимодействовать с продуктовой командой, понимать потребности пользователей платформы и развивать DLH как внутренний продукт.
Формат работы - гибридный по договоренности с руководителем.
Вы нам подходите, если:- Имеете практический опыт построения Data Lakehouse платформ или крупных Data Platform решений;
-
Обладаете опытом проектирования DLH с нуля;
- Имеете глубокое понимание архитектуры Spark: execution model, partitioning, memory management, shuffle, оптимизация запросов;
- Хорошо понимаете принципы работы форматов данных и таблиц в Data Lake (Iceberg/Parquet и аналогичных технологий);
-
У вас есть опыт работы с Trino и понимание принципов распределенного выполнения запросов;
-
Обладаете опытом работы с Airflow и построения сложных data workflows, разработки кастомных операторов, сенсоров, хуков и плагинов.
О компании
В RWB (Wildberries & Russ) можно работать над продуктами и сервисами, которыми каждый день пользуются миллионы людей. Мы объединяем технологии, e-commerce, рекламу и другие направления, создавая проекты, которые заметны далеко за пределами одной индустрии💜
RWB – международная технологическая группа компаний, созданная в результате объединения Wildberries и Russ. Сегодня мы работаем в 11 странах и развиваем более 40 продуктов и сервисов. Wildberries занимает лидирующие позиции в российском e-commerce, а Russ – в сегменте наружной рекламы.
Найдите своё направление
В RWB работают специалисты с самым разным опытом и профессиональным бэкграундом. Можно развиваться в разработке, аналитике, дизайне и контенте, управлении продуктами и проектами, информационной безопасности, инженерии, закупках и логистике, а также в других бизнес-направлениях.
Нас объединяет желание создавать новое и видеть результат своей работы. Здесь важно не просто выполнять задачи, а понимать, зачем они нужны пользователям и бизнесу.
Здесь можно влиять на результат
Мы ищем людей, которым важно быть заметными в своей профессии, предлагать идеи и отвечать за результат. Масштаб RWB позволяет работать над задачами, связанными с миллионами пользователей, большими технологическими системами и продуктами, которые продолжают развиваться.
При этом большая компания – это не только масштаб. Для тех, кому важны стабильность и уверенность, мы создаём прочную основу для работы и дальнейшего профессионального развития.
Учитесь и пробуйте новое
В RWB можно развиваться внутри своего направления, осваивать новые инструменты и работать с современными технологиями в e-commerce и рекламе. На карьерном сайте компания отдельно подчёркивает возможности для профессионального и личного роста.
Команды работают над разными продуктами и сервисами, поэтому внутри большой экосистемы можно находить новые задачи и направления, не ограничиваясь одной профессиональной траекторией.
Мы здесь, чтобы творить
Так звучит одна из ключевых идей карьерного бренда RWB. Для нас работа – это возможность создавать продукты, технологии и решения, которые становятся частью повседневной жизни миллионов людей.
Если вам хочется решать масштабные задачи, развиваться вместе с сильной командой и видеть реальный результат своей работы – выбирайте подходящую вакансию и присоединяйтесь к RWB💜
*Демонстрационный профиль — компания ещё не зарегистрирована
