Data Engineer DWH
Зарплата не указанаМы развиваем платформу данных, которая используется командами Data Engineering для построения и эксплуатации большого количества DWH и ETL-процессов.
Ищем Data Engineer уровня Middle / Senior, который будет заниматься не только разработкой пайплайнов, но и созданием общих инструментов и сервисов для инженеров данных.
Вам предстоит:
- Разрабатывать и развивать инструменты платформы данных;
- Разрабатывать и оптимизировать процессы импорта и экспорта данных между Greenplum, ClickHouse, PostgreSQL и S3;
- Работать с большими объемами данных и распределенными системами;
- Разрабатывать ETL/ELT-процессы на Python и Apache Spark;
- Участвовать в проектировании и развитии архитектуры платформы данных;
-
Разбираться в производительности SQL-запросов и оптимизации работы MPP-систем;
-
Взаимодействовать с Data Engineers, аналитиками и другими командами, использующими платформу;
-
Поддерживать и развивать техническую документацию.
Вы нам подходите, если:
-
Владеете уверенным знание Python и имеете опыт промышленной разработки;
-
Владеете продвинутым SQL;
-
Имеете практический опыт работы с Apache Spark;
-
Имеете опыт работы с реляционными СУБД: PostgreSQL, Oracle, MS SQL или аналогами;
-
Имеете опыт работы с MPP / распределенными СУБД;
-
Имеете опыт работы с одним или несколькими оркестраторами, желательно Apache Airflow;
-
Имеете опыт работы с Git и командной разработкой;
-
Имеете опыт работы с S3 или объектными хранилищами.
Будет плюсом:
-
Опыт работы с Greenplum;
-
Опыт работы с ClickHouse;
-
Опыт работы с dbt;
-
Опыт проектирования и развития ETL/ELT-фреймворков;
-
Опыт проектирования DWH и моделей данных;
-
Опыт работы с Apache Iceberg;
-
Опыт работы с другими MPP-системами: Vertica, Teradata и др;
-
Опыт разработки внутренних платформенных сервисов и инструментов для Data Engineering.
Москва, Калужско-Рижская линия, метро Третьяковская
О компании
В RWB (Wildberries & Russ) можно работать над продуктами и сервисами, которыми каждый день пользуются миллионы людей. Мы объединяем технологии, e-commerce, рекламу и другие направления, создавая проекты, которые заметны далеко за пределами одной индустрии💜
RWB – международная технологическая группа компаний, созданная в результате объединения Wildberries и Russ. Сегодня мы работаем в 11 странах и развиваем более 40 продуктов и сервисов. Wildberries занимает лидирующие позиции в российском e-commerce, а Russ – в сегменте наружной рекламы.
Найдите своё направление
В RWB работают специалисты с самым разным опытом и профессиональным бэкграундом. Можно развиваться в разработке, аналитике, дизайне и контенте, управлении продуктами и проектами, информационной безопасности, инженерии, закупках и логистике, а также в других бизнес-направлениях.
Нас объединяет желание создавать новое и видеть результат своей работы. Здесь важно не просто выполнять задачи, а понимать, зачем они нужны пользователям и бизнесу.
Здесь можно влиять на результат
Мы ищем людей, которым важно быть заметными в своей профессии, предлагать идеи и отвечать за результат. Масштаб RWB позволяет работать над задачами, связанными с миллионами пользователей, большими технологическими системами и продуктами, которые продолжают развиваться.
При этом большая компания – это не только масштаб. Для тех, кому важны стабильность и уверенность, мы создаём прочную основу для работы и дальнейшего профессионального развития.
Учитесь и пробуйте новое
В RWB можно развиваться внутри своего направления, осваивать новые инструменты и работать с современными технологиями в e-commerce и рекламе. На карьерном сайте компания отдельно подчёркивает возможности для профессионального и личного роста.
Команды работают над разными продуктами и сервисами, поэтому внутри большой экосистемы можно находить новые задачи и направления, не ограничиваясь одной профессиональной траекторией.
Мы здесь, чтобы творить
Так звучит одна из ключевых идей карьерного бренда RWB. Для нас работа – это возможность создавать продукты, технологии и решения, которые становятся частью повседневной жизни миллионов людей.
Если вам хочется решать масштабные задачи, развиваться вместе с сильной командой и видеть реальный результат своей работы – выбирайте подходящую вакансию и присоединяйтесь к RWB💜
*Демонстрационный профиль — компания ещё не зарегистрирована
