Data Engineer
Зарплата не указана
Мы ищем талантливого Data Engineer, который готов столкнуться с непростыми задачами в области хранения и обработки больших данных в масштабах петабайт! У вас будет уникальная возможность поучаствовать в развитии платформы данных для работы с телеметрией автономного транспорта Москвы - трамваев и метро, в том числе: в разработке архитектуры DWH, подключении новых сервисов, повышении производительности и стабильности работы платфонмы.
Почему стоит рассмотреть это предложение? Инновационный проект - Уникальная возможность повлиять на будущее системы общественного транспорта и развивать ИТ. Современные технологии - Мы используем современные стеки, такие как Python, Trino и Spark, что позволит вам развиваться в своей профессиональной сфере. Динамичная команда - Вы будете работать в команде экспертов, которая ценит инновации и сотрудничество.
Что предстоит делать:
- Превращать телеметрию автономного транспорта в данные, удобные для анализа: разрабатывать и запускать Spark-пайплайны, продумывать преобразования и проверки качества
- Подключать новые источники данных: разрабатывать интеграции с различными системами и обеспечивать надёжную загрузку данных в хранилище
- Развивать архитектуру Data Lake / DWH
- Вместе с командой формировать общие подходы к разработке, мониторингу и сопровождению пайплайнов
Что ожидаем:
- Практический опыт разработки и сопровождения пайплайнов данных
- Опыт работы с PySpark, Python и SQL
- Опыт работы с Data Lake / DWH и понимание принципов построения ETL/ELT-процессов
- Понимание принципов распределённой обработки данных
Будет плюсом:
- Опыт работы с Trino+S3
- Опыт оркестрации пайплайнов с помощью Airflow
- Знакомство с Data Vault 2.0
- Знание Scala и опыт её использования для обработки данных
- Опыт развития платформы данных на ранних этапах: от выбора решений до их внедрения и сопровождения
Условия:
-
Трудоустройство и работа в соответствии с ТК РФ
-
Компенсация проезда в пригородных электропоездах
-
Льготы на отдых в оздоровительном комплексе метрополитена
-
Детский оздоровительный лагерь и детский клуб
-
Финансовые условия обсуждаем индивидуально в зависимости от опыта кандидата
Москва, улица Ивана Франко, 14
О компании
Каждый день мы обеспечиваем движение московского метро и комфорт миллионов пассажиров. В Московском метрополитене работают более 65 000 человек, представляющих свыше 200 профессий. 🚇 Здесь нужны не только машинисты и сотрудники станций, но и инженеры, IT-специалисты, механики, электромонтёры, аналитики и специалисты офисных подразделений.
Более 200 профессий
В наших командах работают машинисты электропоездов, дежурные по станциям, электромонтёры и электромеханики, специалисты по обслуживанию пути и подвижного состава. В электродепо нужны слесари, операторы и специалисты по ремонту вагонов.
Есть и современные технологические направления: разработка, анализ данных, тестирование, информационные системы и цифровые сервисы. Также открыты вакансии в финансах, HR, документообороте, управлении и других офисных функциях. 💻
Можно начать с обучения
Большинство вакансий не требует опыта или специального образования. Для новых сотрудников работает система профессионального обучения: в Корпоративном университете Московского транспорта можно бесплатно освоить необходимую профессию, а на период обучения предусмотрена стипендия. 🎓
Для специалистов, которые уже имеют профессию, доступны программы развития и конкурсы профессионального мастерства. Средний стаж работы сотрудника Московского метрополитена составляет 10 лет.
Условия и преимущества
Мы предлагаем официальное трудоустройство, стабильный доход и социальные гарантии. В зависимости от должности доступны увеличенный отпуск, премии и индексация, бесплатное питание, корпоративный спорт и другие программы поддержки.
Сотрудники могут бесплатно пользоваться метро и МЦК, а также пригородными поездами. Для отдельных профессий предусмотрены дополнительные льготы и компенсации. 🏠
Работа есть на станциях, в электродепо, технических службах и офисных подразделениях Москвы. Можно выбрать профессию, соответствующую вашему опыту, или получить новую специальность с обучением на старте.
*Демонстрационный профиль — компания ещё не зарегистрирована
