Фон компании

Reinforcement Learning Engineer/ RL еngineer

Зарплата не указана
Москва
Требуемый опыт: от 3 до 6 лет
График: 5/2, 1/3
О вакансии:

В Центре Робототехники Сбера мы строим антропоморфного робота общего назначения. Наш робот вышел из стадии первых демонстраций — и мы переходим к надёжной автономной работе в реальных задачах. Локомоция и управление всем телом (Whole Body Control) — основа этой работы: именно от них зависит, насколько устойчиво и предсказуемо робот движется в реальном мире.

Мы ищем инженера, который разрабатывает, обучает и доводит до робота RL-политики управления всем телом — от постановки задачи в симуляторе до стабильной работы контроллера на железе. Это роль для того, кто хочет видеть результат своих алгоритмов не в метриках на графике, а в том, как робот уверенно идёт, поворачивает и держит равновесие.

Наша команда действительно работает над уникальным проектом в России, а у Вас будет прямой доступ к железу, Вы будете видеть результат своей работы в физическом мире.

Ключевые технологии:

Python, PyTorch, RL (PPO/SAC), MuJoCo/Isaac Sim, ONNX, C++, ROS2.

Обязанности

  • разрабатывать, обучать и деплоить RL-политики локомоции и whole body control
  • подбирать observations, actions и типы моделей, которые дают максимальную производительность
  • находить и закрывать ключевые факторы в sim-to-real gap — добиваться, чтобы политика, обученная в симуляторе, работала на реальном роботе
  • определять, измерять и интерпретировать метрики качества обученных политик
  • доводить control stack до стабильной и предсказуемой работы в реальных условиях
  • настраивать reward-функции, domain randomization и curriculum под конкретные двигательные задачи
  • работать в связке с командами интеграции и middleware — доводить политику до надежного исполнения на железе.

Требования

  • уверенное владение Python; знание C++ как плюс для интеграции на робота
  • опыт применения RL-алгоритмов для робототехники или управления (PPO, SAC и подобные)
  • понимание динамики и управления, в идеале — шагающих роботов
  • опыт подбора гиперпараметров и cost/reward-функций для RL
  • знакомство с типовыми техниками RL: domain randomization, curriculum learning, reward shaping
  • опыт работы с симуляторами (MuJoCo, Isaac Sim или аналоги)
  • способность самостоятельно разбираться в незнакомых системах и находить корневые причины проблем
  • желание брать ответственность за то, что политика работает на роботе, а не только в симуляторе.

Будет плюсом:

  • опыт деплоя обученных политик на реальное железо
  • опыт с behavior cloning и дистилляцией политик
  • понимание основ теории управления, кинематики и динамики шагающих роботов
  • опыт работы с middleware робота (ROS2, DDS)
  • опыт использования GigaChat, Kandinsky и аналогов в продуктах, навыки создания и использования AI-агентов.

Условия

  • комфортный современный офис г. Москва, МЦК ЗИЛ, Автозаводская 23а к2
  • формат работы - офис
  • ежегодный пересмотр зарплаты, годовая премия
  • корпоративный спортзал и зоны отдыха
  • более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
  • программа адаптации и помощь руководителя на старте (для вакансий уровня Junior)
  • расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
  • гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
  • подписка Прайм с возможностью совместного использования на трёх близких
  • вознаграждение за рекомендацию друзей в команду Сбера.

О компании

avatar_sber
СБЕР
5958 отзывов

💚🚀 Хотите работать в компании, где каждый день создаются новые технологии и возможности? Добро пожаловать в Сбер! Здесь можно развиваться в своей профессии, осваивать новые направления, работать над масштабными задачами и строить карьеру вместе с сильной командой.

Сбер — место для развития

Мы создаём продукты и сервисы, которыми каждый день пользуются миллионы людей. Развиваем технологии, запускаем новые проекты и постоянно ищем решения, которые делают жизнь клиентов проще.

За большими продуктами стоят люди — разработчики, аналитики, менеджеры, специалисты по продажам, финансам, маркетингу, клиентскому сервису и десятки других профессиональных команд.

Поэтому в Сбере можно найти работу в самых разных направлениях. Неважно, начинаете вы карьеру или уже являетесь опытным специалистом, — у нас есть возможности для профессионального роста.

Работа в Сбере — это возможности

Мы хотим, чтобы каждый сотрудник мог развиваться и раскрывать свой потенциал. Поэтому большое внимание уделяем обучению, новым знаниям и профессиональному росту.

Вы можете углубляться в своей специальности, осваивать новые компетенции или пробовать себя в другом направлении. Развитие не ограничивается одной должностью — карьерный путь может меняться вместе с вашими интересами и целями.

Учитесь новому каждый день

Технологии и профессии постоянно меняются, поэтому учиться новому особенно важно. Мы создаём возможности для развития профессиональных и личных навыков, чтобы сотрудники могли уверенно справляться с современными задачами и двигаться дальше.

Внутри компании можно получать новые знания, обмениваться опытом с коллегами и развивать экспертизу на реальных проектах.

Работайте над задачами, которые имеют значение

В Сбере много разных команд и проектов. Здесь можно заниматься технологиями, создавать цифровые продукты, развивать клиентские сервисы, работать с данными, финансами, маркетингом, продажами и другими направлениями.

Каждая команда решает свои задачи, а общий результат складывается из работы людей с разной экспертизой.

Расти можно вместе с командой

Мы ценим инициативу, профессионализм и желание развиваться. Нам важно, чтобы сотрудники могли влиять на результат своей работы, предлагать идеи и брать на себя новые задачи.

С опытом появляются новые возможности: можно развиваться как эксперт, становиться руководителем или переходить в другое направление внутри компании.

Найдите работу в Сбере

Ищете первую работу? Хотите сменить профессию? Уже являетесь опытным специалистом и ищете масштабные проекты для развития? Посмотрите актуальные вакансии Сбера и выберите направление, которое подходит именно вам.

💚 Выбирайте профессию.
🚀 Развивайтесь.
✨ Создавайте новое вместе с нами.

Сбер — место, где есть возможности для роста и развития.

*Демонстрационный профиль — компания ещё не зарегистрирована