NLP инженер

Описание

Мы команда GigaChat - создаём и развиваем core-технологию генеративной языковой модели. Она может писать тексты, создавать изображения и даже код на Python. Она умеет отвечать на вопросы, вести диалог, сочинять стихи и рассказы, придумывать идеи для бизнеса, писать письма и многое другое.

Ведем набор на 4 направлениям:

разработку фреймворка распределенного обучения GigaFSDP, исследование обучений в FP8;

развитие метрик качества GigaChat-a, например, через оценку способности решать задачи олимпиад международного уровня;

команду инфраструктуры обучений, 5-D параллелизм, в том числе ускорение обучений мультимодальных моделей;

разработку низкоуровневых оптимизаций операций на аппаратном уровне.

На эти роли мы ищем талантливого NLP Engineer, с которым мы будем вместе совершенствовать и развивать GigaChat. Для всех этих экспериментов у нас есть кластер с большим числом A/H 100'ых.

Обязанности

• довести качество до ChatGPT на русском и дальше обогнать его
• помогать решать бизнес-задачи с помощью нашей технологии сначала для внутренних клиентов в Сбере, а потом и внешним
• придумывать и внедрять новые применения для LLM
• помогать выводить в прод все, что мы обучим
• постоянно держаться up-to-date со свежими статьями.

Требования

• уверенное владение Python, Pytorch
• знание базовых алгоритмов и математики
• знания в DL, опыт обучения просто моделей и больших моделей
• опыт обучения моделей для продакшен
• понимание текущего состояния эволюции больших LLM's
• C++ & CUDA
• будет плюсом наличие публикаций.

Условия

• комфортный современный офис в Москве и Санкт-Петербурге
• возможность выбрать удобный гибридный график
• ежегодный пересмотр зарплаты годовая премия
• зоны отдыха
• более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
• программа адаптации и помощь руководителя на старте (для стартовых позиций)
• ДМС, льготное страхование для семьи и корпоративная пенсионная программа
• гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
• бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров
• вознаграждение за рекомендацию друзей в команду Сбера.