Открытая лекция «Как измерять качество ChatGPT и других авторегрессионных языковых моделей?»

31 мая 2024

События образования

Приглашаем на открытую лекцию «Как измерять качество ChatGPT и других авторегрессионных языковых моделей?» магистратуры «Прикладное машинное обучение и большие данные» совместно со Школой анализа данных Яндекс.

С лекцией выступит Мария Тихонова, кандидат компьютерных наук, главный инженер по разработке в SberDevices, преподаватель факультета компьютерных наук НИУ ВШЭ и образовательной платформы OTUS.

Мария рассмотрит проблему определения того, что такое «хорошо» и что такое «плохо» в мире ChatGPT, Гигачата и других больших нейросетей типа Трансформер, способных понимать и порождать высказывания на естественном языке.

Вы узнаете, какие «способности» больших языковых моделей — от математики до этики и здравого смысла — необходимо оценивать, каким образом составляются контрольные задания для оценки и что является мерой качества выполнения этих заданий.

Также Мария расскажет о бенчмарке MERA, крупнейшем открытом проекте по автоматической оценке различных русскоязычных LLM, одним из ключевых разработчиков которого она является.

Лекция рассчитана на студентов различных курсов, выпускников и всех, кто интересуется темой искусственного интеллекта и больших языковых моделей.

Место проведения: аудитория 2328, Пирогова, 1, учебный корпус НГУ.

Дата и время проведения: 31 мая в 12:40. 

Для участия необходима регистрация.

Чтобы не пропускать анонсы будущих лекций, подписывайтесь на группу ВКонтакте магистратуры «Прикладное машинное обучение и большие данные». 

Теги: 

Дата создания: 25.05.2024 15:06:23