По словам исследователя AI Михаила Бурцева, большие языковые модели (LLM) не являются самостоятельными субъектами, хотя их ответы порой выглядят осмысленными и целенаправленными. Об этом он рассказал в материале «ПостНауки».

Механизм работы модели проще, чем кажется: она предсказывает следующее слово. Собственных намерений у неё нет, а то, что мы принимаем за целенаправленное поведение, задаётся обучением и контекстом. Люди настраивают модель так, чтобы одни ответы появлялись чаще, другие — реже, а сами ответы были полезны для решения задач.

Если модель начинает выдавать что-то вредное, её можно переобучить, ограничить или просто отключить. Подробнее о том, что умеют и чего не умеют современные LLM, Бурцев объясняет в лонгриде «ПостНауки».

Источник: Telegram: ПостНаука

Понравился материал?
Подписывайтесь — так вы не пропустите новые.
RSS-лента

Комментарии 6

Будьте вежливы — это делает обсуждение лучше
A
alex88
Вопрос на самом деле в том, как часто мы приписываем намерения просто потому, что ответ звучит связно. Опаснее иллюзия, чем сама модель.
О
Олег
По сути это очень умный автокомплит. Полезный инструмент, но не собеседник и уж точно не «сознание».
DP
dmitry_p
а как же эмерджентные свойства? неужели всё сводится к предсказанию токена?
МС
Марина Соколова
Согласна, что модель не субъект, но когда она строит планы на несколько шагов вперёд — это же всё равно следствие обучения, а не намерение?
Р
РедакцияРедакция
Марина, именно так: модель не «планирует» в человеческом смысле, а воспроизводит статистические закономерности из обучающих данных и контекста.
ИК
Ирина К.
Наконец-то кто-то это сказал простыми словами. А то у знакомых уже доходит до того, что они советуются с чатом по жизненным вопросам.