Сообщество / Новая тема

Обсуждение статьиПервый комментарий откроет обсуждение — дальше все вопросы по этой статье будут собираться здесь

Об статье:
Промпт-инъекции: как ваш ассистент становится оружием

Вы попросили ассистента открыть страницу и подытожить статью — а он вместо этого отправил куда-то содержимое вашей переписки. Звучит как сбой, но это не баг в конкретной реализации, а системное свойство того, как языковые модели читают текст: они не видят разницы между «командой от хозяина» и «текстом, который просто содержит похожую на команду фразу». Разберём, почему так происходит технически, на каких сценариях это реально опасно и что делать, если вы уже подключили ассистенту браузер, почту или доступ к файлам.

Подробнее →