алгоритмы
ИТ / Новости
ИИ технологии
12.8.2024

Эксперты рассказали, как пользователи манипулируют ИИ

Люди нашли механизмы, которые позволяют манипулировать нейросетями. Они размешают на сайтах специальные фразы, чтобы искусственный интеллект (ИИ) выполнил определенные действия.

Речь идет об использовании киберрисков (indirect prompt injection, непрямые инъекции затравки), которым подвержены любые LLM-модели, сообщили эксперты «Лаборатории Касперского».

«Люди могут размещать специальные фразы — инъекции на своих сайтах и в опубликованных в сети документах, чтобы нейросети выдавали другим пользователям ответ, учитывающий цели интересантов», – рассказали в «Лаборатории Касперского».

Такие уловки используются не только в чат-ботах, но и в поисковых системах. ИИ помогает резюмировать результаты по запросу пользователя.

Например, соискатель может использовать эти механизмы для продвижения своего резюме среди других анкет. Также используется в рекламе товаров и услуг, чтобы умные алгоритмы выдавали более положительные оценки о конкретных продуктах, пояснили эксперты компании.

Изображение: Adobe Stock

Еще по теме

Как правильно выбрать информационную систему и изменить работу медучреждения

Почему сейчас лучший момент для совершенствования сервисной поддержки дата-центров

Как крупный бизнес диктует собственные правила в технологическом секторе

Как собрать в одном доступе цифровые медицинские ИТ-помощники

Что нужно знать техлиду при запуске проектов на основе искусственного интеллекта

В каких отраслях промышленности искусственный интеллект находит применение

Как региональные фестивали стали источниками кадров для столичных компаний

Грозит ли сбой, аналогичный инциденту с Microsoft, критической инфраструктуре РФ

Стоит ли ожидать дефицита качественной информации для обучения ИИ-моделей

За счет чего российская цифровая техника будет востребована за рубежом

Как изменились подходы и скорость цифровизации за последние 20 лет

Почему будущих специалистов по информбезопасности разбирают еще со школы

Новые схемы интернет-мошенников и как им противостоять

Почему буксует импортозамещение электронных компонентов

Почему рынок коммерческих дата-центров нуждается в регулировании