Архив рубрики ~Коротко из Telegram~

OWASP взялась за защиту памяти ИИ-агентов от отравления данными Организация…

OWASP взялась за защиту памяти ИИ-агентов от отравления данными Организация…
File 1140

OWASP взялась за защиту памяти ИИ-агентов от отравления данными

Организация OWASP, известная своими стандартами веб-безопасности, представила подход к защите долгосрочной памяти ИИ-агентов. Проблема, на которую он нацелен, пока мало обсуждается за пределами узкого круга разработчиков, но выглядит серьёзно.

Суть уязвимости: современные агенты сохраняют информацию между сессиями. Если злоумышленник сумеет подсунуть в память вредоносную инструкцию, она закрепится там надолго и будет влиять на поведение агента при каждом следующем запуске — уже без каких-либо новых атак. Разовая инъекция превращается в постоянный бэкдор.

В качестве примера реализации приводится Agent Memory Guard от Dealer.Ai. Инструмент отслеживает попытки prompt injection, утечки секретов и незаметную подмену ключей внутри памяти агента. Важная деталь: он работает как локальный защитный слой и не обращается к внешним API, то есть сам не становится дополнительным каналом утечки.

По мере того как агенты получают доступ к почте, файлам и корпоративным системам, цена такой уязвимости растёт очень быстро.

Оцените материал:

Поделиться
Понравилась статья? Расскажите другим
ВКонтакте
Читайте также
Архив рубрики ~Лента новостей~ Компания Khosla Ventures открывает офис в Нью-Йорке этой осенью — свой первый филиал за пределами Сэнд-Хилл-Роуд. Архив рубрики ~Лента новостей~ «Сбер» представил «рассуждающую» модель GigaChat 3.5 Reasoning с открытыми весами Архив рубрики ~Полезное~ Как скачать треки из SUNO без лимитов Suno недавно… Архив рубрики ~Лента новостей~ GPT-6 Astra «заработала» в три раза больше Fable 5.1 в тесте с торговым автоматом — в среднем более $15 тысяч Архив рубрики ~Обо всем~ Единая наука. Часть 2: Объекты, паттерны и абстракции Архив рубрики ~Обо всем~ Что нового на Peacock в сентябре 2026 года? Новые сезоны сериалов «Предатели», «Газета», премия «Эмми» и многое другое. Новости робототехники Компания Mecka AI приблизилась к оценке в 500 миллионов долларов в рамках сделки, инициированной Sequoia, на фоне ажиотажа вокруг данных для обучения роботов. Архив рубрики ~Идей копилка~ Как заработать на «разметке технических заданий» через ИИ. Архив рубрики ~Лента новостей~ [Перевод] ООН проголосовала за новую карту мира, показывающую истинный масштаб Африки Новости робототехники Превосходство Китая в области беспилотных летательных аппаратов проявилось в эвакуации тел и продовольствия по воздуху после наводнения в Непале. Архив рубрики ~Лента новостей~ iPhone Duo против Pixel 11 Pro Fold: противостояние двух прочных складных смартфонов. Архив рубрики ~Обо всем~ Гарри Тан из Y Combinator хочет, чтобы американские лаборатории искусственного интеллекта с открытым доступом также «упрощали» передовые модели. Архив рубрики ~Лента новостей~ Быстрое масштабирование онлайн-хранилища для обслуживания более 1 миллиарда пользователей ChatGPT | OpenAI Архив рубрики ~Лента новостей~ Пост на 3,6 млн просмотров разобрал тарифы Claude. Там всё хуже, чем казалось Архив рубрики ~Лента новостей~ Компания Khosla Ventures открывает офис в Нью-Йорке этой осенью — свой первый филиал за пределами Сэнд-Хилл-Роуд. Архив рубрики ~Лента новостей~ «Сбер» представил «рассуждающую» модель GigaChat 3.5 Reasoning с открытыми весами Архив рубрики ~Полезное~ Как скачать треки из SUNO без лимитов Suno недавно… Архив рубрики ~Лента новостей~ GPT-6 Astra «заработала» в три раза больше Fable 5.1 в тесте с торговым автоматом — в среднем более $15 тысяч Архив рубрики ~Обо всем~ Единая наука. Часть 2: Объекты, паттерны и абстракции Архив рубрики ~Обо всем~ Что нового на Peacock в сентябре 2026 года? Новые сезоны сериалов «Предатели», «Газета», премия «Эмми» и многое другое. Новости робототехники Компания Mecka AI приблизилась к оценке в 500 миллионов долларов в рамках сделки, инициированной Sequoia, на фоне ажиотажа вокруг данных для обучения роботов. Архив рубрики ~Идей копилка~ Как заработать на «разметке технических заданий» через ИИ. Архив рубрики ~Лента новостей~ [Перевод] ООН проголосовала за новую карту мира, показывающую истинный масштаб Африки Новости робототехники Превосходство Китая в области беспилотных летательных аппаратов проявилось в эвакуации тел и продовольствия по воздуху после наводнения в Непале. Архив рубрики ~Лента новостей~ iPhone Duo против Pixel 11 Pro Fold: противостояние двух прочных складных смартфонов. Архив рубрики ~Обо всем~ Гарри Тан из Y Combinator хочет, чтобы американские лаборатории искусственного интеллекта с открытым доступом также «упрощали» передовые модели. Архив рубрики ~Лента новостей~ Быстрое масштабирование онлайн-хранилища для обслуживания более 1 миллиарда пользователей ChatGPT | OpenAI Архив рубрики ~Лента новостей~ Пост на 3,6 млн просмотров разобрал тарифы Claude. Там всё хуже, чем казалось

Оставить комментарий