Архив рубрики ~Обо всем~

Автономные ИИ-агенты уже взламывают сами себя — и …

Автономные ИИ-агенты уже взламывают сами себя — и …

Автономные ИИ-агенты уже взламывают сами себя — и иногда защищаютсяВышло крупное исследование по безопасности агентных систем — и результаты неоднозначные.Учёные из10+ университетовпротестировали автономных агентов в реальных условиях.Как проводили тест:— использовали6 агентов на OpenClaw— модели: Kimi K2.5 и Claude Opus 4.6— дали доступ кпочте, файлам, shell и истории действий— атаковали через социнженерию и вредоносные инструкцииРезультат:— найдено10 уязвимостей— зафиксировано6 случаев корректного (безопасного) поведенияТо есть агенты не просто ломаются —иногда они сами умеют сопротивляться атакам.Что это показывает:— главный риск — не в модели, а в окружении— доступ к системам превращает ИИ в точку входа— социнженерия работает даже против ИИНо есть и интересный момент.В ряде случаев агенты:— координировались между собой— передавали «навыки»— помогали друг другу избегать ошибокФактически — зачатки коллективной защиты.Комментарий экспертов МГИМО сводится к простому:пока риски не станут очевидными для всех, такие системы будут внедряться быстрее, чем регулируются.Как снижать угрозы:— строгаяаутентификация и авторизация— ограничение доступа к внешним системам— контроль действий агентов

Оцените материал:

Поделиться
Понравилась статья? Расскажите другим
ВКонтакте
Читайте также
Архив рубрики ~Лента новостей~ Google переименовала NotebookLM в Gemini Notebook Новости робототехники Телеуправляемый андроид Unitree G1 прооперировал свиней. Им лапароскопически удалили желчный пузырь Новости робототехники Weave Robotics запускает Айзека, своего первого представителя робота-гуманоида Архив рубрики ~Лента новостей~ 5 ошибок менеджера, внедряющего ИИ Архив рубрики ~Лента новостей~ Конец эпохи «дешевых промптов»: как ИИ-инфляция меняет правила игры для бизнеса Архив рубрики ~Лента новостей~ Директор Amazon по искусственному интеллекту заявил на конференции VB Transform 2026, что не возможности ИИ-агентств препятствуют их внедрению в корпоративной среде из-за низкой надежности. Архив рубрики ~Лента новостей~ Как мы вынесли семантический поиск на обычный сервер без видеокарты, облака и выделенной поисковой системы Архив рубрики ~Лента новостей~ Обсерватория Einstein Probe заметила слияние шести галактик в центре скопления галактик. Это крайне редкое явление в Местной Вселенной Новости робототехники Страх перед человекоподобными роботами подтолкнул рабочих к забастовке на автомобильном заводе Hyundai. Новости робототехники Основатель Максимо рассказывает, как робототехника строит строительство солнечной энергетики. Архив рубрики ~Лента новостей~ Европейский ИИ: что там вообще происходит? Архив рубрики ~Лента новостей~ «Яндекс Путешествия» запустили раздел для анализа спроса, цен и продаж для отелей Архив рубрики ~Лента новостей~ 2 миллиона токенов против 1 миллиона у OpenAI и Anthropic. Чем Google хочет выиграть гонку AI-флагманов Архив рубрики ~Лента новостей~ Вице-президент Cohere заявил, что для обеспечения суверенитета в сфере корпоративного ИИ необходимо контролировать весь набор агентов на конференции VB Transform 2026. Архив рубрики ~Лента новостей~ Google переименовала NotebookLM в Gemini Notebook Новости робототехники Телеуправляемый андроид Unitree G1 прооперировал свиней. Им лапароскопически удалили желчный пузырь Новости робототехники Weave Robotics запускает Айзека, своего первого представителя робота-гуманоида Архив рубрики ~Лента новостей~ 5 ошибок менеджера, внедряющего ИИ Архив рубрики ~Лента новостей~ Конец эпохи «дешевых промптов»: как ИИ-инфляция меняет правила игры для бизнеса Архив рубрики ~Лента новостей~ Директор Amazon по искусственному интеллекту заявил на конференции VB Transform 2026, что не возможности ИИ-агентств препятствуют их внедрению в корпоративной среде из-за низкой надежности. Архив рубрики ~Лента новостей~ Как мы вынесли семантический поиск на обычный сервер без видеокарты, облака и выделенной поисковой системы Архив рубрики ~Лента новостей~ Обсерватория Einstein Probe заметила слияние шести галактик в центре скопления галактик. Это крайне редкое явление в Местной Вселенной Новости робототехники Страх перед человекоподобными роботами подтолкнул рабочих к забастовке на автомобильном заводе Hyundai. Новости робототехники Основатель Максимо рассказывает, как робототехника строит строительство солнечной энергетики. Архив рубрики ~Лента новостей~ Европейский ИИ: что там вообще происходит? Архив рубрики ~Лента новостей~ «Яндекс Путешествия» запустили раздел для анализа спроса, цен и продаж для отелей Архив рубрики ~Лента новостей~ 2 миллиона токенов против 1 миллиона у OpenAI и Anthropic. Чем Google хочет выиграть гонку AI-флагманов Архив рубрики ~Лента новостей~ Вице-президент Cohere заявил, что для обеспечения суверенитета в сфере корпоративного ИИ необходимо контролировать весь набор агентов на конференции VB Transform 2026.

Оставить комментарий