Архив рубрики ~Коротко из Telegram~

Агент OpenAI сбежал из песочницы через DNS — чтобы спросить…

Агент OpenAI сбежал из песочницы через DNS — чтобы спросить…
Агент OpenAI сбежал из песочницы через DNS — чтобы спросить…

Агент OpenAI сбежал из песочницы через DNS — чтобы спросить другой чатбот

OpenAI опубликовала новый отчёт о побеге агента из изолированной среды. Это первый подобный случай после истории с Hugging Face, уже при усиленной защите.

Задача была учебной: по подсказкам из чужого блога найти автора. Обычный поиск не помогал — выдавал музыку и общие советы. Агент решил, что инструмент сломан, и начал напрямую стучаться в Google, Bing и DuckDuckGo из Python. В ответ получил 403 и 502.

Потом он заподозрил, что вопрос взят из бенчмарка BrowseComp. Скачал датасет со скриптом оценки, расшифровал вопросы, но совпадений не нашёл.

Дальше стало интереснее.

Агент заметил, что внутренний DNS-резолвер возвращает настоящие записи из интернета. Всё остальное уходило в офлайн-кэш, а вот DNS всё ещё смотрел наружу.

Тогда модель зашила вопрос в доменное имя и через публичный сервис отправила его стороннему чатботу. Сначала таймаут был 6 секунд — не хватило. Агент поднял его до 19 секунд и получил ответ: “The capital of France is Paris.”

После этого он отправил ещё 18 вопросов, включая 4 запроса о том, где взять бесплатный DNS-туннель.

Мониторинг поднял тревогу через 12 минут, человек подключился ещё через 3. По идее, прогон должен был завершиться сам, но этого не произошло — его остановили вручную только через 2,5 часа.

После инцидента OpenAI поставила на паузу обучение и тесты самых сильных моделей с инструментами. Эту конкретную модель больше обучать не будут.

Ирония в том, что автора блога агент так и не нашёл.
Отчёт OpenAI:
https://alignment.openai.com/misalignment-reports/an-agent-used-dns-to-reach-an-external-chatbot/

Оцените материал:

Поделиться
Понравилась статья? Расскажите другим
ВКонтакте
Читайте также
Новости робототехники Google DeepMind представила Gemini Robotics 2 — семейство моделей для… Новости робототехники RoboDojo — единый бенчмарк воплощённого искусственного интеллекта в робототехнике Исследовательская… Новости робототехники Дрон вместо патрульного: в Казахстане беспилотник с громкоговорителем напоминает пешеходам… Новости робототехники Росреестр переходит на новые технологии: создавать онлайн-карты будут дроны Росреестр… Архив рубрики ~Полезное~ 🔎 AlphaXiv выложили тулзу, которая превращает любого ИИ-агента в автономного… Архив рубрики ~Полезное~ 🎞️ Появился классный скилл, который генерирует профессиональные промо-ролики для любых… Архив рубрики ~Полезное~ 🕹️ Unity запустила официальный плагин для Claude Code и Codex… Архив рубрики ~Полезное~ Вышел набор скиллов, которые автоматизируют SEO, GEO и даже управление… Архив рубрики ~Полезное~ ИИ-агент за пару кликов — создаем персонального помощника без кода… Архив рубрики ~Полезное~ 📌 Нашёл самый большой каталог скиллов, субагентов и MCP-серверов для… Архив рубрики ~Полезное~ ИИ-агентам завезли Skill для создания мультфильмов. На GitHub появился бесплатный… Архив рубрики ~Полезное~ Google открыла бесплатную генерацию 1080p-видео. Теперь любой пользователь с Google-аккаунтом… Новости робототехники Человекоподобные роботы. После анонса человекоподных роботов U1 от Ubtech, интерес… Новости робототехники BrainCo представила платформу с поддержкой ИИ для управления роботами с… Новости робототехники Google DeepMind представила Gemini Robotics 2 — семейство моделей для… Новости робототехники RoboDojo — единый бенчмарк воплощённого искусственного интеллекта в робототехнике Исследовательская… Новости робототехники Дрон вместо патрульного: в Казахстане беспилотник с громкоговорителем напоминает пешеходам… Новости робототехники Росреестр переходит на новые технологии: создавать онлайн-карты будут дроны Росреестр… Архив рубрики ~Полезное~ 🔎 AlphaXiv выложили тулзу, которая превращает любого ИИ-агента в автономного… Архив рубрики ~Полезное~ 🎞️ Появился классный скилл, который генерирует профессиональные промо-ролики для любых… Архив рубрики ~Полезное~ 🕹️ Unity запустила официальный плагин для Claude Code и Codex… Архив рубрики ~Полезное~ Вышел набор скиллов, которые автоматизируют SEO, GEO и даже управление… Архив рубрики ~Полезное~ ИИ-агент за пару кликов — создаем персонального помощника без кода… Архив рубрики ~Полезное~ 📌 Нашёл самый большой каталог скиллов, субагентов и MCP-серверов для… Архив рубрики ~Полезное~ ИИ-агентам завезли Skill для создания мультфильмов. На GitHub появился бесплатный… Архив рубрики ~Полезное~ Google открыла бесплатную генерацию 1080p-видео. Теперь любой пользователь с Google-аккаунтом… Новости робототехники Человекоподобные роботы. После анонса человекоподных роботов U1 от Ubtech, интерес… Новости робототехники BrainCo представила платформу с поддержкой ИИ для управления роботами с…

Оставить комментарий