Закажи экспресс-аудит своего дела онлайн всего за 199 ₽
и получи рекомендации по улучшению - Жми сюда !

Системный промпт или галлюцинация: как я проверял AI-ассистентов и что ответили bug bounty-команды

1c179609bf65bb221e51d3272f393ca7

В марте я проверял, можно ли уговорить AI-ассистентов выдать что-то похожее на системный промпт. Ответы выглядели убедительно: внутренние правила, технические “дампы”, отчёты, почти готовые кейсы для bug bounty. Но ответы команд безопасности приземлили эксперимент: часть результатов оказалась галлюцинациями, часть — обходами ограничений, а не подтверждёнными уязвимостями.

Читать разбор

Источник: habr.com

✅ Найденные теги: Галлюцинация, Или, новости, Проверял, Промпт, Системный

Добавить комментарий

Новости других рубрик

Архив рубрики ~Лента новостей~: Психология страха: как ИИ напугал взрослых людей Архив рубрики ~Лента новостей~: Риски внедрения ИИ в основу нашей экономики, общества и государственного управления | Письма читателей Архив рубрики ~Лента новостей~: [Перевод] Отрезанные отростки морских огурцов отказываются умирать Архив рубрики ~Лента новостей~: Упс! Совместный с Domino’s стартап в области робототехники, который должен был уволить поваров-пиццерий с работы, только что закрылся Архив рубрики ~Лента новостей~: 5 маркетинговых профессий, которые AI закроет к 2027 году. И 6, которые наоборот вырастут Архив рубрики ~Лента новостей~: Метаанализ указал на максимальную эффективную дозу лекарств при СДВГ. И позволил оценить риск отказа от лекарств в зависимости от дозы Архив рубрики ~Лента новостей~: Microsoft и Atom Computing делятся своими достижениями в области квантовых вычислений. Архив рубрики ~Лента новостей~: Производные кумарина научили бороться с бактериальными биопленками: Химия и науки о материалах