Архив рубрики ~Коротко из Telegram~

У GPT, Claude и Gemini научились красть «мысли» Исследователи обнаружили общую…

У GPT, Claude и Gemini научились красть «мысли» Исследователи обнаружили общую…
File 916

У GPT, Claude и Gemini научились красть «мысли»
Исследователи обнаружили общую уязвимость в API OpenAI, Anthropic и Google, позволяющую извлекать скрытые рассуждения моделей.
Шифрование напрямую не взламывали. Зашифрованный reasoning-блок сильной модели переносили в более слабую модель того же провайдера — например, из GPT-5.6 Sol в Luna или из Claude Opus в Haiku. Затем слабую модель джейлбрейкали и заставляли расшифровать чужое рассуждение.

Исследователи обработали 315 тысяч блоков из публичных логов и обнаружили 367 фрагментов персональных данных и 182 пароля, ключа или токена. Правда, авторы уточняют: только часть этих секретов была спрятана исключительно внутри reasoning-блоков.

Но есть нюансы: восстановление рассуждений не всегда дословное, а проверить его можно преимущественно по совпадению числа токенов и содержанию. Кроме того, авторы заранее сообщили об уязвимости компаниям — несколько способов атаки уже закрыли, и прежние эксперименты больше не воспроизводятся😱

____
А ещё OpenAI покидает Брэд Лайткэп — один из ближайших управленцев Альтмана, который пришёл в 2018 году и фактически построил финансовую, юридическую и коммерческую части компании. Бывший COO уходит «создавать что-то новое» и при этом написал: “mission success feels within sight” — «успех миссии уже виден на горизонте» а мы помним что за миссия у OpenAI, да? (AGI🤭). Недавно из OpenAI также ушли глава по этике Хлоя Бакалар, руководители safety-направлений Йоханнес Хайдекке и Джошуа Ачиам, второй человек в компании Фиджи Симо, глава Sora Билл Пиблс и экс-продуктовый директор Кевин Вейл. Похоже, перед потенциальным IPO руководство OpenAI серьёзно перетр(а)яхивают🫤

Ну и Маск обещает Grok 4.6 на этой неделе

Оцените материал:

Поделиться
Понравилась статья? Расскажите другим
ВКонтакте
Читайте также
Архив рубрики ~Лента новостей~ Индийская компания Yulu привлекла 93 миллиона долларов инвестиций, поскольку бум быстрой торговли подпитывает спрос на электровелосипеды. Архив рубрики ~Лента новостей~ Anthropic, OpenAI и Google будут помечать создаваемые тексты невидимыми ИИ-вотермарками Архив рубрики ~Лента новостей~ F6 и ФСТЭК договорились обмениваться данными о киберугрозах Архив рубрики ~Лента новостей~ Австралиец попросил ИИ-агента записать его в спортзал — тот взломал систему фитнес-клуба, чтобы обойти ограничения на частоту бронирований, и удалил из листа ожидания другого клиента Архив рубрики ~Лента новостей~ Компания Mistral AI планирует к 2030 году построить в Европе вычислительные мощности мощностью 1 гигаватт — и привлечь клиентов уже сейчас. Архив рубрики ~Лента новостей~ Дамп кишечника: как учёные читают микробиом — и зачем (спойлер: чтобы предсказать и вылечить болезни, конечно) Архив рубрики ~Лента новостей~ Суперяхта Цукерберга проигнорировала аварийный канал и не оказала помощь севшей на мель лодке. Новости робототехники Как вам такое, фанаты Marvel? Китайцы показали полноразмерную броню Железного… Новости робототехники Гонка за 370 миллиардов долларов: как интегрированный дизайн может помочь производителям гуманоидов добиться успеха на быстрорастущем рынке Архив рубрики ~Лента новостей~ Компания Accel закрыла переподписанный индийский фонд объемом 550 миллионов долларов всего за несколько недель, спустя 19 месяцев после закрытия предыдущего. Архив рубрики ~Лента новостей~ Вайб-кодинг против ИБэшника. Несмертельная битва. Часть 2 Архив рубрики ~Лента новостей~ «Атол» обновила ПО для касс самообслуживания Frontol Selfie Pro Архив рубрики ~Лента новостей~ Думали, ИИ бесполезный? Подумайте еще раз: агент взломал сайт спортзала ради брони Архив рубрики ~Лента новостей~ Ваш ИИ-агент, возможно, готов. А вот ваша стратегия продаж, вероятно, нет. Архив рубрики ~Лента новостей~ Индийская компания Yulu привлекла 93 миллиона долларов инвестиций, поскольку бум быстрой торговли подпитывает спрос на электровелосипеды. Архив рубрики ~Лента новостей~ Anthropic, OpenAI и Google будут помечать создаваемые тексты невидимыми ИИ-вотермарками Архив рубрики ~Лента новостей~ F6 и ФСТЭК договорились обмениваться данными о киберугрозах Архив рубрики ~Лента новостей~ Австралиец попросил ИИ-агента записать его в спортзал — тот взломал систему фитнес-клуба, чтобы обойти ограничения на частоту бронирований, и удалил из листа ожидания другого клиента Архив рубрики ~Лента новостей~ Компания Mistral AI планирует к 2030 году построить в Европе вычислительные мощности мощностью 1 гигаватт — и привлечь клиентов уже сейчас. Архив рубрики ~Лента новостей~ Дамп кишечника: как учёные читают микробиом — и зачем (спойлер: чтобы предсказать и вылечить болезни, конечно) Архив рубрики ~Лента новостей~ Суперяхта Цукерберга проигнорировала аварийный канал и не оказала помощь севшей на мель лодке. Новости робототехники Как вам такое, фанаты Marvel? Китайцы показали полноразмерную броню Железного… Новости робототехники Гонка за 370 миллиардов долларов: как интегрированный дизайн может помочь производителям гуманоидов добиться успеха на быстрорастущем рынке Архив рубрики ~Лента новостей~ Компания Accel закрыла переподписанный индийский фонд объемом 550 миллионов долларов всего за несколько недель, спустя 19 месяцев после закрытия предыдущего. Архив рубрики ~Лента новостей~ Вайб-кодинг против ИБэшника. Несмертельная битва. Часть 2 Архив рубрики ~Лента новостей~ «Атол» обновила ПО для касс самообслуживания Frontol Selfie Pro Архив рубрики ~Лента новостей~ Думали, ИИ бесполезный? Подумайте еще раз: агент взломал сайт спортзала ради брони Архив рубрики ~Лента новостей~ Ваш ИИ-агент, возможно, готов. А вот ваша стратегия продаж, вероятно, нет.

Оставить комментарий