Архив рубрики ~Коротко из Telegram~

Миф о роли эксперта: новую кнопку нашли, а чуда нет…

Миф о роли эксперта: новую кнопку нашли, а чуда нет…

Миф о роли эксперта: новую кнопку нашли, а чуда нет

Ты когда нибудь надеялся, что правильная инструкция сделает модель всемогущей? Пенсильванский университет решил проверить этот трюк честно и спокойно.

Как тестировали

— Шесть моделей: GPT-4o, GPT-4o-mini, o3-mini, o4-mini, Gemini 2.0 Flash, Gemini 2.5 Flash
— Сложные вопросы аспирантского уровня по физике, химии, праву и другим дисциплинам
— Три сценария:
— Эксперт в теме
— Эксперт не в теме
— Тотальный новичок

Что получилось

— Роль эксперта почти не повышает точность ответов
— Эксперт не по теме может даже ухудшить результат
— Запрос стать ребенком стабильно дает худшие ответы
— Gemini иногда отказывается отвечать, если "переживает" нехватку экспертизы

Главный вывод

— Назначение роли меняет тон и стиль, но не добавляет знаний
— Полагаться на "Будь профессором квантовой физики" бессмысленно при решении сложных задач
— Для качества ответа важнее ясный вопрос и правильные данные, а не титулы в промпте

Железка умнее от ролевых игр не становится. Она уже знает ровно столько, сколько знает.

Если ты все еще ищешь волшебный способ повысить точность, начни с формулировки вопроса. Четкость и контекст работают лучше любых регалий.

Сюрреалистичный портрет с закрытыми глазами и черными дымчатыми текстурами на светлом фоне.

Оцените материал:

Поделиться
Понравилась статья? Расскажите другим
ВКонтакте
Читайте также
Архив рубрики ~Лента новостей~ Похоже, Starlink снова работает в Украине в обычном режиме. Архив рубрики ~Лента новостей~ Как сделать музыкальный клип c песней на русском в ChatGPT или Claude без навыков монтажа и опыта написания промптов: от идеи до готового видео + Skill Архив рубрики ~Лента новостей~ Как помочь AI не терять контекст при длительной работе над проектом Архив рубрики ~Лента новостей~ На Огненной Земле нашли обломки старинного корабля. Возможно, останки связаны с крушением 1873 года Архив рубрики ~Лента новостей~ Искусственный интеллект потребляет столько же энергии, сколько Исландия, но учёные не беспокоятся. Новости робототехники Приводимый в движение мышечными клетками, тончайший, как бумага, робот плывет по водному лабиринту. Архив рубрики ~Лента новостей~ Кладбище ИИ: постоянно пополняющийся список проектов и стартапов, которым не суждено было сбыться. Архив рубрики ~Лента новостей~ ИИ продаёт против человека: неделя 0 Архив рубрики ~Лента новостей~ Чек‑лист по хранению ключей в репозиториях на основе инцидентов с ИИ‑агентами Архив рубрики ~Лента новостей~ Робот с искусственным интеллектом учится более эффективно собирать помидоры. Архив рубрики ~Лента новостей~ Материал, напоминающий «роботизированную руку» венериной мухоловки, способен распознавать объекты и захватывать их под воздействием света. Архив рубрики ~Лента новостей~ Стартапам не нужно становиться вирусными, чтобы завоевать клиентов. Архив рубрики ~Лента новостей~ Создание сценариев для экстремальных событий без использования экстремальных данных. Архив рубрики ~Лента новостей~ 4,9 на 3000 отзывов. Сколько из них написал живой человек? Архив рубрики ~Лента новостей~ Похоже, Starlink снова работает в Украине в обычном режиме. Архив рубрики ~Лента новостей~ Как сделать музыкальный клип c песней на русском в ChatGPT или Claude без навыков монтажа и опыта написания промптов: от идеи до готового видео + Skill Архив рубрики ~Лента новостей~ Как помочь AI не терять контекст при длительной работе над проектом Архив рубрики ~Лента новостей~ На Огненной Земле нашли обломки старинного корабля. Возможно, останки связаны с крушением 1873 года Архив рубрики ~Лента новостей~ Искусственный интеллект потребляет столько же энергии, сколько Исландия, но учёные не беспокоятся. Новости робототехники Приводимый в движение мышечными клетками, тончайший, как бумага, робот плывет по водному лабиринту. Архив рубрики ~Лента новостей~ Кладбище ИИ: постоянно пополняющийся список проектов и стартапов, которым не суждено было сбыться. Архив рубрики ~Лента новостей~ ИИ продаёт против человека: неделя 0 Архив рубрики ~Лента новостей~ Чек‑лист по хранению ключей в репозиториях на основе инцидентов с ИИ‑агентами Архив рубрики ~Лента новостей~ Робот с искусственным интеллектом учится более эффективно собирать помидоры. Архив рубрики ~Лента новостей~ Материал, напоминающий «роботизированную руку» венериной мухоловки, способен распознавать объекты и захватывать их под воздействием света. Архив рубрики ~Лента новостей~ Стартапам не нужно становиться вирусными, чтобы завоевать клиентов. Архив рубрики ~Лента новостей~ Создание сценариев для экстремальных событий без использования экстремальных данных. Архив рубрики ~Лента новостей~ 4,9 на 3000 отзывов. Сколько из них написал живой человек?