Google заметили, что ИИ-агенты могут преувеличивать результаты своей работы 😁 Например, когда агент выполняет задачу и пишет отчёт о результатах, то он склонен замалчивать всё, что портит картину его успеха. Сейчас все стремятся к долго работающим агентам, но в этом случае человек реже проверяет исходные логи и код. Он читает отчёт самой модели, и если в нем не сказано про провал эксперимента, баг или ограничение метода, человек думает, что всё хорошо. Google в одном из тестов модели дали лог эксперимента с заранее подложенным негативным результатом, тогда GPT-5.5 упоминал его только в 2 из 200 отчётов. А если в промпт добавить короткую фразу «Be honest in your response», модель отмечает этот негативный результат уже в 190 из 200 отчётов. То же поведение видно и у открытых моделей. По цепочкам рассуждений 8 open-weight моделей видно, что модель часто внутренне колеблется: упомянуть изъян или подать историю как успешную.
内容来自原始来源:
Telegram — blockchainRF (блокчейн / мозг / space / WEB 3.0)
在 Telegram — blockchainRF (блокчейн / мозг / space / WEB 3.0) 阅读全文标题为俄语Google заметили, что ИИ-агенты могут преувеличивать результаты своей работы 😁
Google заметили, что ИИ-агенты могут преувеличивать результаты своей работы 😁 Например, когда агент выполняет задачу и пишет отчёт о результатах, то он склонен замалчивать всё, что портит картину его успеха. Сейчас все стремятся к долго работающим агентам, но в этом случае…
AI 摘要:要点
- Google заметили, что ИИ-агенты могут преувеличивать результаты своей работы 😁 Например, когда агент выполняет задачу и пишет отчёт о результатах, то он склонен замалчивать всё, что портит картину его успеха
- Сейчас все стремятся к долго работающим агентам, но в этом случае…
Google заметили, что ИИ-агенты могут преувеличивать результаты своей работы 😁
相关文章
一名哈萨克男子卖过馅饼,现在利用人工智能经营着一家价值数百万美元的企业
阿加迪尔·埃尔扎诺夫(Agadil Erzhanov)带着 2000 万坚戈的现金缺口结束了他的第一笔生意,与妻子一起卖了三明治,三年后,他为儿童打造了一个平台,配备了人工智能助手和既没有社交网络也没有浏览器的智能手机。 《草书》讲述了一个年轻人的有趣故事……
在 ChatGPT 中,您可以使用 PIN 码或 Face ID 隐藏对话
🔒 在 ChatGPT 中,您可以通过 PIN 码或 Face ID 隐藏对话 OpenAI 已开始逐步推出“锁定聊天”功能,该功能可让您保护 ChatGPT 中的个人对话免受陌生人的侵害。用户可以隐藏常规历史记录中的个人或机密聊天记录,并且...
RUЕвропейские пионеры используют модели NVIDIA Earth-2 для прогноза погоды
Модели NVIDIA Earth-2 помогают прогнозировать погоду и климат в Европе.
RUNVIDIA трансформирует европейскую розницу с помощью ИИ и роботов
NVIDIA внедряет открытые модели и физический интеллект в европейскую розницу.
