Claude Sonnet 5 часто врет и спорит - раздражает пользователей

Claude Sonnet 5 бесит пользователей спорами и обвинениями во лжи. Я думаю вы в курсе, что компания Anthropic на прошлой неделе выкатила Sonnet 5 версии, обещая самую продвинутую версию модели среди Sonnet линейки и на то есть основания. Если верить всем бенчмаркам, она действительно обходит предшественника почти везде, хотя до уровня Opus 4.8 все равно не дотягивает, но тут и стоимость другая.

Короче, сразу после релиза начался полный хаос в социальных сетях, зарубежных в основном. Сеть завалена жалобами на странное поведение модели и это совсем некстати для компании, ведь она только оправилась после истории с Fable 5, кто помнит тогда пришлось на пару недель заморозить доступ к Fable 5 и Mythos 5 из-за экспортных ограничений США, а нам всем так хотелось ее протестировать, но увы.

Личный опыт автора статьи с реддита такой - модель постоянно ссылается на системный промпт и куски своей памяти прямо в чате. Например, он попросил никогда не заканчивать ответы вопросом и теперь Sonnet 5 начинает каждый ответ фразой типа "мне нужно помнить не задавать уточняющих вопросов".

Это еще не все, другая статья на Reddit говорит о том, что модель отказывается выполнять команды и вместо этого начинает бесконечный спор, выдумывая аргументы просто чтобы не согласиться с пользователем.

Один пользователь пишет, что Sonnet 5 и Opus 4.8 страдают одной болезнью, смысл в том, что ИИ постоянно исправляют собеседника, даже если приходится придумывать факты и строить нелепые доводы. Модель якобы намеренно ведет себя резко, чтобы не выглядеть слишком покладистой и каждый ответ начинает со слов "если честно, потому что...".

Другой юзер жаловался, что просил помочь свести накладные с заказами, а модель обвинила его в мошенничестве и начала читать лекцию, почему обманывать плохо.

Есть подозрение, что задачи распределяются между суб-агентами похуже качеством, из-за чего тратится больше токенов при худшем результате. Плюс жалуются на потерю контекста уже после пары сообщений и избыточные оговорки в ответах. А еще модель без спроса советует людям ложиться спать - привычка не новая, но раздражает по-прежнему.

Короче вот такие дела, если вы активный пользователь ИИ делитесь своими опытами, есть какие проблемы или нет, спасибо за внимание к статье, удачи!