Что случилось
Пользователь Reddit (r/ClaudeAI) рассказал, что Claude Opus 5 при исследовании архитектуры памяти для AI-агента выдавал очень конкретные цифры, проценты и цитаты из научных статей. Данные выглядели правдоподобно, но часть оказалась выдуманной или искажённой. При проверке выяснилось: WebFetch не читает страницу целиком, а передаёт модели краткое саммари, подготовленное меньшей и более дешёвой моделью.
Почему это важно
Автор поста задал Opus 5 прямой вопрос — читает ли модель сами статьи. Ответ: нет, WebFetch сжимает содержимое, а итоговый ответ строится по саммари. Малая модель может упрощать, угадывать и даже изобретать детали. Одна «цитата» ссылалась на фреймворк, которого нет в исходной статье; другой показатель оказался средним двух чисел из разных таблиц.
Что изменили
Автор переключился на другой подход: субагенты получают правило «без WebFetch», тянут сырую страницу через curl и читают текст напрямую. Результат разительно отличается: за ~30 статей найдено 17 ошибок, в двух случаях выводы WebFetch были фактически перевёрнуты. После этого качество исследования Opus 5 автор оценил как очень высокое.
Что осталось непроверенным
Официальных документов Anthropic о том, что WebFetch использует отдельную малую модель для саммари, автор не привёл; это его собственная интерпретация поведения инструмента. Неясно, насколько поведение зависит от версии модели, тарифа и настроек. Пользователь советует проверять выводы инструментов и при необходимости переходить на чтение исходных страниц.
| Punkt | Detail |
|---|---|
| Платформа | Reddit, r/ClaudeAI |
| Инструмент | WebFetch (саммари малой моделью) |
| Кейс | 17 ошибок на ~30 статей |
| Обнаружено | Выводы перевёрнуты в 2 случаях |
| Рекомендация | Читать сырой HTML вместо саммари |
Источник: https://www.reddit.com/r/ClaudeAI/comments/1vim8b7/psa_be_careful_letting_claude_use_webfetch_for/
Проверка: https://www.anthropic.com/news