Эра AI-агентов: сигнал с Reddit о переходе от «промптов» к «системам»
Пользователь r/artificial рассказывает, как LLM переходят от ответов к действиям, и спрашивает сообщество: это реальный сдвиг или хайп?
Последние публикации
Об авторе
Правильный ответ без правильной нормы: аудит юридических бенчмарков
Новый препринт arXiv (cs.CL): LLM верно отвечают на вопросы тайваньского бар-экзамена, но спонтанно ссылаются не на те нормы. Авторы предлагают...
JudgeArena: единый фреймворк для оценки LLM-судей появился на arXiv
Препринт JudgeArena объединяет AlpacaEval, Arena-Hard, MT-Bench и m-Arena-Hard под единым интерфейсом со сменными судьями и логированием метаданных. Разбираем, что подтверждено,...
Clai — LLM как обычная shell-команда
Show HN: Clai превращает языковую модель в UNIX-фильтр stdin → stdout. Разбираем, что подтверждено, что нет и кому это может...
Obshazard-bench: новый бенчмарк мультимодальных моделей для мониторинга катастроф
На arXiv вышел препринт Obshazard-bench — бенчмарка для проверки мультимодальных LLM на сырых спутниковых потоках в задачах оперативного реагирования на...
AgentMemBench: бенчмарк долгосрочной памяти агентов — внешнее хранилище обходит конкурентов
Новый препринт AgentMemBench сравнивает пять стратегий долгосрочной памяти для разговорных агентов на едином харнесе. Внешнее хранилище (EKV) лидирует по всем...
Моделирование операционных задач с LLM: неопределённость и симуляция
Новая работа на arXiv предлагает training-free фреймворк для генерации математических моделей операционных задач с помощью LLM. Метод использует короткие симуляции...
Китай использует открытую модель против закрытых систем OpenAI — что говорят данные
На Reddit обсуждают, как Китай догоняет США в AI за счёт открытых моделей, патентов и публикаций. Разбираем, что подтверждено, а...
TAPR: RL-переписчик промптов для LLM заявляет рост на Natural Questions и GSM8K
Новый arXiv-препринт TAPR: отдельная модель на базе Phi-4-mini переписывает пользовательские промпты под задачу через GRPO и LLM-as-judge. Заявлен стабильный прирост...
Noisegate: дифференциальная приватность для недоверенных AI-агентов
Noisegate — шлюз с дифференциальной приватностью, который математически гарантирует защиту отдельных записей при запросах AI-агентов к чувствительным данным. Реализация на...
V-Steer: редактирование кэшированных значений для соблюдения иерархии инструкций в LLM
Новый метод V-Steer позволяет на этапе инференса восстанавливать приоритет системных промптов над пользовательскими, редактируя кэшированные векторы значений. Точность соблюдения первичных...
Оценка влияния промптов и демонстраций на перевод локальными LLM (arXiv)
Исследователи сравнили локальные LLM в задачах перевода, тестируя single-target и family-scope промпты, а также разные стратегии few-shot обучения. Результаты: dedicated...