Тема

operativnaya-lenta: статьи, новости и разборы

Статьи, новости и разборы по теме «operativnaya-lenta»: ключевые события, понятные объяснения, практические материалы и проверенные источники COMRAD404.

В архиве 209 материалов

Материалы по теме

209 материалов
Редакционная обложка COMRAD404: FinProBench: как оценивать финансовых ИИ-агентов по стандартам профессионалов

FinProBench: как оценивать финансовых ИИ-агентов по стандартам профессионалов

Препринт FinProBench предлагает строить рубрики оценки для финансовых ИИ-агентов на основе реальных профессиональных deliverables. Для узких ролей это заметно эффективнее обычных промптов.

Открыть материал →
Редакционная обложка COMRAD404: Почему Fireworks не поддерживает Voice AI: гипотеза с Hacker News

Почему Fireworks не поддерживает Voice AI: гипотеза с Hacker News

На Hacker News обсуждают, почему инференс-платформа Fireworks не добавляет открытые голосовые модели. Автор считает, что инференс надо оптимизировать под сценарий, а спрос на Kokoro,...

Открыть материал →
Редакционная обложка COMRAD404: Правильный ответ без правильной нормы: аудит юридических бенчмарков

Правильный ответ без правильной нормы: аудит юридических бенчмарков

Новый препринт arXiv (cs.CL): LLM верно отвечают на вопросы тайваньского бар-экзамена, но спонтанно ссылаются не на те нормы. Авторы предлагают оценивать ответ и правовое...

Открыть материал →
Редакционная обложка COMRAD404: JudgeArena: единый фреймворк для оценки LLM-судей появился на arXiv

JudgeArena: единый фреймворк для оценки LLM-судей появился на arXiv

Препринт JudgeArena объединяет AlpacaEval, Arena-Hard, MT-Bench и m-Arena-Hard под единым интерфейсом со сменными судьями и логированием метаданных. Разбираем, что подтверждено, а что пока заявлено...

Открыть материал →
Редакционная обложка COMRAD404: Obshazard-bench: новый бенчмарк мультимодальных моделей для мониторинга катастроф

Obshazard-bench: новый бенчмарк мультимодальных моделей для мониторинга катастроф

На arXiv вышел препринт Obshazard-bench — бенчмарка для проверки мультимодальных LLM на сырых спутниковых потоках в задачах оперативного реагирования на катастрофы.

Открыть материал →
Редакционная обложка COMRAD404: AgentMemBench: бенчмарк долгосрочной памяти агентов — внешнее хранилище обходит конкурентов

AgentMemBench: бенчмарк долгосрочной памяти агентов — внешнее хранилище обходит конкурентов

Новый препринт AgentMemBench сравнивает пять стратегий долгосрочной памяти для разговорных агентов на едином харнесе. Внешнее хранилище (EKV) лидирует по всем метрикам качества, но требует...

Открыть материал →
Редакционная обложка COMRAD404: Моделирование операционных задач с LLM: неопределённость и симуляция

Моделирование операционных задач с LLM: неопределённость и симуляция

Новая работа на arXiv предлагает training-free фреймворк для генерации математических моделей операционных задач с помощью LLM. Метод использует короткие симуляции для оценки промежуточных шагов...

Открыть материал →