Как проверить MCP-сервер на безопасность перед подключением: чеклист для разработчиков
MCP-серверы дают агентам доступ к файлам, базам данных и API, но каждый эндпоинт — потенциальный вектор атаки. Разбираем, какие проверки...
Тема COMRAD404
ИИ-агенты и инструменты для рабочих задач
Новости и разборы ИИ-агентов, сервисов и инструментов для автоматизации рабочих задач, программирования, исследований и контента.
Контрактные тесты для вызова инструментов LLM: как поставить релизный барьер в CI
Практическая схема проверки вызовов инструментов в AI-агентах: контракты на основе JSON Schema, метрики выбора функций и аргументов, негативные сценарии, повторные...
Как проверить, что AI-агент не утечёт ваш API-ключ: чеклист для разработчиков
Агенты выполняют код, читают файлы и ходят в сеть — и могут случайно отправить ваш API-ключ на внешний сервер. Собираем...
Как настроить MCP-сервер для доступа к базе данных: разбор на примере PostgreSQL
Пошаговое руководство по настройке MCP-сервера для работы с PostgreSQL: установка, конфигурация, ограничения безопасности и практические примеры запросов через AI-агентов.
Как измерить стоимость AI-агента: пошаговый метод расчёта затрат на токены, вызовы и время выполнения
Разбираем практический метод оценки стоимости работы AI-агента: от токенов на промпт и генерацию до затрат на tool calling и время...
Как оценить стабильность tool calling в LLM: практический чеклист с примерами на Python
Tool calling — ключевой механизм для AI-агентов, но он подвержен сбоям: модель может пропустить вызов, передать неверные параметры или вызвать...
Оценка LLM-приложений в LangSmith: трассировка, датасеты и регрессионные тесты
Практический разбор LangSmith для команд, которым нужно находить ошибки в цепочках LLM, сравнивать версии приложения и проверять изменения до релиза.
Как проверить MCP-сервер на утечку контекста: чеклист для разработчиков
MCP-серверы открывают прямой доступ к файлам, базам данных и API. Вместе с удобством приходит риск утечки контекста — когда агент...
IFEval: как объективно проверить, что AI-агент выполняет ваши инструкции
Разбираемся, как работает бенчмарк IFEval от Google Research, и показываем, как с его помощью протестировать, насколько точно AI-агент следует заданным...
Сколько стоят AI-агенты на разных моделях: бюджет, скорость и качество
Практический расчёт стоимости 1000 вызовов инструментов на Claude, GPT-4o и Gemini 2.5. Как не переплатить за агентов, где сэкономить и...