Короткие и проверяемые определения терминов.
MCP (Model Context Protocol) — открытый протокол на базе JSON-RPC 2.0 для связи LLM-приложений с внешними инструментами и данными. Ниже — простое объяснение, схема работы, изменения ревизии 2026-07-28 и практические ограничения.
Открыть →Mixture of Experts (MoE) — разреженная архитектура условных вычислений, где роутер активирует только часть экспертов для каждого токена. Разбираем схему работы, примеры Mixtral и Qwen, отличия от Switch Transformer и ограничения при выборе модели.
Открыть →Model serving — это слой ML-инфраструктуры, который публикует обученную модель как сервис для инференса. Ниже — простое объяснение, схема работы, практический пример и ограничения.
Открыть →Multi-Head Attention — механизм трансформера с несколькими параллельными головами внимания: они по-разному проецируют query, key и value, а затем объединяются в общий выход.
Открыть →