Новое Распределяем каналы MAX по категориям и территориям. Читать новость

Раньше добрать четыре GPU значило перезапустить движок и 197 секунд тишины. Первая версия Elastic EP дала 100 с, нынешняя — 0,82 с на подъёме и 1,96 с на спуске.



Тяжёлое ушло в фон: воркеры получают веса по NVLink, пока старые отдают запросы, commit занимает мгновение. NIXL EP расширяет коммуникатор на месте, поэтому CUDA-графы не пересобирают.

Замер один — DeepSeek V4 Pro и GB200, 16→20 GPU. Цифры авторов.

https://vllm.ai/blog/2026-10-19-elastic-ep-near-zero-downtime
Просмотры: 3
Открыть в MAX Сообщить о неточности

Сообщить о неточности

Опишите, что нужно исправить. Если есть источник, добавьте ссылку.

Вы покидаете datool.ru

Ссылка ведёт на внешний сайт. datool.ru не отвечает за его содержимое — проверьте адрес, прежде чем вводить пароли или платёжные данные.

Переход через 10 с

Перейти