К содержанию
Новости

Vercel добавила правила маршрутизации для AI Gateway

Vercel AI Gateway получил поддержку routing rules, правил маршрутизации для централизованного управления доступом к моделям и перенаправлением запросов. Как пишет Vercel (Changelog / News, incl. AI SDK), правила работают на уровне gateway, а не в коде приложения.

Сейчас сервис поддерживает два типа правил. Rewrite перенаправляет запросы с одной модели на другую. Это может пригодиться при недоступности модели, во время миграции с устаревшего варианта, для стандартизации на одной модели или при переходе с более дорогой модели на более дешёвую. Правило Deny полностью блокирует обращения к выбранной модели и возвращает ошибку 403.

Правила применяются ко всем запросам, отправленным через учётные данные AI Gateway команды. Управлять ими можно через Vercel CLI. В компании отдельно уточнили, что маршрутизация меняет только модель, которая обслуживает запрос. Остальные параметры сохраняются, включая BYOK, model fallbacks, sorting, only filter, provider options, Zero Data Retention и provider allowlist. Функция доступна в статусе beta.

Ключевые факты

  • AI Gateway поддерживает два типа правил: Rewrite и Deny

  • Deny-правила блокируют запросы к модели и возвращают ошибку 403

  • Управление routing rules выполняется через Vercel CLI

  • Функция находится в статусе beta