Единый шлюз к ИИ-моделям внутри вашего контура
AKI.Gate ставится в инфраструктуре компании и становится общей точкой доступа к моделям: приложения, редакторы и агенты обращаются к одному адресу, а за ним остаются серверы моделей в контуре и внешние поставщики, если они разрешены. Ключи, пределы расходов, журнал и учет потребления не покидают периметр.
Моделей в компании становится больше, а общего входа в них нет
Один отдел поднял свой сервер инференса, другой работает с внешним поставщиком, третий держит ключ в коде сервиса. Сменить модель - значит править приложение. Кто сколько потратил и какие данные ушли наружу, собирается вручную.
Приложение знает один адрес. Какая модель и чей сервер за ним - вопрос настройки шлюза, а не правки кода.
Меняется адрес и ключ - остальной код остается
Шлюз говорит на интерфейсе OpenAI, поэтому штатные библиотеки работают с ним напрямую. Для клиентов Anthropic есть отдельный маршрут сообщений. Имя модели берется из каталога шлюза и должно быть разрешено вашему ключу.
Подключается к тому, с чем команда уже работает
Любой инструмент, который позволяет задать адрес API и ключ, работает со шлюзом. Для распространенных помощников разработчика настройки описаны по шагам.
Видно, кто сколько потратил, и задано, сколько он может
Ключ - единица управления. Эксперимент, продуктовая функция и сборочный конвейер получают разные ключи: ошибка в одном не расходует бюджет остальных, а потребление собирается в разрезе ключей и моделей.
Та же роль, под которую обычно берут LiteLLM
Прослойку перед моделями чаще всего собирают сами: открытый прокси, конфигурация в репозитории и скрипты учета сверху. AKI.Gate закрывает ту же роль готовой системой - с кабинетом, правами, пределами и журналом, которые не нужно дописывать и поддерживать своими силами.
akigate.ru - тот же шлюз, доступный снаружи
Чтобы посмотреть, как шлюз ведет себя в работе, разворачивать ничего не нужно: akigate.ru - это AKI.Gate, открытый в интернет. Регистрация, ключ, подключение инструмента и первый запрос занимают несколько минут - дальше видно кабинет, каталог, пределы расходов и журнал использования.