alternativas a

vLLM

A high-throughput and memory-efficient inference and serving engine for LLMs

Comparativa

1 alternativa de código abierto a vLLM
HerramientaSustituciónEstrellasLicenciaCondicionesAutoalojableLenguajeÚltima versiónÚltimo push
SGLangSustitución completa37kApache-2.0Código abiertoSíPythonv0.5.212026-10-06

Todas las alternativas

1 alternativa

SGLangSustitución completa

SGLang is a high-performance serving framework for large language models and multimodal models.

GPU serving engine for open-weight models behind an OpenAI-compatible API.

Lenguaje
Python
Licencia
Apache-2.0
Estrellas
37k
Última versión
v0.5.21
Último push
2026-10-06

Sobre vLLM

Lenguaje
Python
Licencia
Apache-2.0
Estrellas
93k
Último push
2026-10-06

Sobre vLLM →