comparar
MLServer vs Triton Inference Server
Os mesmos fatos para os dois, lidos do GitHub toda noite, e a relação que uma pessoa revisou.
| Fato | MLServer | Triton Inference Server |
|---|---|---|
| Linguagem | Python | Python |
| Licença | Apache-2.0 | BSD-3-Clause |
| Estrelas | 900 | 11k |
| Última release | 1.7.1 | v2.73.0 |
| Último push | 2026-10-05 | 2026-10-06 |
| Ritmo de releases | cerca de 95 dias entre releases | cerca de 32 dias entre releases |
| Contribuidores ativos | 0 autor de commits na branch padrão nos últimos 90 dias | 8 autores de commits na branch padrão nos últimos 90 dias |
| Alertas | nenhum | nenhum |
Como se relacionam
Os dois substituem Amazon SageMaker. Alternativas a Amazon SageMaker →
ParcialMLServerA Python inference server speaking the V2 inference protocol.
ParcialTriton Inference ServerServes TensorRT, PyTorch, ONNX and other models over HTTP and gRPC, with dynamic batching.
MLServer
- 1.7.12025-06-06Set a lower bound for mlflow in mlserver-mlflow
- 1.7.02025-04-11MLServer has now support for Python 3.11 and 3.12 by @shivakrishnaah in (#1951)
- 1.6.12024-09-10MLServer now offers an option to use pre-existing Python environments by specifying a path to the environment to be use…
- 1.6.02024-06-26MLServer supports Pydantic V2.
- 1.5.02024-03-05Update CHANGELOG
Triton Inference Server
- v2.73.02026-09-30Release 2.73.0 corresponding to NGC container 26.09
- v2.72.02026-08-31Release 2.72.0 corresponding to NGC container 26.08
- v2.71.02026-07-29Release 2.71.0 corresponding to NGC container 26.07
- v2.70.02026-06-26Release 2.70.0 corresponding to NGC container 26.06
- v2.69.02026-06-02Release 2.69.0 corresponding to NGC container 26.05
MLServer
não assinada A última release, 1.7.1, não tem nenhuma assinatura que o GitHub consiga verificar.
Carregando o relatório de segurança
Triton Inference Server
✓ assinada A última release, v2.73.0, tem uma assinatura verificada pelo GitHub.
Carregando o relatório de segurança