comparer
Inspect vs LM Evaluation Harness
Les mêmes faits pour les deux, lus sur GitHub chaque nuit, et la relation qu'une personne a relue.
| Fait | Inspect | LM Evaluation Harness |
|---|---|---|
| Langage | Python | Python |
| Licence | MIT | MIT |
| Étoiles | 3k | 14k |
| Dernière release | 0.3.281 | v0.4.13 |
| Dernier push | 2026-10-17 | 2026-09-14 |
| Rythme des releases | environ 2 jours entre les releases | environ 74 jours entre les releases |
| Contributeurs actifs | 81+ auteurs de commits sur la branche par défaut ces 90 derniers jours | 52 auteurs de commits sur la branche par défaut ces 90 derniers jours |
| Signalements | aucun | aucun |
Ce qui les relie
Inspect remplace LM Evaluation Harness. Alternatives à LM Evaluation Harness →
PartielRuns benchmark tasks, but is built around custom evals and agents.
Inspect
LM Evaluation Harness
- v0.4.132026-08-31A fix-focused release. The main fixes are for few-shot leakage, a multiple-choice filter bug, and group stderr, alongsi…
- v0.4.122026-05-11New release with four new model backends, tensor parallel support for transformers based models (hf), new benchmarks, a…
- v0.4.112026-02-13Minor release. Stay tuned for bigger changes next release.
- v0.4.102026-01-27The big change this release: the base package no longer installs model backends by default. We've also added new benchm…
- v0.4.9.22025-11-26lm-eval v0.4.9.2 Release Notes
Inspect
✓ signée La dernière release, 0.3.281, porte une signature vérifiée par GitHub.
Chargement du rapport de sécurité
LM Evaluation Harness
✓ signée La dernière release, v0.4.13, porte une signature vérifiée par GitHub.
Chargement du rapport de sécurité