Inspect vs OpenCompass: Vergleich

Inspect vs OpenCompass
Fakt	Inspect	OpenCompass
Sprache	Python	Python
Lizenz	MIT	Apache-2.0
Sterne	3k	7.5k
Neuestes Release	0.3.281	0.5.4
Letzter Push	2026-10-17	2026-10-16
Release-Rhythmus	etwa 2 Tage zwischen Releases	etwa 89 Tage zwischen Releases
Aktive Mitwirkende	81+ Commit-Autoren auf dem Standard-Branch in den letzten 90 Tagen	26 Commit-Autoren auf dem Standard-Branch in den letzten 90 Tagen
Hinweise	keine	keine

Wie sie zusammenhängen

Beide ersetzen LM Evaluation Harness. Alternativen zu LM Evaluation Harness →
TeilweiseInspectRuns benchmark tasks, but is built around custom evals and agents.
Vollwertiger ErsatzOpenCompassRuns benchmark suites over local and API models from a config.

0.3.2812026-10-15v0.3.281
0.3.2802026-10-14v0.3.280
0.3.2792026-10-12v0.3.279
0.3.2782026-10-09Tasks and samples can carry a description of what they ask of the agent, recorded in the eval log and in evals_df() and…

0.5.42026-08-26✨ Multimodal Evaluation with VLMEvalKit: OpenCompass now integrates VLMEvalKit for native multimodal dataset loading, O…
0.5.32026-06-29✨ 🧪 Extensive New Benchmarks and Dataset Support: Added support for a wide range of new benchmarks and datasets, inclu…
0.5.22026-02-14✨ 🧪 Extensive New Benchmarks Support: We have introduced comprehensive support for Scientific and General Benchmarks,…
0.5.1.post12025-10-17✨ A New Method to quickly Integrate and Evaluate Your Datasets: Added a fast dataset integration and evaluation method…
0.5.02025-09-01✨ Comprehensive Scientific Benchmarks: Integrated 10+ specialized datasets (MedXpertQA, ClimaQA, SmolInstruct, etc.),…

✓ signiert Das neueste Release, 0.3.281, trägt eine Signatur, die GitHub geprüft hat.

Der Sicherheitsbericht wird geladen

✓ signiert Das neueste Release, 0.5.4, trägt eine Signatur, die GitHub geprüft hat.

Der Sicherheitsbericht wird geladen