比較
Inspect vs OpenCompass
両方について毎晩 GitHub から取得した同じ項目と、人がレビューした両者の関係です。
| 項目 | Inspect | OpenCompass |
|---|---|---|
| 言語 | Python | Python |
| ライセンス | MIT | Apache-2.0 |
| スター | 3k | 7.5k |
| 最新リリース | 0.3.281 | 0.5.4 |
| 最終プッシュ | 2026-10-17 | 2026-10-16 |
| リリース間隔 | リリース間隔は約2日 | リリース間隔は約89日 |
| アクティブなコントリビューター | 過去90日間にデフォルトブランチでコミットした作成者81人以上 | 過去90日間にデフォルトブランチでコミットした作成者26人 |
| 警告 | なし | なし |
両者の関係
どちらも LM Evaluation Harness を置き換えます。 LM Evaluation Harnessの代替 →
部分的InspectRuns benchmark tasks, but is built around custom evals and agents.
完全な置き換えOpenCompassRuns benchmark suites over local and API models from a config.
Inspect
OpenCompass
- 0.5.42026-08-26✨ Multimodal Evaluation with VLMEvalKit: OpenCompass now integrates VLMEvalKit for native multimodal dataset loading, O…
- 0.5.32026-06-29✨ 🧪 Extensive New Benchmarks and Dataset Support: Added support for a wide range of new benchmarks and datasets, inclu…
- 0.5.22026-02-14✨ 🧪 Extensive New Benchmarks Support: We have introduced comprehensive support for Scientific and General Benchmarks,…
- 0.5.1.post12025-10-17✨ A New Method to quickly Integrate and Evaluate Your Datasets: Added a fast dataset integration and evaluation method…
- 0.5.02025-09-01✨ Comprehensive Scientific Benchmarks: Integrated 10+ specialized datasets (MedXpertQA, ClimaQA, SmolInstruct, etc.),…
Inspect
✓ 署名済み 最新リリース 0.3.281 には、GitHub が検証した署名があります。
セキュリティレポートを読み込み中
OpenCompass
✓ 署名済み 最新リリース 0.5.4 には、GitHub が検証した署名があります。
セキュリティレポートを読み込み中