比較
Inspect vs LM Evaluation Harness
両方について毎晩 GitHub から取得した同じ項目と、人がレビューした両者の関係です。
| 項目 | Inspect | LM Evaluation Harness |
|---|---|---|
| 言語 | Python | Python |
| ライセンス | MIT | MIT |
| スター | 3k | 14k |
| 最新リリース | 0.3.281 | v0.4.13 |
| 最終プッシュ | 2026-10-17 | 2026-09-14 |
| リリース間隔 | リリース間隔は約2日 | リリース間隔は約74日 |
| アクティブなコントリビューター | 過去90日間にデフォルトブランチでコミットした作成者81人以上 | 過去90日間にデフォルトブランチでコミットした作成者52人 |
| 警告 | なし | なし |
両者の関係
Inspect は LM Evaluation Harness を置き換えます。 LM Evaluation Harnessの代替 →
部分的Runs benchmark tasks, but is built around custom evals and agents.
Inspect
LM Evaluation Harness
- v0.4.132026-08-31A fix-focused release. The main fixes are for few-shot leakage, a multiple-choice filter bug, and group stderr, alongsi…
- v0.4.122026-05-11New release with four new model backends, tensor parallel support for transformers based models (hf), new benchmarks, a…
- v0.4.112026-02-13Minor release. Stay tuned for bigger changes next release.
- v0.4.102026-01-27The big change this release: the base package no longer installs model backends by default. We've also added new benchm…
- v0.4.9.22025-11-26lm-eval v0.4.9.2 Release Notes
Inspect
✓ 署名済み 最新リリース 0.3.281 には、GitHub が検証した署名があります。
セキュリティレポートを読み込み中
LM Evaluation Harness
✓ 署名済み 最新リリース v0.4.13 には、GitHub が検証した署名があります。
セキュリティレポートを読み込み中