EleutherAI/lm-evaluation-harness
Language Model Evaluation Harness là khung đánh giá ít mẫu cho mô hình ngôn ngữ của EleutherAI.
Điểm nổi bật
- Thêm plugin để đăng ký backend mô hình, bộ lọc, số đo mà không cần fork.
- CLI có các lệnh con run, ls, validate và tệp cấu hình YAML.
- Được dùng rộng rãi trong nghiên cứu.
- Có hướng dẫn plugin.
Mô tả từ GitHub
A framework for few-shot evaluation of language models.
- Chủ đề
- Bảo mật & Hack
- Ngôn ngữ
- Python
- Số sao
- 14.5K
- Thêm vào kho
- 26/08/2026
curl "https://repo.shopkitai.com/api/v1/repos/EleutherAI/lm-evaluation-harness"