Evaluation systems / Source notes
从一次评测请求出发,拆解 EleutherAI 评测框架的执行链路、核心抽象与扩展机制。
Reading path
先建立完整评测流程,再进入架构、任务系统和模型适配层。
run_evals_ft.sh → lm_eval/__main__.py
lm_eval/
lm_eval/tasks/
lm_eval/models/vllm_norm.py