Industry & Practice · Tagged “model_graded_qa”

Tools & Frameworks/2026-10-03/12 min

Inspect 模型评分：开放式回答怎么打分，以及怎么避免被带偏

Inspect 的 model_graded_qa 用另一个模型给开放式回答打 GRADE: C 或 GRADE: I。文档说明模型选择顺序、模板变量、固定标准与逐题标准、多数投票、等级抽取如何防注入，以及用 temperature=0 和 seed 让评分更可复现。