OpenEvals

检查应用回答是否足够简洁

准备输入

• 应用收到的真实输入、对应实际输出和明确的简洁性要求。
• 已安装 OpenEvals 并配置评审模型访问凭据的环境。

操作步骤

1. 安装 OpenEvals，配置模型访问，选择简洁性提示词并创建 LLM-as-judge 评估器。
2. 向评估器提交应用的输入和输出，保留每个样本的对应关系。
3. 读取返回的 score 和 comment，检查低分样本并依据任务要求复核是否确实存在冗余内容。

示例使用外部语言模型进行评审，模型凭据与可用性需自行配置；不同评估器可能还需要参考答案，提示词和参数应对应本次检查目标，模型评语仍需复核。