更新时间:2026-03-09 GMT+08:00
分享

语种一致性

语种一致性评估器

表1 评估器信息

分类

详情

基础信息

评估器名称

语种一致性

效果说明

功能概述

衡量回复文本所使用的语言是否与提问文本的语言一致,是否存在多语言混杂的情况。

评估方式

LLM评估

评估目标

文本、输出质量

应用场景

适用于多语言客服、跨境内容生成、翻译辅助等场景,确保模型输出与用户提问保持同一语种,避免中英混杂、中日混杂等多语言杂糅现象,提升用户体验和专业性。

评分标准

1.0分

回复语种与提问完全一致,无多语言混杂,专有名词保留合理,整体语言统一流畅。

0.0分

回复语种与提问不一致,或存在明显的多语言混杂(如中英夹杂、中日混用),影响阅读体验。

评估器参数说明:

表2 评估器参数说明

参数类型

参数名称

是否必填

参数说明

输入参数

input

用户的输入问题,提供评估的上下文背景。

actual_output

智能体针对该问题的实际输出结果。

输出参数

score

评估得分(0.0 / 1.0)。

reason

评分理由说明。

输入格式示例:

{
  "input": "什么是量子计算?",
  "actual_output": "量子计算是一种利用量子力学原理进行信息处理的计算方式,具有远超经典计算机的并行处理能力。"
}

输出格式示例:

{
  "score": 1.0,
  "reason": "回复语言与提问一致,均为简体中文,未出现非必要语言混杂。"
}

相关文档