语种一致性
语种一致性评估器
|
分类 |
详情 |
|
|---|---|---|
|
基础信息 |
评估器名称 |
语种一致性 |
|
效果说明 |
功能概述 |
衡量回复文本所使用的语言是否与提问文本的语言一致,是否存在多语言混杂的情况。 |
|
评估方式 |
LLM评估 |
|
|
评估目标 |
文本、输出质量 |
|
|
应用场景 |
适用于多语言客服、跨境内容生成、翻译辅助等场景,确保模型输出与用户提问保持同一语种,避免中英混杂、中日混杂等多语言杂糅现象,提升用户体验和专业性。 |
|
|
评分标准 |
1.0分 |
回复语种与提问完全一致,无多语言混杂,专有名词保留合理,整体语言统一流畅。 |
|
0.0分 |
回复语种与提问不一致,或存在明显的多语言混杂(如中英夹杂、中日混用),影响阅读体验。 |
|
评估器参数说明:
|
参数类型 |
参数名称 |
是否必填 |
参数说明 |
|---|---|---|---|
|
输入参数 |
input |
是 |
用户的输入问题,提供评估的上下文背景。 |
|
actual_output |
是 |
智能体针对该问题的实际输出结果。 |
|
|
输出参数 |
score |
是 |
评估得分(0.0 / 1.0)。 |
|
reason |
是 |
评分理由说明。 |
输入格式示例:
{
"input": "什么是量子计算?",
"actual_output": "量子计算是一种利用量子力学原理进行信息处理的计算方式,具有远超经典计算机的并行处理能力。"
}
输出格式示例:
{
"score": 1.0,
"reason": "回复语言与提问一致,均为简体中文,未出现非必要语言混杂。"
}