橙蓝色立体声波组成的 TTS 语音评测视觉
03TEXT TO SPEECH

TTS 语音评测

与国内三款常用 TTS 模型在多场景下进行横向评测,从发音准确性、语义清晰度与情感表达力三大维度评估语音生成效果。

发音准确性语义清晰度情感表达力

EVALUATION FRAMEWORK

TTS 语音评测体系

发音准确性 × 语义清晰度 × 情感表达力

与国内三款常用 TTS 模型在多场景下进行横向评测,从三大维度评估语音生成效果,为准确定位模型短板并提供优化方向提供高置信度数据支持。

01

发音准确性

PRONUNCIATION

考察模型对字、词、句的发音是否标准,涵盖多音字、中英混杂与复杂数字等场景。

02

语义清晰度

SEMANTIC CLARITY

考察信息传递与语义理解的有效性,涵盖标点控制语义、长文本无标点断句与歧义断句。

03

情感表达力

EMOTION

考察模型是否能精准找到触发情感的核心关键词,覆盖新闻联播、睡前故事、电商带货等多场景。

SCORING METHODS

分维度评分标准

二值判断法

发音准确性

1 = 正确识别发音 / 0 = 错误发音

二值判断法

语义清晰度

1 = 语义表达明确 / 0 = 发音正确但语义不符

3 分制评分

情感表达力

2 = 非常满意 / 1 = 满意但偏平淡 / 0 = 无情感色彩

QUALITY WORKFLOW

从构建到报告的全流程

01

评测集构建

基于三大维度撰写规则文档,每条规则对应一个案例;按多维度、不同难度梯度自构建评测集。

02

全流程把控

采用双盲标注,两组独立评测;产生分歧引入第三方复核;收集 Bad Case 作为答疑样本集拉齐颗粒度。

03

质检与抽检

培养标注同学撰写基础结论以发现理解偏差;增加自抽检轮次;要求质检同学收集 Case 保证数据一致性。

04

撰写评测报告

结构化输出评测报告(评测信息、评分标准、评测结果、核心结论、具体案例),对比各模型表现并附加 Bad Case。

评测方式

二值判断 + 3 分制评分 + 双盲标注 + 第三方复核

项目产出

结构化评测报告、评分结果、Bad Case 库与可复用评测标准