语音识别评测

背景信息

语音识别评测工具的特点如下：

• 测试环境搭建比较简单，只需设备配网成功，即完成设备环境搭建。

• 不需要在电脑安装特定测试代理软件。

• 设备不需要适配升级特定固件。

目前，语音识别评测的使用限制为：

• 不支持蓝牙类设备

• 不支持按键触发唤醒设备

• 不支持触屏唤醒设备

由于测试是基于固定语音样本进行测试，语音样本数量有限、受测试环境（噪声）、测试场地等因素影响，测试结果与标准仅作参考。

前提条件

• 已完成测试环境网络搭建，只需设备配网成功即可。如下图所示。

  

• 被测音频设备已完成天猫精灵（或授权三方App）进行配网，并使用语料唤醒（如：今天天气怎么样），能正常响应。

• 检测测试环境已符合要求，测试环境说明如下：

  • 距离：是指电嘴与设备直线距离，一般选择1米、2米或3米。

  • 场地：是指待测空间，如室内、车载环境等。

  • 环境：主要是指噪声，包含电器、谈话、音乐等。

  评测时距离、场景等请参见概览中具体品类的规范要求，如有疑问，可联系技术支持小二确认。

操作步骤

1. 登录天猫精灵AI平台控制台。

2. 在项目主页面中，单击左侧导航栏中的测试。页面如下图所示。

   

3. 下拉选择待测试的产品，并单击开始测试。

4. 在左侧导航栏中，选择语音识别评测，页面如下图所示。

   

5. 创建评测任务。

   1. 在评测任务页签，单击新建任务。

   2. 在弹出的对话框中，配置任务的详细参数。参数说明如下表所示。

      参数名称	参数描述
      任务名称	任务名称限制在15字以内，且须为中文、英文、数字、短划线（-）、下划线（_）。
      被测设备	通常配置为设备的MAC地址或SN。
      待测空间	测试的空间环境，如室内等。
      场景噪声	测试时播放噪声音频资源，实际测试时，您可以在评测任务页签中单击下载噪音，获取噪音资源。
      用例执行间隔	无特殊要求，一般无需修改。

      

6. 单击操作列的执行，开始运行评测任务。

   此时，将依次执行任务中所有用例，每播放一条音频，表示执行一条用例，执行完成后，进度为100%，表示任务已执行完成。您可以在执行记录页签中，查看任务的执行详情与执行结果。

   说明

   • 执行执行过程中，不要关闭浏览器，不要待机或关机。

   • 创建测试任务，任务超时时间为3天，3天未执行完成，系统自动停止任务。任务状态变为异常终止。此时，您需要重新执行任务。

   

7. 在评测任务页签，单击操作列的查看，查看任务的执行报告。