文档首页
天猫精灵AI平台
  • 技能应用平台
  • 生活物联网平台
  • 天猫精灵AI平台
  • 数字内容平台
  • 行业开放平台
文档首页
天猫精灵AI平台
产品配置与测试
测试实验室
声学准入评测
声学准入评测

声学准入评测

模组产品的声学设计是保证产品语音唤醒、语音交互体验的重要基础环节。声学设计分为麦克风拾音和声器播放两部分。声学准入评测功能提供的自动化测试分析方案,可以自动评估声学设计相关指标,帮助模组开发方案的厂商快速发现问题,并给出修正建议,并针对设备特性自适应生成优化参数。

背景信息

声学准入评测功能旨在评估并改善模组产品声学性能,提升设备唤醒率和语音识别准确率。自动化分析设备特性并自适应生成优化参数迭代进下一个固件版本。

目前,声学准入评测的使用限制为:

  • 仅开发方案为木星标准模组PRO和木星标准模组PRO2的产品可见

  • 不支持蓝牙类设备

  • 不支持按键触发唤醒设备

  • 不支持触屏唤醒设备

前提条件

  • 已完成测试环境网络搭建,如下图所示。其中,外部设备请参照《天猫精灵木星商业化产品声学准入&准出测试标准》。

    image.png
  • 被测音频设备已完成天猫精灵(或授权三方App)进行配网,并使用语料唤醒(如:今天天气怎么样),能正常响应。

  • 检测测试环境已符合要求,测试环境说明如下:

    • 设备需放置在<45分贝的安静环境下。

    • 测试环境需近似设备真实使用环境,或建议放置在>20㎡开放空间下。

    • 设备不要靠近墙等强反射面。

    • 测试过程中请确保网络状况良好且稳定。

  • 已准备各项测试工具,测试工具说明如下:

    • 仿真人工嘴1个:用来播放测试语料。若无也可使用高保真有源音箱替代。

    • 高保真有源音箱2个:用来播放车载环境噪声。建议使用有源监听音箱。

    • 多通道输出声卡1个或单声道输出声卡多个:用来控制信号源和噪声源播放。选用高信噪比、低失真设备即可。

    • 功放1个:用来将信号放大后提供给人工嘴输出。选用高信噪比、低失真功放即可。

    • 精密级声压计:用来测定测试音源的声压级。声压计满足精密级即可,建议选择A计权声压等级。

    • 卷尺/激光测距仪:用来测量各场景的距离。

操作步骤

  1. 登录天猫精灵AI平台控制台

  2. 在项目主页面中,单击左侧导航栏中的测试。页面如下图所示。测试实验室

  3. 下拉选择待测试的产品,并单击开始测试。此时进入声学准入评测页面。

    准入评测
  4. 新建评测任务。

    1. 评测任务页签,单击新建任务

    2. 配置该任务的详细参数,如下图所示。

      1612686897574-c6528a9d-55bd-48e1-819d-1602cc47fbe9.png
    3. 单击操作列的执行,开始执行评测任务。

      每个用例执行时间不等,通常在20s~60s。部分用例涉及外设操作,会有单轮或多轮弹窗,请按照弹窗内容提示进行操作。您可以在执行记录页签中,查看任务的执行详情与执行结果。

      注意
      • 执行过程中,不要关闭电脑浏览器,不要待机或关机。

      • 执行过程中,不要对设备进行唤醒或按键操作。

      • 执行过程中,需保持网络状况良好且稳定。

      执行任务

    4. 查看任务的执行详情与执行结果。

      每个用例测试完成后会在得分列显示测评分值。若某用例测试结果提示超时则可选择重新执行该用例;若显示失败,会在结果说明中给出问题点及修正建议。请您参考建议进行修正并重新进行测评,直至所有测评用例通过。

      1612685273164-0e5f47ec-36b1-4f9a-ad8c-f0618dfe2c5d.png

      其中,震音测试及EQ设计用例会对设备震音情况做检测。根据模组产品平台能力及设备声学特性选择性自适应生成一套提升唤醒率的EQ参数。并提示您进行点播歌曲试听自适应EQ参数下的输出音效。建议您使用推荐的EQ参数以提升设备唤醒体验,该EQ参数会上传至声学测评平台并进入下一个固件版本。若您不接收该EQ参数音效,则该用例依旧为通过状态,但不采用自适应设计得到的EQ参数。

  5. 评测任务页签,单击操作列的查看,查看任务的执行报告。

    说明

    测试任务完成或手动停止后,系统才会生成测试报告;未完成的任务,不会生成测试报告。

    1612685597294-faac8a62-6434-475b-88c7-78201694d451.png