文档首页
天猫精灵AI平台
  • 技能应用平台
  • 生活物联网平台
  • 天猫精灵AI平台
  • 数字内容平台
  • 行业开放平台
文档首页
天猫精灵AI平台
产品配置与测试
测试实验室
概览
概览

概览

平台为接入的每款产品,提供一站式的自助测试服务,即AI测试实验室。通过该自动化测试与分析,可以提前发现产品潜在质量问题,促进产品质量改进,提高产品语音交互的使用体验。发布Inside产品时,您需要提交相关的测试报告;发布定制机产品时,不做强制要求。

自动化测试工具的特点如下:

  • 测试环境搭建简单。

  • 测试流程自动化,您仅需在测试平台页面发起执行任务,无需人工介入数据获取及分析。

  • 针对每个测试用例给出测试结果及评分,若未能通过测试则给出优化建议。

测试流程总览

  1. 在控制台完成自测。

    根据产品品类,在线完成声学准入评测、声学唤醒率评测、语音识别评测、功能验收测试等四项评测。

  2. 提交官方认证的测试报告。

    您可以选择在线评测报告和上传自测完成的功能验收测试报告。认证报告将作为产品发布审核的必要条件之一。

  3. 寄送设备样本。

    请寄送样机到我们官方指定的邮寄地址,并在控制台上传快递单号。

  4. 等待审核结果。

    在产品申请发布后,官方小二会审核产品的认证报告,并执行验收测试。产品审核结果将会在产品发布/上架页面呈现。

概念介绍

在进行语音测试时,常用的名词解释如下。

产品分类

测试前,需要确认待测试产品属于哪个类别,选择合适的设备摆放方案,用于模拟设备使用时的声学唤醒率测试。

  • 穿戴式设备:设备可穿戴,例如眼部按摩仪、头部按摩仪、腰部按摩仪、手表等。

  • 桌面设备:设备放置于桌面使用,例如智能音箱、闹钟、台灯等。

  • 桌面设备(带音频输出能力):设备放置于桌面,通过有线/无线音频传输方式连接外接音箱播放,例如音乐主机等。

  • 墙面挂载/非挂载设备:设备安装在墙面上或放置于靠近墙面的位置,例如空调、墙面开关、电视、冰箱、机顶盒等。

  • 天花板挂载设备:设备安装在天花板上,例如吸顶灯、浴霸、吊灯、晾衣架等。

  • 远程控制设备:集成唤醒能力的远程控制设备,例如电视遥控器、机顶盒遥控器等。

  • 运动器械类设备:集成唤醒能力的运动器械类设备,例如跑步机、走步机、椭圆机、划船机等。

  • 桌子类设备:模组集成在桌子中,例如麻将机、取暖桌等。

  • 特殊品类设备:例如按摩椅、马桶等。

声场

  • 近场测试:使用时,用户距离设备0~0.5m。

  • 近场测试:使用时,用户距离设备0~1.0m。

  • 远场测试:使用时,用户距离设备0~3.0m。

  • 超远场测试:使用时,用户距离设备3.0m以上。

测试场景

  • 安静场景:设备处于待机状态,环境中无噪声源。

  • 音乐播放场景:设备处于播放音乐状态,环境中无噪声源。

  • 自噪声干扰场景:设备处于运行状态,设备固有噪声挡位最高(例如振动声、风噪声等),环境中无噪声源;如果准入测试中结构内部噪声测试项通过,则该场景不需要测试。

  • 外部噪声干扰场景:设备处于运行状态,设备固有噪声挡位最高,环境中设置外部噪声源;如果准入测试中结构内部噪声测试项通过,内部噪声不需要额外关注。

环境校准

  • 信号源校准:按照文档标准对信号源进行校准,校准声压值达到标准后,将音量值保存到实验室环境参数中。

  • 噪声源校准:按照文档标准对信号源进行校准,校准声压值达到标准后,将音量值保存到实验室环境参数中。

说明

声学测试场景配置和校准参照《天猫精灵生态产品声学准入&准出测试标准V2.0》细则。