CTS(10)---谷歌CTS测试之Verify简介
谷歌CTS测试之Verify简介
Android 兼容性测试套件验证程序(CTS验证程序)是对兼容性测试套件 (CTS)的补充。CTS可以对具备测试自动化功能的 API和功能进行测试,而 CTS验证程序则可以针对一些必须依赖于手动操作才能在固定设备上进行测试的 API 和功能(例如音频质量、触摸屏、加速度计、相机等)提供测试。
测试前的准备
设备必须成功地通过“兼容性测试套件”测试,才能验证其Android API 兼容性。
硬件要求
l 一台具有 USB 2.0兼容端口的 Linux计算机
l 具有已知可兼容蓝牙、WLAN直连和 NFC主机卡模拟 (HCE)功能的第二台 Android设备
设置
l 在 Linux计算机上安装 Android SDK
l 下载与被测 Android版本对应的 CTS Verifier.apk。
l 将 CTS Verifier.apk安装到被测设备 (DUT)。
adb install -r -g CtsVerifier.apk
l 确保设备的系统数据和时间均已正确设置。
CTS验证程序测试程序
1. 在安装 CTS Verifier.apk之后,启动 CTS验证程序应用:
图 1. CTS验证程序图标
2. 打开后,CTS验证程序会显示适用于手动验证的所有测试集的列表:
图 2. CTS验证程序测试菜单
3. 每项测试均包含一组常用元素(在某些测试中,系统会自动确认测试结果为通过/失败):
l 信息 -用于运行测试的一组说明。首次打开每个测试或每当按信息按钮 (?)时,此信息都会以弹出窗口的形式显示。
l 通过 -如果 DUT符合“信息”中的说明规定的测试要求,请按通过按钮 (✓)。
l 失败 -如果 DUT不符合“信息”中的说明规定的测试要求,请按失败按钮 (!)。
图 3. 视频品质验证程序
具体测试要求
USB配件
为了运行 USB配件测试,您需要一台 Linux计算机来运行 USB台式机(主机)程序。
1. 将 DUT连接到计算机。
2. 在计算机上执行 cts-usb-accessory程序(存放在 CTS验证程序包中)。
./cts-usb-accessory
3. DUT上将显示一条弹出消息。选择 OK 进入CTS 验证程序应用中的USB 配件测试。
图 4. 屏幕锁定测试
4. 在计算机的控制台上,您将看到类似以下内容的输出内容。
CTS USB Accessory Tester
Found possible Android device (413c:2106) - attempting to switch to accessory
mode...
Failed to read protocol version
Found Android device in accessory mode (18d1:2d01)...
[RECV] Message from Android device #0
[SENT] Message from Android accessory #0
[RECV] Message from Android device #1
[SENT] Message from Android accessory #1
[RECV] Message from Android device #2
[SENT] Message from Android accessory #2
[RECV] Message from Android device #3
[SENT] Message from Android accessory #3
[RECV] Message from Android device #4
[SENT] Message from Android accessory #4
[RECV] Message from Android device #5
[SENT] Message from Android accessory #5
[RECV] Message from Android device #6
[SENT] Message from Android accessory #6
[RECV] Message from Android device #7
[SENT] Message from Android accessory #7
[RECV] Message from Android device #8
[SENT] Message from Android accessory #8
[RECV] Message from Android device #9
[SENT] Message from Android accessory #9
[RECV] Message from Android device #10
[SENT] Message from Android accessory #10
相机视野校准
这种视野校准程序主要用于快速确定具备适中精确度的设备视野。
设置 -打印 calibration-pattern.pdf 目标文件,并将它贴在一个硬材质底板上。打印尺寸为11“x 17” 或A3。将相机设备和打印出来的图纸按如下位置和方向摆放:
图 5. 相机打印目标
设置目标宽度 -测量目标图案上两条实线之间的距离(以厘米为单位),以考虑打印误差(约 38厘米)。
l 启动校准应用。
l 按设置按钮,然后选择“Marker distance”输入距离。
l 测量并输入到目标图案的距离(大约 100厘米)。
l 按后退按钮返回到校准预览。
校准过程 -检查设备和目标是否均放在图中所示的位置,以及是否在设置对话框中输入了正确的距离。在预览中,图片上会叠加显示一条垂直线。该垂直线应与目标图案的中心线对齐。透明网格可与其他垂直线配合使用,以确保光轴与目标正交。
l 从左下角的选择器中选择要测试的图片分辨率。
l 点按屏幕以拍摄照片并进入校准模式(如下所述)。
l 按后退按钮,并为所有支持的图片分辨率重复上述操作。
校准测试(按分辨率)在校准模式下,照片将显示叠加在图片上的两条垂直线。这两条线应与目标图案上的垂直线对齐(误差控制在几个像素内)。如果没有对齐,则针对该模式报告的视野将不准确(假设设置正确)。调整屏幕底部的滑块,直到叠加层尽可能紧密地与目标图案对齐。当叠加层和目标图案图片对齐时,所显示的视野将近似于正确的值。报告的视野应在校准值的 +/- 1 度范围内。
导出测试报告
1. 完成所有测试后,点按保存(磁盘)图标。
图 6. CTS验证程序保存图标。注意:Android 7.0及更高版本中已移除预览功能:
2. 已保存报告的路径将显示在弹出窗口中(例如 /sdcard/verifierReports/ctsVerifierReport-date-time.zip)。记录该路径。
图 7. CTS验证程序保存报告的路径
3. 通过 USB将设备连接到安装了 SDK的计算机。
4. 从计算机的 SDK安装中,运行 adb pull CTSVerifierReportPath 以从设备中下载报告。
l 要下载所有报告,请运行:
adb pull /sdcard/verifierReports
l 对于 Android 6.0及更早版本,请运行:
adb pull /mnt/sdcard/ctsVerifierReports/
l 报告的名称会加上时间戳(基于 DUT的系统时间)。
要清除选择的结果,请依次选择 Menu > Clear。该操作将清除通过/失败结果。
Android 兼容性测试套件验证程序(CTS验证程序)是对兼容性测试套件 (CTS)的补充。CTS可以对具备测试自动化功能的 API和功能进行测试,而 CTS验证程序则可以针对一些必须依赖于手动操作才能在固定设备上进行测试的 API 和功能(例如音频质量、触摸屏、加速度计、相机等)提供测试。
测试前的准备
设备必须成功地通过“兼容性测试套件”测试,才能验证其Android API 兼容性。
硬件要求
l 一台具有 USB 2.0兼容端口的 Linux计算机
l 具有已知可兼容蓝牙、WLAN直连和 NFC主机卡模拟 (HCE)功能的第二台 Android设备
设置
l 在 Linux计算机上安装 Android SDK
l 下载与被测 Android版本对应的 CTS Verifier.apk。
l 将 CTS Verifier.apk安装到被测设备 (DUT)。
adb install -r -g CtsVerifier.apk
l 确保设备的系统数据和时间均已正确设置。
CTS验证程序测试程序
1. 在安装 CTS Verifier.apk之后,启动 CTS验证程序应用:
图 1. CTS验证程序图标
2. 打开后,CTS验证程序会显示适用于手动验证的所有测试集的列表:
图 2. CTS验证程序测试菜单
3. 每项测试均包含一组常用元素(在某些测试中,系统会自动确认测试结果为通过/失败):
l 信息 -用于运行测试的一组说明。首次打开每个测试或每当按信息按钮 (?)时,此信息都会以弹出窗口的形式显示。
l 通过 -如果 DUT符合“信息”中的说明规定的测试要求,请按通过按钮 (✓)。
l 失败 -如果 DUT不符合“信息”中的说明规定的测试要求,请按失败按钮 (!)。
图 3. 视频品质验证程序
具体测试要求
USB配件
为了运行 USB配件测试,您需要一台 Linux计算机来运行 USB台式机(主机)程序。
1. 将 DUT连接到计算机。
2. 在计算机上执行 cts-usb-accessory程序(存放在 CTS验证程序包中)。
./cts-usb-accessory
3. DUT上将显示一条弹出消息。选择 OK 进入CTS 验证程序应用中的USB 配件测试。
图 4. 屏幕锁定测试
4. 在计算机的控制台上,您将看到类似以下内容的输出内容。
CTS USB Accessory Tester
Found possible Android device (413c:2106) - attempting to switch to accessory
mode...
Failed to read protocol version
Found Android device in accessory mode (18d1:2d01)...
[RECV] Message from Android device #0
[SENT] Message from Android accessory #0
[RECV] Message from Android device #1
[SENT] Message from Android accessory #1
[RECV] Message from Android device #2
[SENT] Message from Android accessory #2
[RECV] Message from Android device #3
[SENT] Message from Android accessory #3
[RECV] Message from Android device #4
[SENT] Message from Android accessory #4
[RECV] Message from Android device #5
[SENT] Message from Android accessory #5
[RECV] Message from Android device #6
[SENT] Message from Android accessory #6
[RECV] Message from Android device #7
[SENT] Message from Android accessory #7
[RECV] Message from Android device #8
[SENT] Message from Android accessory #8
[RECV] Message from Android device #9
[SENT] Message from Android accessory #9
[RECV] Message from Android device #10
[SENT] Message from Android accessory #10
相机视野校准
这种视野校准程序主要用于快速确定具备适中精确度的设备视野。
设置 -打印 calibration-pattern.pdf 目标文件,并将它贴在一个硬材质底板上。打印尺寸为11“x 17” 或A3。将相机设备和打印出来的图纸按如下位置和方向摆放:
图 5. 相机打印目标
设置目标宽度 -测量目标图案上两条实线之间的距离(以厘米为单位),以考虑打印误差(约 38厘米)。
l 启动校准应用。
l 按设置按钮,然后选择“Marker distance”输入距离。
l 测量并输入到目标图案的距离(大约 100厘米)。
l 按后退按钮返回到校准预览。
校准过程 -检查设备和目标是否均放在图中所示的位置,以及是否在设置对话框中输入了正确的距离。在预览中,图片上会叠加显示一条垂直线。该垂直线应与目标图案的中心线对齐。透明网格可与其他垂直线配合使用,以确保光轴与目标正交。
l 从左下角的选择器中选择要测试的图片分辨率。
l 点按屏幕以拍摄照片并进入校准模式(如下所述)。
l 按后退按钮,并为所有支持的图片分辨率重复上述操作。
校准测试(按分辨率)在校准模式下,照片将显示叠加在图片上的两条垂直线。这两条线应与目标图案上的垂直线对齐(误差控制在几个像素内)。如果没有对齐,则针对该模式报告的视野将不准确(假设设置正确)。调整屏幕底部的滑块,直到叠加层尽可能紧密地与目标图案对齐。当叠加层和目标图案图片对齐时,所显示的视野将近似于正确的值。报告的视野应在校准值的 +/- 1 度范围内。
导出测试报告
1. 完成所有测试后,点按保存(磁盘)图标。
图 6. CTS验证程序保存图标。注意:Android 7.0及更高版本中已移除预览功能:
2. 已保存报告的路径将显示在弹出窗口中(例如 /sdcard/verifierReports/ctsVerifierReport-date-time.zip)。记录该路径。
图 7. CTS验证程序保存报告的路径
3. 通过 USB将设备连接到安装了 SDK的计算机。
4. 从计算机的 SDK安装中,运行 adb pull CTSVerifierReportPath 以从设备中下载报告。
l 要下载所有报告,请运行:
adb pull /sdcard/verifierReports
l 对于 Android 6.0及更早版本,请运行:
adb pull /mnt/sdcard/ctsVerifierReports/
l 报告的名称会加上时间戳(基于 DUT的系统时间)。
要清除选择的结果,请依次选择 Menu > Clear。该操作将清除通过/失败结果。