博客

测试前打印此表格作为Checklist

准备项目

描述

检查结果

备注说明

地点

根据用户回访的详情一致

Cell ID和信号强度

样机

根据已有log或CHRlog提供的信息，提供Cell ID和信号强度范围（BETA必选/EWP可选）

※重要：样机硬件检测，无重大损坏或者摔过，包括测试机和对比机

测试样机OTA指标确认达到外场测试要求

若测试多部样机，样机需要编号，并且和IMEI号&S/N号对应记录

记录测试样机和对比机IMEI/SN/硬件版本

※重要：确认好此次测试的样机软件版本

测试样机root已经升级且能够抓取LOG(EWP可选，用户机不可root)

测试机和对比机电池电量充满

全解寻呼机

SIM卡

FRD（AL）全解寻呼机（接受LTE寻呼），电信使用高通机器（关闭时隙模式，详见附件4），包含软硬件及测试软件，log抓取软件（被叫不通问题必选）

测试SIM卡通过表格记录，包括SIM卡编号，卡后面的数字和手机号码等对应关系

查询SIM卡余额和剩余套餐资源足够本论测试，若不够及时充值

确认好SIM卡在手机上都可用

SIM卡（可选）

SD卡

移动/联通 ：同一寻呼组的SIM卡

电信：同一频点的SIM卡

为保证存储空间足够，SD卡建议32GB

记录好SD卡编号，和手机对应关系

PC

※重要：需要SD卡抓LOG的手机，默认存储设置到外置SD卡，并确认抓取在外置SD卡

便携机上LOG抓取工具均已经安装

便携机上手机驱动已经安装

测试apk

需要PC上进行的测试工具已经安装，FTP测试时的客户端，Netmeter

※重要：测试apk已安装在测试机和对比机上

※重要：测试apk验证可用

※重要：测试apk打印结果正确

LOG工具

测试apk后台保存的打印结果正确

LOG工具已经安装在测试机和对比机上

若对比机不能用log工具则确认通过PC可以抓取LOG

LOG工具验证可用

※重要：LOG打印和正常保存

时间校准

※重要：测试机、对比机、辅助机时间和电脑时间都需要校准且同步，误差在2秒内

结果记录

测试结果记录表格具备

问题记录

测试问题记录表格具备

USB线

测试机和对比机是否需要连接USB线需确认

是否双卡

若测试机为双卡手机，测试时两个卡槽都插卡测试(BETA&EWP需按照用户反馈场景测试)

问题确认- Checklist

注意事项

描述

检查结果

备注说明

测试机log

问题log（Modem + AP+CHR），必要的Dump log

对比机log

问题需要对比机modem log，和测试机同步

问题规律

动态测试，若某个地方问题容易出现，缩小范围多测试几组数据，寻找规律，做基础的对比分析，举一反三

工具问题

若由于工具问题导致测不起来达30分钟，需要跟测试安排者确认，以调整测试方法或进行其他测试

死机/重启

测试过程中需要关注死机/重启等异常问题，记录和保存好log

异常/问题

测试中遇到任何无法确认或解决的问题/异常，需要跟测试安排者及时联系并确认

双卡测试

若测试机为双卡手机，测试结果需要有：双卡 + 对比机 三组数据

测试工具

用途

AresRT.APK

用于自动化测试以及记录手机信号状态，所在小区，所在的接入技术，驻留比例等

手机秒表

用于人工辅助计时

Beta Club

手机上LOG抓取

Beta Club使用说明

详见附件1

Iphone 测试工具

适用于对比机Iphone的测试工具，观测当前的信号及小区信息等

测试项目

主叫不通

测试目的

通过对比测试，发现及定位主叫不通的问题

预置条件

1）按照回访信息到达测试地点或路线，找到问题小区，找到信号强度相同或相近的点（CELL ID使用AresRT进行查看）

2）根据回访信息关闭或开启数据业务（若无明确信息请关闭数据业务），开始抓取log；

3）按照回访信息中的持机方式放置手机：左手持机、右手持机、是否使用耳机等以及使用耳机时手机的放置情况，若使用耳机，请确认是蓝牙耳机还是普通耳机，并确认耳机品牌

4）使用相同寻呼组的SIM卡或者使用同PN的SIM卡

5）按照用户投诉的网络制式进行匹配

6）主被叫测试，测试机和对比机要求在测试地点进行重启和开关飞行模式后在开始测试，如有特殊要求，按照要求测试（如复测时要求驻留相同频点等）。

测试步骤

1）优先以用户反馈网络制式和主副卡情况为准，且根据用户拨打场景选择测试方式。

2）测试机和对比机要求按照测试要求进行摆放（CSFB只要保证4G在同一小区即可，如果始终无法驻留到同一个小区，请抓取对应log，并记录当时的小区 ID，信号强度等相关信息）

3）参考用户使用场景，需要和用户确认，手持还是自由空间，与用户使用场景保持一致

4）使用手机的AresRT工具，test_call，参数设置：通话保持30S，间隔20S，被叫号码设成客服电话；Iphone手机无法安装AresRT，请手动拨打，10通为1组，先测试2组，看测试结果，如果结果差距<5，则加大测试量，加测3组，共测试5组；

5）测试时若测试机与对比机差异较大时（如呼通率），请测试人员互换测试机与对比机位置或转角再测试一组，以排除位置影响；如果测试时使用的某一张卡+测试机出现次数明显多于对比机，建议两张卡互换后，加测试1组，以排除单卡问题；

6）使用测试记录表，记录测试过程中每次通话的起止时间和问题出现的时间点等相关信息；

7）测试任务结束后，停止log并导入到便携机中确认测试机和对比机log有效，若log无效，请重新测试；

注：（10次为一组，一组LOG保存一次，这样避免由于其中一个LOG出现问题而无法分析的情况；至少抓取2组，如果2组的测试结果仍然无法明确表明问题是否复现或者问题的严重程度，可以继续增加，加测3组，共计5组，增加仍然以10次为一组）

检查点

1）拨通电话即记为成功

2）如果接入时延大于20s（从拨号开始到接通)则重点记录

测试工具

用途

AresRT.APK

用于记录手机信号状态，所在小区，所在的接入技术，驻留比例等

手机秒表

用于人工辅助计时

Beta Club

手机上LOG抓取

Beta Club使用说明

详见附件1

Iphone 测试工具

适用于对比机Iphone的测试工具，观测当期的信号及小区信息等

Horus

用于主叫辅助方保证同步发起呼叫，且输出主叫方的信息报告。

测试项目

被叫不通

测试目的

通过对比测试，发现及定位被叫不通的问题

预置条件

1）按照回访信息到达测试地点或路线，找到问题小区，找到信号强度相同或相近的点（CELL ID使用AresRT进行查看）

2）根据回访信息关闭或开启数据业务（若无明确信息请关闭数据业务），开始抓取log；

3）按照回访信息中的持机方式放置手机：左手持机、右手持机、是否使用耳机等以及使用耳机时手机的放置情况，若使用耳机，请确认是蓝牙耳机还是普通耳机，并确认耳机品牌；

4）使用相同寻呼组的SIM卡或者使用同PN的SIM卡；

5）按照用户投诉的网络制式进行匹配；

6）辅助机及辅助机内SIM卡是否有特殊要求？

7）主被叫测试，测试机和对比机要求在测试地点进行重启和开关飞行模式后在开始测试，如有特殊要求，按照要求测试（如复测时要求驻留相同频点等）。

测试步骤

1）优先以用户反馈网络制式和主副卡情况为准，联系主叫辅助方使用horus软件控制辅助机同时给测试机和对比机拨打。（EWP&Beta第三方测试人员无法使用者，使用两台辅助机做主叫配合测试）

2）测试机和对比机要求按照测试要求进行摆放（CSFB只要保证4G在同一小区即可-如果始终无法驻留到同一个小区，请抓取对应log，并记录当时的小区 ID，信号强度等相关信息）

3）参考用户使用场景，需要和用户确认，手持还是自由空间，与用户使用场景保持一致

4）主叫辅助方使用horus软件，（EWP&Beta第三方测试人员无法使用者，使用两台辅助机安装Beta Club做主叫配合测试），保持多台辅助机每次呼叫同步，呼叫10次，每次呼通成功后保持15S，每通间隔20s，共测试10组。

5）测试时若测试机与对比机差异较大时（如呼通率），请测试人员互换测试机与对比机位置或转角再测试一组，以排除位置影响；如果测试时使用的某一张卡+测试机出现次数明显多于对比机，建议两张卡互换后，加测试1组，以排除单卡问题；

6）使用测试记录表，记录测试过程中发现的问题和时间点等相关信息；

7）测试任务结束后，停止log并导入到便携机中确认测试机和对比机log有效，若log无效，请重新测试

注：（10次为一组，一组LOG保存一次，这样避免由于其中一个LOG出现问题而无法分析的情况；至少抓取2组，如果2组的测试结果仍然无法明确表明问题是否复现或者问题的严重程度，可以继续增加，加测3组，共计5组，增加仍然以10次为一组）

检查点

1）拨通电话即记为成功

2）主叫方需要提取horus的报告文件，确认工具运行正确，报告结果正常输出。（EWP&Beta第三方人员测试使用主叫辅助机，请记好辅助机拨打时间点及测试过程中出现的异常情况等）

3）如果被叫方发现被叫失败，需手动记录Iphone失败时间点，测试机可使用AresRT对应脚本，测试后导出报告结果。

测试工具

用途

AresRT.APK

用于记录手机信号状态，所在小区，所在的接入技术，驻留比例等

Call Center

用于拨打测试机和对比机，并保持通话。(EWPΒ第三方员工测试不使用)

Beta Club

手机上LOG抓取

Beta Club使用说明

详见附件1

测试项目

长保掉话

测试目的

通过对比测试，发现及定位掉话的问题

预置条件

1）按照回访信息到达测试地点或路线，找到问题小区，找到信号强度相同或相近的点（CELL ID使用AresRT进行查看）

2）根据回访信息关闭或开启数据业务（若无明确信息请关闭数据业务），开始抓取log；

3）按照回访信息中的持机方式放置手机：左手持机、右手持机、是否使用耳机等以及使用耳机时手机的放置情况，若使用耳机，请确认是蓝牙耳机还是普通耳机，并确认耳机品牌

4）使用相同寻呼组的SIM卡或者使用同PN的SIM卡；

5）按照用户投诉的网络制式进行匹配；

6）测试机和对比机要求在测试地点进行重启和开关飞行模式后在开始测试，如有特殊要求，按照要求测试（如复测时要求驻留相同频点等）。

测试步骤

1）优先以用户反馈网络制式和主副卡情况为准，使用Call Center软件同步呼叫中心，同时给测试机和对比机拨打；

2）测试机和对比机要求按照测试要求进行摆放（CSFB只要保证4G在同一小区即可，如果始终无法驻留到同一个小区，请抓取对应log，并记录当时的小区 ID，信号强度等相关信息）；

3）参考用户使用场景，需要和用户确认，手持还是自由空间，与用户使用场景保持一致；

4）测试时长保证30分钟为一组，如果有条件（比如用户配合），建议采集4组数据，共计120分钟，如果测试机掉话，对比机也要保持10s之后再挂断对比机（可能对比机信号也很差了，等10s不容易漏问题）。

5）测试时若测试机与对比机差异较大时（如呼通率），请测试人员互换测试机与对比机位置或转角再测试一组，以排除位置影响；如果测试时使用的某一张卡+测试机出现次数明显多于对比机，建议两张卡互换后，加测试1组，以排除单卡问题；

6）使用测试记录表，记录测试过程中发现的问题和时间点等相关信息；

7）测试任务结束后，停止log并导入到便携机中确认测试机和对比机log有效，若log无效，请重新测试；

注：（每一个小时为一组，一组LOG保存一次，这样避免由于其中一个LOG出现问题而无法分析的情况；至少抓取2组，如果2组的测试结果仍然无法明确表明问题是否复现或者问题的严重程度，可以继续增加，增加仍然以30分钟为一组）

检查点

1）拨通电话后确认能正常收音即记为成功

2）需要提取Call Center的报告文件，确认工具运行正确，报告结果正常输出。（EWP&Beta第三方人员测试使用辅助机，请记好辅助机拨打时间点及测试过程中出现的异常情况等）

3）如果发现出现掉话现象，需记录准确掉话时间点。

测试工具

用途

AresRT.APK

用于记录手机信号状态，所在小区，所在的接入技术，驻留比例等

Call Center

用于拨打测试机和对比机，并保持通话。(EWPΒ第三方员工测试不使用)

Beta Club

手机上LOG抓取

Beta Club使用说明

详见附件1

测试项目

短呼掉话

测试目的

通过对比测试，发现及定位掉话的问题

预置条件

1）按照回访信息到达测试地点或路线，找到问题小区，找到信号强度相同或相近的点（CELL ID使用AresRT进行查看）

2）根据回访信息关闭或开启数据业务（若无明确信息请关闭数据业务），开始抓取log；

3）按照回访信息中的持机方式放置手机：左手持机、右手持机、是否使用耳机等以及使用耳机时手机的放置情况，若使用耳机，请确认是蓝牙耳机还是普通耳机，并确认耳机品牌；

4）使用相同寻呼组的SIM卡或者使用同PN的SIM卡；

5）按照用户投诉的网络制式进行匹配；

6）测试机和对比机要求在测试地点进行重启和开关飞行模式后在开始测试，如有特殊要求，按照要求测试（如复测时要求驻留相同频点等）。

测试步骤

1）优先以用户反馈网络制式和主副卡情况为准，使用Call Center软件同步呼叫中心，同时给测试机和对比机拨打；

2）测试机和对比机要求按照测试要求进行摆放（CSFB只要保证4G在同一小区即可，如果始终无法驻留到同一个小区，请抓取对应log，并记录当时的小区 ID，信号强度等相关信息）；

3）参考用户使用场景，需要和用户确认，手持还是自由空间，与用户使用场景保持一致；

4）测试时长保证每通5分钟，10通电话为一组。如果有条件（比如用户配合），建议采集2组数据，共计100分钟（实际加上通话间隔或者软件调试约120分钟）；

5）测试时若测试机与对比机差异较大时（如呼通率），请测试人员互换测试机与对比机位置或转角再测试一组，以排除位置影响；如果测试时使用的某一张卡+测试机出现次数明显多于对比机，建议两张卡互换后，加测试1组，以排除单卡问题；

6）使用测试记录表，记录测试过程中发现的问题和时间点等相关信息；

7）测试任务结束后，停止log并导入到便携机中确认测试机和对比机log有效，若log无效，请重新测试抓取；

注：（LOG保存每10通电话为一组，一组LOG保存一次，这样避免由于其中一个LOG出现问题而无法分析的情况；至少抓取2组，如果2组的测试结果仍然无法明确表明问题是否复现或者问题的严重程度，可以继续增加，增加仍然以10通电话为一组）

检查点

1）拨通电话后确认能正常收音即记为成功

2）需要提取Call Center的报告文件，确认工具运行正确，报告结果正常输出。（EWP&Beta第三方人员测试使用辅助机，请记好辅助机拨打时间点及测试过程中出现的异常情况等）

3）如果发现出现掉话现象，需记录准确掉话时间点。

测试工具

用途

AresRT.APK

用于记录手机信号状态，所在小区，所在的接入技术，驻留比例等

SetAudioParameters.apk

需要时导出音频寄存器相关LOG时使用

Beta Club

手机上LOG抓取(Hisi平台日志配置选择语音数据–filedtest.cfg，高通平台日志配置策略选项DIAG_CALL.cfg)

Beta Club使用说明

详见附件1

测试项目

单通或者双不通

测试目的

通过对比测试，发现及定位单通或者双不通的问题

预置条件

1）按照回访信息到达测试地点或路线，找到问题小区，找到信号强度相同或相近的点（CELL ID使用AresRT进行查看）；

2）根据回访信息关闭或开启数据业务（若无明确信息请关闭数据业务），开始抓取log；

3）按照回访信息中用户使用方式的持机方式放置手机：左手持机、右手持机、是否使用耳机等以及使用耳机时手机的放置情况，若使用耳机，请确认是蓝牙耳机还是普通耳机，并确认耳机品牌；（如果条件允许，最好当面看用户持机方式，确认是否堵孔）

4）关于测试机及对比机要求，非特别说明时：测试机A，对比机B，辅助机C，辅助机D。辅助机C和辅助机D，采用相同型号机器（最好与测试机同平台），对比机和辅助机，都不使用Iphone；（高通同平台对比机：MLA，Hisi同平台对比机：KNT，如果是电信卡建议选用MHA）

5）关于测试卡及对比卡的要求：测试卡a，对比卡b，辅助卡c，辅助卡d。

非特别说明时：ab使用同制式同运营商的卡，cd使用同制式同运营商的卡；（使用相同寻呼组的SIM卡或者使用同PN的SIM卡，在无特殊要求时辅助机不要使用电信卡）；

6）按照用户投诉的网络制式进行匹配。

7）测试机和对比机要求在测试地点进行重启和开关飞行模式后在开始测试，如有特殊要求，按照要求测试（如复测时要求驻留相同频点等）。

测试步骤

1）优先以用户反馈网络制式和主副卡情况为准，根据用户反馈，确定主叫拨打给辅助方还是被叫接听辅助方来电（即根据用户反馈上行问题还是下行问题）。

2）如果确定是下行问题，请采用电话会议方式进行测试，辅助机主叫，测试机+对比机被叫，确保主叫端音源相同；

3）如果确认是上行问题，测试机和对比机所采用的辅助机保持一致；

4）测试机和对比机要求按照测试要求进行摆放（CSFB只要保证4G在同一小区即可，如果始终无法驻留到同一个小区，请抓取对应log，并记录当时的小区CELL ID，LAC，信号强度等相关信息）

5）参考用户使用场景，需要和用户确认，手持还是自由空间，动态使用还是静态使用，与用户使用场景保持一致，特别是上行单通类问题，需要明确用户的握持方式是否有堵mic情况。

6）测试过程中，测试时循环播放预料（保证每通2分钟左右），5通电话为一组，测试3组，保持音源稳定。如果有条件（比如用户配合），建议采集3组数据（必现条件下测试3组，前期未复现时酌情增加测试量），共计30分钟（实际加上通话间隔或者软件调试约35分钟）。

7）使用测试记录表，测试需提供起止时间+出现问题时间+出现无声时的语料开始片段；出现无声也不要立刻停下来，等无声恢复或掉话后再停下，在测试人员听到无声时，可对手机说出“XX手机听到无声现象”，如果通话一直无声，测试机与对比机均保持2分钟挂断即可。

8）测试任务结束后，停止log并导入到便携机中确认测试机和对比机log有效，若log无效，请重新测试；

注：（每5通电话为一组，一组LOG保存一次，这样避免由于其中一个LOG出现问题而无法分析的情况；若条件满足推荐抓取3组，如果3组的测试结果仍然无法明确表明问题是否复现或者问题的严重程度，可以继续增加，增加仍然以5通为一组）

检查点

1）拨通电话后确认能正常收音即记为成功

2）需要提取Call Center的报告文件，确认工具运行正确，报告结果正常输出。（EWP&Beta第三方人员测试使用辅助机，请记好辅助机拨打时间点及测试过程中出现的异常情况等）

3）如果发现出现掉话现象，需记录准确掉话时间点。

测试工具

用途

AresRT.APK

用于记录手机信号状态，所在小区，所在的接入技术，驻留比例等

SetAudioParameters.apk

需要时导出音频寄存器相关LOG时使用

Beta Club

手机上LOG抓取(Hisi平台日志配置选择语音数据–filedtest.cfg，高通平台日志配置策略选项DIAG_CALL.cfg)

Beta Club使用说明

详见附件1

测试项目

断续或者杂音

测试目的

通过对比测试，发现及定位断续或者杂音的问题

预置条件

1）按照回访信息到达测试地点或路线，找到问题小区，找到信号强度相同或相近的点（CELL ID使用AresRT进行查看）；

2）根据回访信息关闭或开启数据业务（若无明确信息请关闭数据业务），开始抓取log；

3）按照回访信息中用户使用方式的持机方式放置手机：左手持机、右手持机、是否使用耳机等以及使用耳机时手机的放置情况，若使用耳机，请确认是蓝牙耳机还是普通耳机，并确认耳机品牌（如果条件允许，最好当面看用户持机方式，确认是否堵孔）；

4）关于测试机及对比机要求，非特别说明时：测试机A，对比机B，辅助机C，辅助机D。辅助机C和辅助机D，采用相同型号机器（最好与测试机同平台），对比机和辅助机，都不使用Iphone；（高通同平台对比机：MLA，Hisi同平台对比机：KNT，如果是电信卡建议选用MHA）

5）关于测试卡及对比卡的要求：测试卡a，对比卡b，辅助卡c，辅助卡d。

非特别说明时：ab使用同制式同运营商的卡，cd使用同制式同运营商的卡；（使用相同寻呼组的SIM卡或者使用同PN的SIM卡，在无特殊要求时辅助机不要使用电信卡）；

6）按照用户投诉的网络制式进行匹配。

7）主被叫测试，测试机和对比机要求在测试地点进行重启和开关飞行模式后在开始测试，如有特殊要求，按照要求测试（如复测时要求驻留相同频点等）。

测试步骤

1）优先以用户反馈网络制式和主副卡情况为准，根据用户反馈，确定主叫拨打给辅助方还是被叫接听辅助方来电（即根据用户反馈上行问题还是下行问题）；

2）如果确定是下行问题，请采用电话会议方式进行测试，辅助机主叫，测试机+对比机被叫，确保音源相同；

3）如果确认是上行问题，测试机和对比机所采用的辅助机保持一致；

4）测试机和对比机要求按照测试要求进行摆放（CSFB只要保证4G在同一小区即可-如果始终无法驻留到同一个小区，请抓取对应log，并记录当时的小区CELL ID，LAC，信号强度等相关信息）；

5）参考用户使用场景，需要和用户确认，手持还是自由空间，动态使用还是静态使用，与用户使用场景保持一致；

6）测试过程中，测试时循环播放预料（保证每通5分钟左右），2通电话为一组，测试3组，保持音源稳定。如果有条件（比如用户配合），建议采集3组数据（必现条件下测试3组，前期未复现时酌情增加测试量），共计30分钟（实际加上通话间隔或者软件调试约35分钟）。

7）使用测试记录表，测试需提供起止时间+出现问题时间+出现杂音断续的语料片段；出现断续也不要立刻停下来，等断续恢复或掉话后再停下，在测试人员听到杂音断续时，可对手机说出“XX手机听到杂音/断续/卡顿现象”。

8）测试任务结束后，停止log并导入到便携机中确认测试机和对比机log有效，若log无效，请重新测试

注：（log保存每2通电话为一组，一组LOG保存一次，这样避免由于其中一个LOG出现问题而无法分析的情况；若条件满足推荐抓取3组，如果3组的测试结果仍然无法明确表明问题是否复现或者问题的严重程度，可以继续增加，增加仍然以2通电话为一组）

检查点

1）拨通电话后确认能正常收音即记为成功

2）需要提取Call Center的报告文件，确认工具运行正确，报告结果正常输出。（EWP&Beta第三方人员测试使用辅助机，请记好辅助机拨打时间点及测试过程中出现的异常情况等）

3）如果发现出现掉话现象，需记录准确掉话时间点。

测试工具

用途

AresRT.APK

用于记录测试机信号状态，所在小区，所在的接入技术，驻留比例等

xDevice

用于记录对比机信号状态，所在小区，所在的接入技术，驻留比例等（此工具现在EWP&Beta第三方员工不提供使用）

Beta Club

手机上LOG抓取

Horus

PC端可以同步控制AresRT和xDevice。（此工具现在EWP&Beta第三方员工不提供使用）

测试项目

乒乓切换

测试目的

通过对比测试，发现网络频繁切换的问题

预置条件

1）按照回访信息到达测试地点或路线，找到问题小区（如需要复测且已知频点，保持测试机与对比机频点一致），找到信号强度相同或相近的点（CELL ID使用AresRT进行查看，Hisi平台安装AresRT也能看到频点，高通只能连接QXDM查看）

2）根据回访信息关闭或开启数据业务（若无明确信息请关闭数据业务，测试CS域驻留信息），开始抓取log；

3）按照回访信息中的持机方式放置手机：左手持机、右手持机、桌面平放等

4）区分双卡在位还是单卡在位

5）按照用户投诉的网络制式进行匹配

测试步骤

1）优先以用户反馈网络制式和主副卡情况为准，根据用户反馈，确定用户上报问题地点信号强度情况，是否为多小区交接点。

2）使用AresRT进行驻留任务观察等；

3）测试机和对比机要求按照测试要求进行摆放（尽量保证注册到同一小区-如果始终无法驻留到同一个小区，请抓取对应log，并记录当时的小区 ID，信号强度等相关信息）；

4）参考用户使用场景，需要和用户确认，手持还是自由空间，若是摆放，尽量精确到摆放的朝向与用户使用场景保持一致。

5）测试过程中，需要在每轮测试时长到一半的时候交换测试机与对比机的位置，特别关注信号在某个制式上相当稳定时，位置交换带来的信号强度变化。

6）测试时长保证每轮30分钟为一组。如果有条件（比如用户配合），建议采集2组数据，共计60分钟（实际加上准备或者软件调试约70分钟）。

7）使用测试记录表，记录测试过程中发现的问题和时间点等相关信息

8）测试任务结束后，停止log并导入到便携机中确认测试机和对比机log有效，若log无效，请重新测试

注：（log保存每轮30分钟为一组，一组LOG保存一次，这样避免由于其中一个LOG出现问题而无法分析的情况；若条件满足推荐抓取2组，如果2组的测试结果仍然无法明确表明问题是否复现或者问题的严重程度，可以继续增加，增加仍然以一个小时为一组）

检查点

1）拨通电话后确认能正常收音即记为成功

2）需要对AresRT的驻留界面和切换时间点截图。

3）建议手动也记录切换时间点，避免工具遗漏。

测试工具

用途

AresRT.APK

用于记录测试机信号状态，所在小区，所在的接入技术，驻留比例等

xDevice

用于记录对比机信号状态，所在小区，所在的接入技术，驻留比例等（此工具现在EWP&Beta第三方员工不提供使用）

Beta Club

手机上LOG抓取

Horus

PC端可以同步控制AresRT和xDevice。（此工具现在EWP&Beta第三方员工不提供使用）

测试项目

掉网不恢复

测试目的

通过对比测试，发现掉网不恢复的问题

预置条件

1）按照回访信息到达测试地点或路线，找到问题小区（如需要复测且已知频点，保持测试机与对比机频点一致），找到信号强度相同或相近的点（CELL ID使用AresRT进行查看，Hisi平台安装AresRT也能看到频点，高通只能连接QXDM查看）；

2）根据回访信息关闭或开启数据业务（若无明确信息请关闭数据业务，测试CS域驻留信息），开始抓取log；

3）按照回访信息中的持机方式放置手机：左手持机、右手持机、桌面平放等

4）区分双卡在位还是单卡在位；

5）按照用户投诉的网络制式进行匹配；

测试步骤

1）优先以用户反馈网络制式和主副卡情况为准，根据用户反馈，确定用户上报问题地点信号强度情况，是否为多小区交接点。

2）使用AresRT进行驻留任务观察等；

3）测试机和对比机要求按照测试要求进行摆放（尽量保证注册到同一小区-如果始终无法驻留到同一个小区，请抓取对应log，并记录当时的小区 ID，信号强度等相关信息）；

4）参考用户使用场景，需要和用户确认，手持还是自由空间，若是摆放，尽量精确到摆放的朝向与用户使用场景保持一致。

5）测试过程中，需要在每轮测试时长到一半的时候交换测试机与对比机的位置，特别关注信号在某个制式上相当稳定时，位置交换带来的信号强度变化。

6）如果用户在弱场下掉网后不恢复，可人工制造掉网场景，比如寻找测试环境比较差的点，或人工屏蔽信号等方式，导致测试机掉网5分钟后，将测试机转到网络环境好的地点继续测试；

7）测试时长保证每轮20分钟为一组。如果有条件（比如用户配合），建议采集3组数据，共计60分钟（实际加上准备或者软件调试约70分钟）。

8）使用测试记录表，记录测试过程中发现的问题和时间点等相关信息

9）测试任务结束后，停止log并导入到便携机中确认测试机和对比机log有效，若log无效，请重新测试

注：（log保存每轮20分钟为一组，一组LOG保存一次，这样避免由于其中一个LOG出现问题而无法分析的情况；若条件满足推荐抓取3组，如果3组的测试结果仍然无法明确表明问题是否复现或者问题的严重程度，可以继续增加，增加仍然以一个小时为一组）

检查点

1）拨通电话后确认能正常收音即记为成功

2）需要对AresRT的驻留界面和切换时间点截图。

3）建议手动也记录切换时间点，避免工具遗漏。

测试工具

用途

AresRT.APK

用于记录测试机信号状态，所在小区，所在的接入技术，驻留比例等

xDevice

用于记录对比机信号状态，所在小区，所在的接入技术，驻留比例等（此工具现在EWP&Beta第三方员工不提供使用）

Beta Club

手机上LOG抓取（modem+IP log）

Horus

PC端可以同步控制AresRT和xDevice。（此工具现在EWP&Beta第三方员工不提供使用）

测试项目

数据业务问题

测试目的

通过对比测试，发现数据业务连接异常等问题

预置条件

1）按照回访信息到达测试地点或路线，找到问题小区，找到信号强度相同或相近的点（CELL ID使用AresRT进行查看）；

2）根据回访信息了解到用户手机的开关情况（GPS开关、蓝牙开关等），开启手机后台AP日志选项（beta版本手机需要勾选IP 日志，需要时勾选tcpdump log, TCP日志配置：文件大小选择100M,文件个数选择50个），同时保证与用户后台程序一致或使用应用一致，开始抓取log；

备注：EWP测试商用机器安装beta 俱乐部不能直接抓取tcpdump log，因此测试时正常抓取故障机modem log+ap log，另带一台与故障机版本相同的机器修改配置后抓取tcpdump log。Hisi平台/高通平台手机需要root并修改配置抓取tcpdump log。

3）测试机与对比机内SIM制式及运营商相同；

4）按照回访信息中的持机方式放置手机：左手持机、右手持机、桌面平放等；

5）区分双卡在位还是单卡在位；

6）按照用户投诉的网络制式进行匹配；

测试步骤

1）优先以用户反馈网络制式和主副卡情况为准，根据用户反馈，确定用户上报问题地点信号强度情况，是否为多小区交接点。

2）测试机和对比机要求按照测试要求进行摆放（尽量保证注册到同一小区-如果始终无法驻留到同一个小区，请抓取对应log，并记录当时的小区 ID，信号强度等相关信息）

3）参考用户使用场景，需要和用户确认，手持还是自由空间，若是摆放，尽量精确到摆放的朝向与用户使用场景保持一致。

4）

EWPΒ

问题需要手动打开网页或手动使用用户出现问题的应用测试；

5）测试过程中，需要在每轮测试网页数量加载到一半的时候交换测试机与对比机的位置，特别关注信号在某个制式上相当稳定时，位置交换带来的加载时长变化。（测试网页加载不出情况时，同时开启其他使用网络的APP进行测试，以排除浏览器问题。）

6）测试时长保证个网页加载20次为一组，间隔8s（静态），15s（动态），30s无法加载完成，工具识别为超时。如果有条件（比如用户配合），建议采集2组数据。

7）使用测试记录表，记录测试过程中发现的问题和时间点等相关信息；

8）测试任务结束后，停止log并导入到便携机中确认测试机和对比机log有效，若log无效，或缺少ap log请重新测试

注：（log保存每轮为一组，一组LOG保存一次，这样避免由于其中一个LOG出现问题而无法分析的情况；若条件满足推荐抓取2组，如果2组的测试结果仍然无法明确表明问题是否复现或者问题的严重程度，可以继续增加，增加仍然以每个网页20次，共计40次网页加载为一组）

检查点

1）同步控制测试机与对比机，让每次加载网页能够保持同步

2）测试完成后导出AresRT的表格或记录详细测试结果，并输出统计结论。