CTS Android P测试与O测试变化及注意事项

:P版的CTS测试过程中,不要拔手机,否则最终结果无法完整测试出所有模块;

         例如,已测试到100个模块时拔掉了手机,最终生成的结果就只有100个模块;

 

 

一、Case数量增加(以Pgo项目为例,64bit项目double)

      a、CTS测试增加8万条,module增至320

      b、增加CTS-INSTANT测试项目,module 48,1.3万条(13338)、64bit 13338,以实际为准;

      c、VTS测试增加约2K条,module 107(64bit double)

      d、New Device项目CTS verifier 会增加CameraITS测试;

二、测试指令变化

      Test Item         Run Command             Retry Command            Run With Shard
       CTS                  run cts                        run retry -r                   --shard-count
       CTS-INSTANT    run cts-instant             run retry -r                   --shard-count
       CTS -ON-GSI     run cts -on-gsi             run cts-on-gsi-retry -r   --shard-count
       GTS                  run gts                        run retry -r                   --shard-count
       VTS                  run vts                        run vts -r                      --shards
       STS run sts-engbuild                            run retry -r       

       注意:STS retry时,下发retry指令时不能加-o这个参数;

   测试VTS前要执行adb root

   测试GSI前要执行adb unroot

 三、测试条件注意事项(以下是在保证O测试的条件基础上需要注意的地方)

       a、cts测试需要普通SIM卡,UICC卡(即常说的白卡)、香港SIM卡

           android.net.cts.ConnectivityManagerTest#testOpenConnection 

           该case测试需要:翻墙wifi+国外data的条件方能pass

       b、GTS需要普通SIM卡,增加了telephony的测项;

       c、CTS-ON-GSI需要UICC卡

       d、VTS测试需要插入双sim卡,如果不插SIM卡则可能会有900多条fail(32bit,64bit double)

       注意:插入白卡测试时,如果仍然fail,可以更换卡槽插入复测;

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章