多元化定制服务方案,有效降低测试成本

关于QQ
QQ由腾讯公司于1999年推出,并于2003年在Symbian系统首次上线手机QQ。作为一款横跨PC和移动的即时通信和社交平台,QQ支持在线聊天、视频语音通话、点对点断点续传文件、QQ邮箱等多种功能,并不断推出符合年轻用户需求的创新功能,例如支持用户根据个人需求和兴趣快速扩关系的“扩列”以及精准匹配用户兴趣的内容社交平台“看点”等。截至2020年3月,QQ月活跃用户为7.68亿。
背景
手机QQ,作为领航级的移动端应用,已随着互联网的浪潮航行近二十年之久,成之惟艰,除了功能等策略方面的影响,质量与稳定也是保证QQ安全航行的重要因素之一。提升产品品质,为数亿用户提供卓越的产品体验,是手机QQ团队多年的不懈追求。
优测作为腾讯旗下的一站式云测试平台,已为手机QQ服务数年,为其提供最优机型选取方案、用例设计与维护、核心功能测试、Rom测试、自动化测试和回归测试等服务,有效提高测试效率,保证产品上线质量。
|
|
|
安卓碎片化严重,目标机型庞大 | 海量真机实验室,实时更新设备库,覆盖市场上主流机型,满足测试机型需求 | 保证手机QQ测试机型库,减少大量采购、管理设备成本 |
Crash分布机型广,随机率高 | 定制机型选取等多方位专属测试方案组建专属团队进行追踪,解决手机QQ测试问题 | 实现测试最佳效果、节省测试人力 |
多版本,快节奏迭代,测试资源紧缺 | 提供APP自动化框架体系、回归测试、项目管理等多元化服务 | 节约测试时间,提高测试效率,保证产品上线质量 |
海量真机实验室,减少客户采购、管理设备成本
手机QQ用户基数庞大,兼容性适配涉及千余种机型。而安卓机型碎片化严重,市场中有大量智能机品牌和庞大的机型数量,让QQ团队面临着机型适配困局,采购、管理设备成本高等问题。
优测提供海量真机实验室,实时更新设备库,覆盖市面99%主流机型,TOP新机型实时更新。可实现SDK、厂商、分辨率、特殊屏幕等机型覆盖,为手机QQ团队测试机型库提供充足保障。

多种定制化服务方案,精准定位问题
同时手机QQ crash分布功能模块多,机型广随机性大,Crash难以定位。优测对应提供定制专属服务方案,并组建专属团队进行追踪。在机型选取、用例设计、脚本开发、使用场景等方面,为其提供定制化方案:
1.机型选取方案
提供多维度最优机型组合,选取出的300款机型组合,可覆盖TOP700机型的所有属性
2.机型适配测试方案
针对QQ功能需求,结合Android底层功能,设计QQ专属的兼容性用例, 开发自动化脚本,实施用例测试、用户场景测试。 结合Android的底层功能和QQ功能,做成QQ专属的兼容性用例, 使其成为更加贴合产品的、具备可移植性的适应性测试,测试效果十分显著。如手机QQ某一版本的兼容性问题, 较之前未采用该专属兼容服务多检测出207个问题,额外减少对1.2亿使用用户的影响,使问题率降低了13%。
3.稳定性测试方案
通过智能遍历算法,用多重交付和持续集成的方式,进行自动化测试。 每个月发现Crash200+,有效地定位了随机性的Crash问题。
4.ROM测试方案
通过横纵向分析各大ROM差异,对具体功能进行测试, 可准确发现ROM问题,减少对用户的影响。横向分析安卓各大厂商(华为、小米、OPPO、VIVO等)ROM之间(MIUI、FlyMe、华为定制ROM、VIVO定制ROM、OPPO定制ROM)的差异功能, 纵向分析安卓各大版本ROM之间的差异功能,整合成ROM功能点。针对手机QQ的具体功能,结合每个大版本ROM功能点,定制专项用例,测试专家根据用例进行专项测试。
十年研发&测试经验,提供腾讯标准解决方案
手机QQ大版本迭代速度快,功能多且复杂,并行小版本众多,测试周期短,几天到一周不等。手机QQ团队兼容性测试人员人力紧缺, 若进行招聘,人员成本高,耗时耗资。
优测多年深耕兼容性测试领域,为其提供一站式测试服务。多元化服务贯穿手机QQ整个测试周期,解决测试需求。从项目管理、后期维护、回归测试等多方面保证手机QQ产品质量。
1.独家研发自动化框架体系
提供多种自动化测试服务,包括App智能遍历测试、功能测试、用例测试、定制化测试。实现App在各种不同品牌、系统、 硬件的手机上,进行自动化测试与调度,帮助用户了解App适配情况,节约测试时间,提高测试效率。
2.回归测试
优测针对己方及用户反馈的bug,进行机型的支持与回归验证。 例:针对公共问题、机型问题(包含评论区追加的各机型)、开发沟通验证问题、 用户反馈的问题,进行bug回归,总计回归733个机型。
3.项目过程管理
整体测试由单独PM跟进,专人专项。项目管理包括以下环节: 项目过程中需求变更管理、整体方案的进度监控、项目过程中监控及成果监控、 项目过程中的实时沟通确认、测试结束后的问题跟进、下一次测试方案改善等,流程完善,运行流畅。
4.远程bug验证
优测提供云真机、设备云联服务,对于提出的问题开发侧需真机调试时,可以远程使用出现问题的机器,提高问题的解决率。
5.持续改善
对用户反馈、问题模块、新增与变更模块、重点模块进行跟进,优化产品与服务,保证服务质量。
效果
- 优测为QQ团队每年节省终端采购成本和测试人力成本达数百万,有效节约测试支出,及时发现新机型潜在问题、现网问题等。同时,借助优测提供的定制服务方案,手机QQ有效降低了crash风险。整体实现降本增效,高质量完成应用质量保障任务。