Workflow
2023年数字质量报告
Applause·2024-06-19 09:40

报告行业投资评级 未提及相关内容 报告的核心观点 - 数字质量是交叉学科,需全面评估应用或数字体验的不同组件,开发组织在追求卓越方面还有很长的路要走 [5] - 随着个性化体验成为常态,组织需评估更多设备组合、配置、工作流程和维度的功能和用户体验,测试矩阵和应用本身变得更复杂难管理 [6] - 不同公司在数字质量方面有不同方法和进展路径,可使用简单框架来衡量数字质量工作的结构、效率、有效性和可扩展性 [7] 根据相关目录分别进行总结 方法论 - 分析2022年1月1日至12月31日执行的代表性样本封闭测试周期结果,测试涵盖网站、应用、物联网设备、移动网页和移动应用等,涉及20多万个漏洞、数万个设备和数千个设备/操作系统/浏览器组合 [8] - 测试范围包括全球167个移动品牌、2296个移动型号、21个移动操作系统、396个移动操作系统版本、36个移动网页浏览器、573个移动运营商等,以及多种支付方式和设备 [10] 功能测试 - 最终由用户决定应用是否适用,组织需确保应用基本功能,但在规定时间内对各种设备和操作系统配置进行测试对许多团队是挑战,且团队常优先测试而忽视测试策略和日常工作 [11] - 分析的功能测试数据中,功能、视觉和内容缺陷占所有发现漏洞的90%以上,崩溃问题无逐年改善迹象 [16] - 以一家全球金融科技公司为例,该公司与Applause合作,Applause负责质量保证功能,提供最佳实践和测试策略指导,帮助公司减少生产中的漏洞,深入了解常见功能问题,并拥有可按需扩展的质量保证团队 [18][19] - 提出数字质量出现、数字质量基础、数字质量扩展、数字质量卓越四个阶段的功能测试框架,各阶段有不同的测试活动和流程特点 [23][24][25][26] - 建议组织主动审视测试实践,理解当前状态,复制有效做法并解决问题;为测试策略管理和数据评估留出时间;认识到卓越是不断变化的目标,需持续投资质量;有效利用测试自动化,选择合适的测试进行自动化 [28][29][30][31] - 推荐单元测试、回归测试、冒烟测试、集成测试和性能测试作为前5个自动化测试类别 [33][34] 可访问性测试 - 全球约16%的人口有某种形式的残疾,关注可访问性有助于所有用户,组织需符合全球可访问性合规要求,否则会面临法律风险,如2022年美国有2387起网络可访问性诉讼,同比增长143% [35][36] - 分析的可访问性测试数据中,屏幕阅读器缺陷占所有可访问性错误的绝大多数,各类型错误分布与去年基本一致 [45] - 以一家视频会议解决方案提供商为例,该公司建立资源库,推动基于同理心的包容性设计计划,与Applause合作提供教育课程 [41][42][43][44] - 提出数字质量出现、数字质量基础、数字质量扩展、数字质量卓越四个阶段的可访问性测试框架,各阶段有不同的测试活动和流程特点 [50][51][52][53] - 建议组织了解并遵守当地和区域法律;在组织中寻找可访问性倡导者并获得高管支持;优先考虑屏幕阅读器的设计,以解决大部分可访问性问题 [55][56][57] 本地化测试 - 进入新市场,应用需反映当地语言、价值观、偏好和流程,小错误可能导致客户放弃交易,影响业务 [60] - 分析的本地化测试数据中,缺失翻译和翻译不佳的问题较为突出 [67] - 提出数字质量出现、数字质量基础、数字质量扩展、数字质量卓越四个阶段的本地化测试框架,各阶段有不同的测试活动和流程特点 [72][73][74] - 建议组织维护翻译词汇表,进行双盲验证以确保准确性和细微差别;将客户支持和购买后体验纳入本地化工作 [77][78] - 以一家GPS公司为例,该公司通过与Applause测试人员合作,发现并纠正了巴黎市场导航翻译问题 [79] 客户旅程测试 - 评估数字质量需考虑客户的多方面指标,客户旅程测试对于发现和解决用户体验问题和运营准备问题至关重要 [81][84] - 客户旅程摩擦通常分为功能错误、支付问题、用户体验差和运营准备不足四类 [83][84] - 随着人工智能和语音技术在个性化和客户支持中的作用增加,组织需制定策略将聊天机器人、交互式语音应答和人工智能融入客户接触点,并进行充分测试和机器学习训练 [86][87] - 建议组织利用数据确定客户流失点并进行测试;认识到用户体验和客户旅程测试是持续的评估过程,需根据产品变化和市场进入情况进行调整 [88][89][90] 支付测试 - 随着数字钱包、替代支付方式和“先买后付”等选项的普及,支付测试需适应并涵盖这些新支付工具和购买路径,必须进行真实世界的测试 [92] - 分析的支付测试数据中,功能错误占所有支付漏洞的80%以上,各类型错误分布与去年基本一致 [96][97] - 提出数字质量出现、数字质量基础、数字质量扩展、数字质量卓越四个阶段的支付测试框架,各阶段有不同的测试活动和流程特点 [100][101][102][103] - 建议组织使用真实支付工具进行测试,利用数据驱动支付方式决策,为特定类型的交易留出足够的测试时间 [106][107] 附录 - 功能测试数据:提供了不同行业和地区的平均设备覆盖比较,以及最受欢迎的设备配置测试情况 [111][112][115][118][120] - 可访问性测试数据:提供了不同行业和地区的平均设备覆盖比较,以及最受欢迎的设备配置测试情况 [123][124][127][129][131] - 本地化测试数据:提供了不同行业和地区的平均设备覆盖比较 [134][137] - 支付测试数据:提供了不同地区的平均支付方式测试数量和最受欢迎的支付方式测试情况 [140][142]