分析：用户体验监控体系的闭环

本文将围绕用户端异常构建一套互联网产品的用户体验监控系统；通过收集、分析、治理和验证用户在使用产品过程中遇到的痛点和瘙痒，实现定量产品用户体验和数据驱动产品决策的目的，为用户创造终极的产品体验。当用户使用互联网产品时，不可避免地会遇到一些异常或错误，如应用程序卡住、崩溃，或购物车、视频播放、支付等，这些异常或多或少会影响用户的产品体验；如果大规模用户遇到类似的异常，则需要改善产品的用户体验。1、监控用户体验是提高产品能力的必要条件。产品上线后，如果无法感知产品在所有用户端的运行，就无法及时获得产品的用户体验是好是坏；无法充分掌握产品的真实用户体验，准确提升产品体验。针对这种情况，需要通过技术手段解决；实时监控和收集和报告终端用户的体验数据，指导产品的体验管理策略；通过比较治理前后的数据来验证治理效果，实现用户体验监控系统的闭环。1.收集是指收集用户在使用产品过程中遇到的所有体验问题。可分为终端和体验问题两个维度。1)不同的终端采集方式不同，主要分为三种类型:移动终端、浏览器终端和小程序终端。Androidapp主要包括Androidapp、iOSApp等，通过嵌入SDK，通过日志报告用户的异常数据，以达到收集的目的。浏览器主要包括PCwebb、WAP、App嵌H5等。小程序端主要包括微信小程序、支付宝小程序、百度小程序、今日头条小程序等；两个终端通过引入异常JS探针报告用户的异常数据，以实现收集的目的。2)体验问题还包括两类:系统性能异常和业务状态异常。系统性能异常是指由系统技术原因引起的异常信息，如HTTP状态异常、HTTP延迟异常、Ajax状态异常、Ajax延迟异常、Ajax延迟异常、慢Ajax异常、ANR异常、页面卡顿异常、JS异常、慢页面异常等。业务状态异常主要是指由业务问题（缺货、业务指标计算错误等）引起的系统运行稳定，各系统指标健康；如：无货、暂时不销售、加入购物车失败、提交订单失败、支付失败、搜索无结果、接口调用失败、页面刷新无数据、保存失败等。2.分析当端侧异常数据收集并报告后，可以分析，结合现阶段的业务目标，得出体验问题的优先级。1)结构化数据处理后的数据分为用户信息、行为信息、异常信息和设备信息四种结构化数据。用户信息包括会员账户、会员级别、会员标签、运营商、网络、地理位置等；行为信息包括页面名称、页面进入时间、页面离开时间、行为名称、行为发生时间、行为对象、其他行为信息等；异常信息包括异常编码、异常名称、异常等级、异常类型、异常类别、异常副本、异常细节、研发中心、产品、产品线、页面、服务时间、服务域名、服务请求码、原始URL、来源，链接ID、场景、发生时间等；设备信息包括终端类型、设备型号、设备OS、设备ID、设备制造商、浏览器类型、浏览器版本、App版本、App渠道、IP地址等。2)对于不同的团队，分析维度有不同的业务目标。2）对于不同的团队，分析维度有不同的业务目标。例如，对于运营团队，目标是改善流量和转型；对于研发团队，目标是提高产品的稳定性和可用性；对于体验团队，目标是提高产品的可用性；对于决策管理团队，目标是确保决策的正确性和可执行性。根据不同团队成员的需求，提供适当的分析角度，可分为水平和垂直：水平收集的数据本身可以提取一些指标（用户数量、用户数量、人数、异常数量……）作为垂直定量产品的标准；根据产品到异常之间的所有分析水平，垂直分为：研发中心、产品、产品线、系统、用户和异常。3.治理的目的是减少产品体验异常，从而提高产品的用户体验。1)负责人制度需要根据分析维度的纵向维度(R&D中心、产品、产品线、系统、用户和异常)建立负责人制度；比如对于每一个异常，都需要明确负责人是谁，目的是任何人在问题发生时都能迅速找到负责人，从而节省大量的责任推诿时间来解决问题。2)排名列表可以利用分析维度中的横向维度指标(R&D中心、产品、产品线、系统、用户和异常)在分析维度中创建排名列表；例如，对于R&D中心，可以建立异常治理排名，目的是通过降低异常总量/比例来促进异常治理的实施。3）待办事项可在系统中提供“待办事项”功能。用户可以根据异常情况创建待办事项，并指定人员完成，从而节省沟通成本，直接驱动系统中的异常治理；此外，如果团队使用Jira，系统可以与Jira连接，用户可以创建Jira进行异常情况，从而将其纳入日常研发事项。4）日报/周报/月报可以为分析维度（研发中心、产品、产品线、系统、用户和异常）的纵向维度设置日报或周报，甚至月报；通过在不同的工作周期内明确治理的目标和效果，可以促进异常治理。5）针对体验问题（系统性能异常、业务状态异常），可通过团队行动进行专项治理，提高用户体验；如“无货”专项治理，引入项目组形式的业务分析维度；如品牌、类别、商品组、商品代码等，驱动多个团队合作减少无货异常。4.在治理过程中或完成阶段验证治理效果，可提取抽象指标：对比期；例如，6月30日体验异常为100；假设对比期为6月1日，其异常数为200，则可验证6月份的治理效果降低了50%。三、总结本文围绕用户端异常构建互联网产品用户体验监控系统的闭环理念。通过收集、分析、治理和验证异常体验，量化产品用户体验，以数据驱动产品决策，为用户创造终极的产品体验。收集:收集用户在所有场景中遇到的所有体验问题。分析：结合业务目标，分析体验问题的优先级。治理：通过将治理渗透到日常工作中，驱使团队完成体验问题的治理。验证：参照绩效相关指标，验证经验问题的治理效果。