因此,我们设计并发布了一项闪亮的新功能。我们如何知道它是否有效?我们如何衡量和跟踪其影响?用户体验指标并不缺乏,但如果我们想专门针对我们的功能建立一个简单、可重复、有意义的用户体验指标怎么办?好吧,让我们看看如何做到这一点。
我第一次听说 TARS 框架是从 Adrian H. Raudschl 的精彩文章《如何衡量功能的影响》中。在这里,Adrian 强调了他的团队如何跟踪并决定要关注哪些功能,然后将它们在 2×2 象限矩阵中相互映射。 事实证明,这是一个非常有用的框架,可以通过业务指标的视角可视化用户体验工作的影响。 让我们看看它是如何工作的。 1. 目标受众(%) 我们首先通过探索产品用户中遇到某个功能旨在解决的特定问题的百分比来量化目标受众。我们可以研究试图解决类似问题的现有或类似功能,以及有多少用户参与其中。 不过,目标受众与功能使用情况并不相同。正如 Adrian 指出的,如果我们知道现有的导出按钮功能被所有用户的 5% 使用,并不意味着目标受众是 5%。更多的用户可能会遇到导出功能试图解决但找不到的问题。 我们提出的问题是:“我们产品的所有用户中,有多少比例存在新功能旨在解决的特定问题?”
2. A = 采用率 (%) 接下来,我们衡量“获取”目标受众的情况。为此,我们跟踪在特定时间段内有多少用户实际成功使用该功能。 我们不关注点击率或会话持续时间,而是关注用户是否有意义地参与其中。例如,如果有任何迹象表明他们发现它有价值,例如共享导出 URL、导出文件的数量或过滤器和设置的使用。
高功能采用率 (>60%) 表明该问题具有影响力。采用率低(<20%)可能意味着该问题有人们依赖的简单解决方法。改变习惯也需要时间,因此预计一开始采用率较低。 有时,功能采用率低与功能本身无关,而与功能在 UI 中的位置有关。如果它被隐藏或者标签令人困惑,用户可能永远不会发现它。它必须足够明显,人们才会偶然发现它。 采用率低并不总是意味着失败。如果一个问题只影响 10% 的用户,那么在该特定领域内达到 50-75% 的采用率就意味着该功能是成功的。 我们提出的问题是:“有多少比例的活跃目标用户实际使用该功能来解决该问题?”
3. 保留率(%) 接下来,我们研究某个特征是否实际上被重复使用。我们衡量使用频率,或者具体来说,有多少参与该功能的用户随着时间的推移实际上一直在使用它。通常,这是产生有意义影响的强烈信号。 如果某个功能的保留率(平均)>50%,我们就可以非常确信它具有很高的战略重要性。 25-35% 的保留率表示中等战略重要性,而 10-20% 的保留率则表示低战略重要性。 我们提出的问题是:“在所有有意义地采用某项功能的用户中,有多少人回来再次使用它?”
4.满意度评分(CES) 最后,我们衡量用户对我们提供的功能的满意度。我们不会询问所有人——我们只询问“留存”用户。它可以帮助我们发现保留分数中可能未反映出来的隐藏问题。
一旦用户实际多次使用某个功能,我们就会询问他们在使用该功能后解决问题的难易程度——介于“比预期困难得多”和“比预期容易得多”之间。我们知道我们想要如何得分。 使用 TARS 进行功能策略 一旦我们开始使用 TARS 进行衡量,我们就可以计算 S÷T 分数——满意用户的百分比 ÷ 目标用户。它让我们了解某个功能对我们的目标受众的表现如何。一旦我们对每个特征都这样做了,我们就可以将所有特征映射到 2×2 矩阵中的 4 个象限中。
表现优异的功能值得关注:它们的保留率较低,但满意度较高。它可能只是用户不必经常使用的功能,但当他们使用时,它非常有效。 负债特征留存率高,但满意度低,因此也许我们需要对其进行研究改善他们。然后我们还可以确定核心功能和项目功能,并与设计师、产品经理和工程师讨论下一步应该做什么。 转化率不是用户体验指标 TARS 不涵盖转化率,这是有充分理由的。正如 Fabian Lenz 指出的那样,转换通常被认为是成功的最终指标,但在实践中,要在较小的设计举措和大型转换目标之间呈现清晰的联系总是非常困难。
事实上,团队中几乎每个人都在努力实现更好的转化。上升可能与许多不同的举措有关——从销售和营销到网络性能提升,到季节性影响,再到用户体验举措。 用户体验当然可以提高转化率,但它并不是真正的用户体验指标。通常,人们根本无法选择他们正在使用的产品。通常,理想的业务成果来自必要性和斗争,而不是信任和赞赏。 尽管用户体验不佳但转化率却很高 正如 Fabian 所写,尽管用户体验不佳,但仍可能实现高转化率,因为:
强大的品牌力吸引人们, 积极但有效的紧急策略, 价格极具吸引力, 营销表现亮眼, 历史客户忠诚度, 用户根本没有其他选择。
尽管用户体验很好,但转化率却很低 与此同时,尽管用户体验很好,但转化率可能较低,因为:
优惠与受众无关, 用户不信任品牌, 不良的商业模式或失败的风险很高, 营销没有触及正确的受众, 外部因素(价格、时机、竞争)。
改进的转化是用户体验计划的积极成果。但良好的用户体验工作通常可以提高任务完成度、减少任务时间、最大限度地减少错误并避免决策瘫痪。我们可以使用大量可行的设计指标来跟踪用户体验并推动可持续的成功。 总结 仅靠产品指标并不总能准确地了解产品的性能。销售可能表现良好,但用户可能效率极低且沮丧。然而,流失率很低,因为用户无法选择他们正在使用的工具。
我们需要用户体验指标来理解和改善用户体验。我最喜欢 TARS 的一点是,它是一种将客户的使用情况和客户体验与相关产品指标联系起来的巧妙方法。就我个人而言,我还会根据项目的需求,使用以用户体验为中心的指标和 KPI 来扩展 TARS。 非常感谢 Adrian H. Raudaschl 将其整合在一起。如果您对指标感兴趣,我强烈建议您关注他,获取有关这方面的实用指南! 满足“如何衡量用户体验和设计影响” 您可以在🪴 衡量用户体验和设计影响(8h)中找到有关用户体验策略的更多详细信息,这是设计师和用户体验主管衡量和展示用户体验对业务影响的实用指南。今天使用代码 🎟 IMPACT 可节省 20% 的折扣。跳转到详细信息。
视频 + 用户体验培训 仅视频视频 + 用户体验培训$ 495.00 $ 799.00
获取视频 + 用户体验培训25 个视频课程(8 小时)+ 实时用户体验培训。100 天退款保证。仅限视频$ 250.00$ 395.00
获取视频课程25 节视频课程(8 小时)。每年更新。还可以作为包含 3 个视频课程的 UX 捆绑包提供。
有用的资源
“如何衡量用户体验和设计影响”,作者:真实 “设计师的商业思维”,作者:Ryan Rumsey “设计项目的投资回报率 “正确的用户体验指标如何显示改变游戏规则的价值”,作者:Jared Spool “研究样本量计算器”
进一步阅读
“针对压力和紧急情况进行设计”,维塔利·弗里德曼 “用户体验中的人工智能:用更少的资源实现更多的成果”,Paul Boag “验证码等身份验证方法的可访问性问题”,Eleanor Hecks “从提示到合作伙伴:设计您的定制人工智能助手”,Lyndon Cerejo