1.3 评价设计和评价方法(Evaluating designs and methods for evaluation)
1 可用性研究(Usability Studies)
设计者和参与者一对一进入实验室中,设计者会根据参与者设定一些产品的使用场景,让参与者完成指定任务,以观察产品或服务的某一特性是否可行。
- 优势
· 效率高,可以快速实现验证
· 可以学到很多,避免出现盲区
- 劣势
· 环境/动机不具有代表性
· 实验者可能存在主观偏见/偏差
· 缺乏对照参考
2 调查问卷(Survey)
极其有效的在短期内获取大样本量数据的调研方式。可以快速、高效的得到很多数据,方便做对比分析,但是如果问卷问题设置不当,填问卷的人不一定会如实做出的回答,得到的结果可能不真实或不是用户的真实想法
对一个全新的产品来说,survey可以帮助你:
1.识别你的主要用户人群
2.识别用户现有的痛点,开拓和发现新的市场机会
3.站在更高的角度来了解当前你的用户是怎样完成他们的任务的
对于一个已存在的产品,survey可以帮助你:
1.了解当前用户人群和他们的特征
2.了解用户对于现有产品的偏好,并且追踪他们的满意度和情感变化
3.了解当前用户是怎样使用这个产品或系统的
3 焦点小组/小组座谈(Focus Group)
研究员召集 3-12 名参与者形成一个小组针对某些话题进行讨论,在相互探讨和互动中获取参与者对产品或服务的反馈。
由一个经过训练的主持人以一种半结构的形式与一个小组的被调查者交谈。主持人负责组织讨论。小组座谈法的主要目的,是通过倾听一组从调研者所要研究的目标市场中选择来的被调查者,从而获取对一些有关问题的深入了解。这种方法的价值在于常常可以从自由进行的小组讨论中得到一些意想不到的发现。
- 优势:可以根据被访谈者的互动来发现问题
- 劣势:容易出现集体思维;一些敏感话题不方便询问
4 专家反馈(expert feedback)
- 优势:可以快速对业务目标有一个深入的认识,清楚其中的痛点
- 劣势: 容易出现开发者死角、缺乏代表性
5 比较试验 / AB testing(Comparative Experiments)
为测试网页上不同的设计方案,随机分配用户与页面进行交互,记录下用户的使用情况和用户行为,以优化网页,增加转化率注册率等网页指标。
- 优势: 识别关键变量/属性。直接比较选择;看到实际的行为
- 劣势: 时间人力物力成本较大
6 参与式观察(Participant Observation)
研究者深入到所研究对象的生活背景中,不暴露研究者真正的身份,在实际参与研究对象日常社会生活的过程中所进行隐蔽性的观察。
- 优势:可以看到真实的场景
- 劣势:时间人力物力成本高,需要成熟的原型
7 仿真建模(simulation and modeling)
设计仿真可以帮助设计者确认正在开发的产品的预期功能,
- 优势:不需要非常详细的设计;可以将各种因素考虑在内,做出综合决策
- 劣势:需要一套理论来证明理论是可以应用到实际中来
8 上述7种用户体验研究方法如何选择?
根据业务场景,平衡技术与设计,做出决策。这里需要注意的是随着时间/使用情况的变化,评价方法也需要去改变,不能一成不变的使用同一方法。不同的方法解决不同的问题,可以在不同的设计阶段里使用不同的方法。
9 引用&参考资料
知乎:如何选择用户体验研究方法?https://zhuanlan.zhihu.com/p/22211809
知乎:用户研究方法整理——解析Survey(调查问卷)(上)https://zhuanlan.zhihu.com/p/38209175
知乎:人物建模和场景建模 https://zhuanlan.zhihu.com/p/25131765