原作者:Mayya Azarova 发布时间:2023-05-21
原文章:The Hawthorne Effect or Observer Bias in User Research
一、霍桑效应
人们在意识到自己正在被关注或观察的时候,会刻意去改变一些行为或者是言语表达。这种现象被称为霍桑效应或观察者效应(观察者偏见)
例如:在没有人的场所,很多人都可能会不修边幅、举止随意,但是当有熟悉的人或是异性存在,他们就会注意形象,因为他们感觉自己会被关注着,所以会特别注意自己的言行。
二、用研中的霍桑效应
在一定程度上,霍桑效应存在于所有用户研究中——从田野研究到用户测试。
其关键点在于,人们倾向于以一种能使他们表现出“更好”的自我形象的方式回答问题,夸大正面特质的数量,否认或最小化社会认为不利的特质。
在【🥒用户测试】和【🌲田野研究】中霍桑效应的表现以及如何处理这个问题。
🥒1、用户测试中的霍桑效应
尽管在研究开始时,我们会告知参与者让他们像自己独自一人那样工作。但用户实际工作中在与产品交互时,很少需要发声思考、并且有人在背后观察。“知道自己被观察”可能会对参与者产生压力,从而表现出他们自己觉得研究者期望他们作出的行为。
例如,他们可能会非常有耐心地坚持完成任务,认真阅读说明,或在网站上仔细寻找相关信息。参与者也可能希望在主持人面前保全他们的面子,并成功完成活动。
🥒2、如何降低霍桑效应对用户测试的影响
1)设计熟悉自然的任务。不要设置让目标人群感觉到不自然,或者完全陌生的任务。相反,让这些测试场景变成熟悉的任务!
例如,根据你招募的特定用户群体的情况,购买一辆新的法拉利可能对一个群体来说遥不可及,而对另一个群体而言则非常日常现实。
2)通过闲聊让人们适应测试,避免过于友好。在用户研究中,一种危险的情况即为,研究者的友好可能被参与者误解;他们可能会试图以取悦研究者的方式行事。我们可以通过在研究开始时设置清晰的期望,并在必要时进行纠正来预防这种行为。
例如,我们可以说:“请试着想象您在现实生活中做这个任务,而我并不存在。试着按照您通常的做法进行操作。在整个过程中,我会保持安静。可能会在每个活动结束后问您一些问题。”
3)向参与者保证他们的表现不会被分享到研究之外,并告诉参与者他们在研究中的反馈非常有帮助。
4)向参与者解释你对他们的诚实反馈和行为感兴趣。参与原型测试、发声思考的参与者可能觉得如果他们不在页面上停留再久一些、再努力尝试一些、注意力再集中一些,他们给出的反馈就完全没有价值。
这就是为什么我们在开始可用性测试场次时,通常都会要先解释我们期望用户表现出的行为,来向参与者保证,他们不需要修改答案来保护我们的感受:
“请诚实地告诉我们您在想什么。任何反馈,无论好坏,对我们都有帮助。我们不会对于您的任何分享感到冒犯;我们只是想改进设计。”
5)解释该研究旨在测试设计,而不是参与者。如果你注意到参与者因为不知道某些东西或者因为在完成可用性任务时犯错误而道歉,这就是一个绝佳的机会:
研究者应介入并提醒他们,他们不是在接受测试;他们的反馈非常有价值。
同时,在研究开始时就应提醒他们,他们不必顾及面子,需要“完美地”完成所有任务或知道所有的答案。
“我们并不是在测试您,或您对【某个特定】主题的了解程度。我们在测试设计。如果您能告诉我们有什么您觉得困惑或者不确定的地方,那对我们来说真的非常有帮助。”
🌲3、田野研究中的霍桑效应
田野研究的价值在于:和用户一起,并观察他们是如何生活、工作、解决问题以及与他人和技术互动的。
在田野研究中,研究者来到用户所处的自然环境中,了解特定活动的情境,最小化“人为实验环境”的影响。然而,仅仅是研究者的存在及其对参与者活动的关注就会让参与者更关注自身的行动,从而可能导致他们审查自己的行为。
一开始,参与者可能不想向你展示他们的缺点、他们真实的反应,或者在工作中学到的、可能会影响其名誉或薪资的小伎俩。或者担心团队的管理人员又在想一出是一出,整些有的没的,就懒得向调研者展示真实的工作情况。
🌲4、如何降低霍桑效应对田野研究的影响
1)不要让人们感到被评判。如果可用性研究的黄金法则是不要让参与者感到自己很蠢,那么对于田野研究来说,就是不要让参与者感到自己在被评判。
如果人们感到舒适、不在意研究者的存在,他们很快就会回归到他们的常规的日常活动和行为中。
2)考虑设置更长的场次时间,让参与者与主持人建立融洽关系。信任对于建立关系至关重要:而随着时间的推移,建立关系会更容易。所以在情境询问中,我们通常会选择设置的更长的场次时间(约60-90分钟),并尽可能与同一人或团队进行多个观察场次。
所有这些做法都将有助于让参与者在研究者周围感到更舒适。参与者与研究者相处得越舒服,他们感受到压力、改变自身行为的程度就越小。
三、结论
霍桑效应主要与人们在被观察时改变行为的倾向有关。如果效度可能成为问题,我们还要进行研究?我们需要批判性评估研究的发现。我们需要意识到,在用研中,研究的设计和主持人的措辞可以影响用户的行为。
原文地址:
https://www.nngroup.com/articles/hawthorne-effect-observer-bias-user-research/