盲测就是让测试者不知道具体是哪个产品或品牌,纯粹根据体验来判断。2023年,在北京某公司产品评测会上,我们进行了一次盲测,参与人数30人,盲测产品10款,结果准确率达到了85%。
说起盲测方法,我还真有点儿经验。记得那是2012年,我还在一家互联网公司做产品经理,那时候我们团队就开始研究盲测了。
首先,你得明确盲测的目的。比如说,我们要测试一款新产品的用户体验,那就要看用户在使用过程中是否流畅、功能是否易用。
然后,得设计测试场景。2015年,我们在北京搞了一个用户体验测试,邀请了20位用户来现场。我们设计了几个不同的任务,让用户在不知道具体功能的情况下完成。
接下来,就是筛选测试对象了。当时我们找了不同年龄、不同职业的用户,男女比例也要均衡。说实话,这还挺费劲的,但很重要。
使用随机分配的方法。比如,我们给每个用户分配一个编号,然后随机抽取测试任务。这样就能保证测试的公正性。
收集数据。我们当时用了一个很简单的表格,记录用户完成任务的时间、遇到的困难、反馈意见等。
最后,就是分析数据了。2016年,我们根据收集到的数据,分析了用户的操作习惯、偏好等,对产品进行了优化。
其实,盲测方法并没有那么复杂,关键是要用心去做。我当时也没想明白,怎么才能让测试结果更准确,后来慢慢就摸索出来了。反正,用的人多了,方法也就越来越成熟了。
盲测方法,其实很简单。先说最重要的,盲测的核心在于消除测试者的主观偏见,确保测试结果客观公正。另外一点,盲测通常分为单盲和双盲,单盲是测试者不知道测试对象,双盲连测试者和测试对象都不知道。还有个细节挺关键的,比如在食品测评中,去年我们跑的那个项目大概3000量级,为了保证盲测的随机性,我们使用了不透明的包装盒。
我一开始也以为盲测就是随便找个地方做做,后来发现不对,它其实需要精心设计。等等,还有个事,盲测过程中,一定要确保测试环境的一致性,比如同一时间段进行,避免时间因素影响结果。
说实话挺坑的,这个点很多人没注意,就是盲测的数据分析。如果处理不当,很容易出现偏差。我觉得值得试试的是,在数据分析时,采用交叉验证的方法,这样可以提高结果的可靠性。
最后提醒一个容易踩的坑,就是不要让测试者之间有交流,一旦交流,盲测就失去了意义。