bts防弹少年团演唱会

bts防弹少年团演唱会

成功的测试计划的心理学

《成功的测试计划的心理学》

所有测试程序,无论多么伟大或可怕,都认为它们做得非常好并且可以变得更好。

花了13年的时间来完成各种规模的测试程序来改变他们的程序,或者帮助他们达到他们不知道的水平,有一件事比其他任何事情更突出。 无论程序的大小或行业规模如何,在我与之合作的300多个程序中,几乎所有程序都遇到了一些非常类似的问题。

您对测试程序的看法对其实际性能影响不大

在许多方面,该计划的实际结果与计划中的人如何看待自己计划的价值无关。 这种近视可能导致一些错失改善或改变现状的机会。 在许多情况下,改变或改进计划所需的步骤很容易,但负责人的挂起很难动摇。 这就是为什么程序从正确的心态开始然后从那里发展是至关重要的原因。

考虑到这一点,让我们花点时间重新开始。 让我们看看真正拥有成功程序所需的真正构建块,步骤,策略和工具。 从头开始评估事物通常更容易,而不是一次只处理一个小的增量变化。 如果我们认为每个程序都是从头开始,那么解决可能在途中错过的重大事件要容易得多。

你准备好参加测试计划吗?

对于您和您的组织来说,关键是测试程序是否正确? 这并不像看起来那么简单,因为太多的程序实际上对其组织的底线不利。 仅仅因为你想要测试并不意味着它对你来说是正确的策略,因为你可以使用许多其他策略来真正发展你的业务。

你有足够的交通吗?

让我们从真正基本和简单的要求开始。 您需要每月至少进行500次转化。 我们将讨论500这些是什么,但基本上你必须有500个独特的行动,直接导致收入。 虽然这似乎真的可以减少小型组织的支持,但现实情况是,它只是意味着您必须%E9%80%89%E6%8B%A9%E5%AF%B9%E6%82%A8%E4%BD%9C%E4%B8%BA%E4%BC%81%E4%B8%9A%E6%89%80%E5%A4%84%E4%BD%8D%E7%BD%AE%E6%9C%89%E6%84%8F%E4%B9%89

《成功的测试计划的心理学》

图片来源

您今天可能不在那里,但有很多增长选择供您利用。 一旦你做了那些,那么你应该准备好至少从交通的角度前进。 500不是一个公司号码,但你需要有足够的流量,你可以避免简单的A对B设置,这样你就可以继续进行真正重要的测试。

你有正确的心态吗?

第二个要求是迄今为止最难的要求,它是完全改变程序规模和一致性的要求。 大多数程序都极大地限制了自己,因为他们将测试看作是从一件事或另一件事中进行选择的一种方式,或者作为证明他们的意见或分析正确的策略。 事实是,这是效率最低的优化形式。

真正的挑战在于让自己和你的组织准备接受一个非常简单的事实: 错误比正确更有价值

那是什么意思? 好吧,让我们考虑测试计划的真正%E6%A0%B8%E5%BF%83%E7%9B%AE%E6%A0%87“>为您可用的资源提供最大的收入增益。

这真正意味着一切都与效率有关。 需要6个月的10%电梯是好的,需要2个月才能更好,一个需要2个星期甚至更好。 同样,10%的提升到30%的流量是好的,50%更好,100%是最好的。 这意味着你所做的一切都变成了一个简单的等式:

(人口*影响)/成本

这也意味着只知道你获得10%的提升是不够的,因为你必须比较它才能理解上下文以及它是一个好的用途还是一个糟糕的资源使用。 巧合的是,同时比较更多的东西对于资源分配以及产生更一致和更大的升力也是非常有益的。

这意味着你必须始终将事物视为%E5%8F%91%E7%8E%B0%E6%9F%90%E4%BA%8B%E7%89%A9%E5%BD%B1%E5%93%8D%E7%9A%84%E4%B8%80%E7%A7%8D%E6%96%B9%E5%BC%8F%EF%BC%8C%E5%B9%B6%E9%80%9A%E8%BF%87%E7%AE%A1%E7%90%86%E6%88%90%E6%9C%AC%E6%9D%A5%E5%AE%9E%E7%8E%B0%E3%80%82″>

那么这如何影响错误的价值? 你和每个人都有很多关于重要事项的意见,如何弄清楚什么是重要的以及如何改进事物。 问题在于,在许多情况下,这些事情是基于猜想或传递的知识,在所有情况下,它们都无关紧要。

不要让你的想法限制你的测试

如果我对如何改善用户体验有所了解,可以说改变我们的购物车去除一些不需要的内容,这很好,但前提是我不限制我测试的内容。 如果我是对的并且这是最重要的事情,那么最后的数据将得出结论。

如果我选择做其他事情,比如改变颜色或改变信息字段的顺序,证明更有价值,那么我为我的组织赚更多的钱。 通过允许测试自由地比较可行的所有内容而不是假装知道我没有做过的事情,我得到了更好的结果。

如果我将我的测试限制在流行的观点或仅限于我认为会发生的事情,那么我学到的东西要少得多,强化无用的约定,我将限制我采取的每一个行动的价值。

然而,如果我强迫自己假设我一无所知并且尽可能多地比较,那么最糟糕的情况就是我认为会发生的事情确实发生(并且很少发生)。

在那种情况下,我能够丰富这些数据并消除未来的机会。 在所有其他情况下,其他东西的表现超出了我的预期,给予我们更高的提升,更好的结果,并有机会学习我们将自己切断的东西。

将您的想法与其他想法进行比较是成功测试计划的基础

这个思维过程是一个非常成功的测试程序的核心,但却很少被制定。 当您评估您的计划时,请查看您或您工作的人是否已准备好每天都要面对他们的世界观。 有%E5%BE%88%E5%A4%9A%E4%BA%BA%E8%B0%88%E8%AE%BA%E6%83%B3%E8%A6%81%E5%B8%AE%E5%8A%A9%E4%BC%81%E4%B8%9A%EF%BC%8C%E4%BD%86%E6%98%AF%E5%BD%93%E6%8E%A8%E5%8A%A8%E6%8E%A8%E5%8A%A8%E5%AF%B9%E4%BB%96%E4%BB%AC%E8%87%AA%E5%B7%B1%E7%9A%84%E5%85%AC%E5%8F%B8%E7%9A%84%E7%A6%8F%E5%88%A9%E6%9B%B4%E6%84%9F%E5%85%B4%E8%B6%A3%E3%80%82″>

你自己呢? 让我向你保证,没有什么能比你认为你对用户,分析以及良好的用户体验被撕成碎片的所有知识更快地放松你的自我。 您不仅要持续不断地处理这个问题,而且这将成为您每天所做的大部分和最重要的工作。 如果你还没有为这场斗争做好准备,那么你和你的计划可能还没准备好成长或改进。

《成功的测试计划的心理学》

解构 – 测试者最好的朋友

让我们回顾一下真正重要的测试,发现影响力和行动成本。 这会完全改变您采取的操作,优先操作的方式以及报告更改的方式。 从根本上说,我们对变化的%E5%BD%B1%E5%93%8D%E7%9F%A5%E4%B9%8B%E7%94%9A%E5%B0%91“>

你可以有一个完美的想法,但如果成本太高或人口太少,那么这个行动的效率就不值得去做。 这就是解构思想如此重要的原因。 您从根本上获取页面或想法,并了解如何学习影响力以及如何控制成本。

解构意味着接受一个想法并挑战其中的核心假设。

您认为需要改进CTA上的消息传递吗? 与导航,标题或页面的其他部分相比,CTA的影响力如何。 你以为你知道,但你真的吗?

我可以告诉你,在我完成的所有测试之后,我发现的唯一一致的规则是空间变化始终具有比上下文更高的beta(房地产比复制更重要)。 或者您的目标网页与您的主页或购物车相比有多大影响力? 我相信你有意见,但你真的把它分解了吗?

测试不是为了证明你的想法

我们以CTA为例? 如果我们采用2个版本的已更改CTA,但将其与主标题的2个版本进行比较,并删除页面的其他部分,该怎么办? 如果我们对各个部分进行MVT%E5%B9%B6%E6%AF%94%E8%BE%83%E5%BD%B1%E5%93%8D%E5%91%A2%EF%BC%9F”>

这是良好测试的核心。 人们将测试视为霰弹枪或假设驱动,而实际上这些是许多选项中的两个。 核心租户正在取得成果,而不是证明某人是正确的或者是盲目的运气。 您可以将测试的重点放在发现不同类型的更改的价值上,然后使用它来通知和应用未来的资源。

像所有测试想法一样,最初的测试理念是可替代的,它是一个起点,可以达到真正重要的行动。 当你开始时,你对你的影响能力知之甚少,这就是为什么解构这个想法和发现是至关重要的。

真实的例子

回到我之前提到的购物车示例。 这是我们刚刚完成的一个真正的测试,我可以告诉你,结果是删除了侧面选项实际上是负面的,但是将页面更改为高对比度,尽管内部有一些保留,但对底线产生了重大影响。 我们永远不会知道如果我们仅限于观点,也不会通过随机机会发现它。

我们解构了页面的可行替代方案,并相互测试它们,以便我们可以比较不同更改的效率。 我们学到的不仅在这里产生了影响,而且还有助于我们前进。 我们也没有获得一个胜利者,但8个变种中的5个证明是积极的。

这也很重要,因为您正在测试的关键事项之一不是特定的赢家,而是高beta(大范围的结果),以便我们可以选择最佳选择。 我还可以告诉你,这里的变化测试版没有我们运行的其他测试那么高,这给了一些人内部的一些新信息需要考虑。

在几乎所有情况下,许多意见都是错误的,包括我自己的意见,但由于我们专注于发现和效率,我们能够取得很好的成果,并推动组织和测试计划向前发展。

《成功的测试计划的心理学》

理性决策的必要性

另一个副产品是需要消除意见和摆弄他人的空间。 这意味着您需要在允许或不允许的情况下更加强大,并且所有内容都集中在效率上。

构建测试以最大化发现的方法之外的第一种方法是使人们对单个成功度量标准进行调整,并确保它不会在测试之间发生变化。 在几乎所有情况下,指标都将是RPV(每位访客的收入),或者所有操作的转化率是否相等。

《成功的测试计划的心理学》

无论您认为自己是否影响某项具体行动,此指标与特定测试无关,这一点至关重要。 希望改善您的内部搜索使用,很棒,但这是达到目的的手段,而不是目的本身。 提高网站效率以创造收入是所有盈利企业的最终目标。

在测试之前确定您的单个成功指标

我工作的核心原则之一是成功是在你开始测试之前确定的,而不是之后。 如果您在开始测试之前已经处理好所有事情,并且人们对单个成功度量标准进行调整可能是最重要的,那么一旦测试启动它就会对数据进行机械检查并处理获胜者。

如果你还没有,那么你的计划就会产生大量的低效率。 让人们对指标进行调整可能非常困难,但对于理性决策和允许对所有选项的效率进行评估绝对重要。 如果一个人更善于将人们带到购物车并且更好地获得电子邮件注册并不重要,唯一重要的是它是否影响了业务的底线。

至关重要的是,如果没有一个通用且与业务底线相关的成功指标,我将不会运行测试,这与我们正在运行的测试无关。 最好是坚持或什么都不做,而不是让这种行为继续下去。

不要报告微控制

关键是你永远不会报告任何东西,只有那个单一的指标。 前面提到的目标是可行替代方案的效率,这意味着您比较的内容越多,每次操作的成本考虑得越多,就越能告知其他人这种效率。

一切都需要被视为一种行动与另一种行为的衡量标准,因为所有行动,甚至无所作为都会产生结果。 当您了解到人们的意见错误以及该数据的后续步骤应该是什么时,您应该专注于此。

这样做也有助于消除关于因果方向的虚假陈述,因为这些可能对整体计划效率致命。 仅仅因为更多的人使用内部搜索或点击你的横幅而你赚了更多钱并不意味着你赚了更多的钱,因为人们做了其他的行动。

在测试结束时,你只有一个数据点,它们都上升了,或者一个上升,一个下降,或者两个都下降了。 一个数据点不足以建立模式,相关性或特别是因果关系。 然而,会发生的事情是,您的先入为主的观念和意见自然会试图解释这种关系,这可能导致资源浪费和未来收益有限。 专注于你所知道的,而不是你想知道或认为你可以推断出来。

认知不协调 – 你最大的敌人

以这种方式运行程序的本质意味着你将一直在证明人们是错的。 虽然这对于表现来说是最好的,但它会产生一种持续的认知失调状态,如果你不准备处理它可能会破坏你的程序并导致人们产生不相信你的测试的理由。

人们相信过去多年来所做的事情不仅没有他们想象的那么有价值,而且在许多情况下根本没有价值,对企业不利,这是痛苦的。 如果你没有事先指导这个,如果你不准备处理这个问题,你将会遇到大量的地雷。

处理这一问题的第一步也是最重要的一步是将所有讨论的重点放在行动的比较而非验证意见上。 它与Tactic A或B是否有效无关,它与Tactic A或B或C或D等相比如何。

无论你认为他们的胜利与否,都必须对待他们的想法

它是关于每个选项的各种影响,而不是任何个人的想法或概念。 无论你认为他们是否会获胜,所有的想法都会得到同样的对待。 通过这样做,你可以从我而不是攻击中解决问题,而是专注于系统和结果。 它不是个人的,而是关于所有可能结果的整体观点。

第二种策略是整篇文章的内容,讨论错误的重要性。 如果您在测试创意之外进行讨论,并且如果您在每次谈话中加强讨论,那么您正在打开那扇门,以便在真正重要时保持对话。

珍惜意想不到的测试结果

如果你发现一些与传统智慧相悖的东西,那么结果对于组织的其他人来说是多么伟大,那就更好了。 这样做的前几次为人们做好准备,因为这是未来测试的一致和良好结果。 在购物车测试的情况下,我之前提到过我们的一位高级管理人员,并且宣称他们在每次测试中经常出错是多么有趣。 他们为此做好了准备并允许我们进行更改,因为我们从第1天起就一直在准备它们。

第三种策略是简单地确保每个测试都有1-2种变体,纯粹是因为它们违背了传统智慧和导致当前现状的思维过程。 通过设计破坏意见的东西,你可以利用这些知识来构建未来的案例。 在我们的案例中,我们已经有超过50%的测试中有一个选项获胜,而且我们的表现都更好。

最后一个主要策略是在您的组织内持续开展教育计划。 定期与每个关键小组会面,告知他们测试可以做什么,过去的经历和期望,并帮助他们思考未来可以做些什么来帮助他们。

为测试对话创建空缺

你可能无法赢得那场个人战斗,并让他们支持一个结果,但通过这样做,你正在开启一个对话,让他们听到你想要完成的事情,而不是在争论中。 我强烈建议在较大的组织中每隔一个月至少进行一次定期对话,并在较小的组织中进行持续的对话。

在所有情况下,你必须根据人和地方选择你的策略。 到目前为止,我所做的最重要的工作是处理认知失调并帮助理解你想要完成的事情。

试图让人们在可行的替代方案,错误和理性的%E5%86%B3%E7%AD%96%E4%BB%A3%E7%90%86%E6%96%B9%E9%9D%A2%E8%BF%9B%E8%A1%8C%E6%80%9D%E8%80%83%E6%98%AF%E4%B8%80%E4%BB%B6%E5%A4%A7%E4%BA%8B%EF%BC%8C%E5%B9%B6%E4%B8%8D%E6%98%AF%E4%BB%BB%E4%BD%95%E4%BA%BA%E6%97%A5%E5%B8%B8%E6%B4%BB%E5%8A%A8%E7%9A%84%E4%B8%80%E9%83%A8%E5%88%86%E3%80%82″>

有用的规则

我想结束一些有用的规则,这些规则可能会使我在上面和将来讨论的许多概念都被采取行动。 即使您完全不了解我所讨论的所有内容,只需执行这些规则即可使您的计划得以发展,并使您能够在未来理解。

  • 永远不要只测试一个替代方案 – 尝试拍摄至少4-5并且如果你有交通则更好。 除非你有疯狂的交通量,否则我会把它限制在10点。
  • 始终有1个成功指标 – 这适用于您的站点并且独立于特定测试
  • 在发布测试之前,请务必讨论如何在测试中采取行动 – 成功在发布之前确定,而不是之后
  • 永远不要解释为什么发生了什么 – 从测试中分辨出来是不可能的,并且会减少需要遵循的理性行动
  • 不要过于关注测试想法 – 在你有很强的因果影响证据之前,想法是可替代的
  • 始终挑战惯例 – 尝试获得关于最佳选择的各种意见,但也包括挑战流行意见的选项
  • 解构思想 – 看看你是否可以在每次考试中挑战假设
  • 避免停机 – 在进行更大规模的测试而不是为了保持资源而进行测试时要好得多。 最大化测试成本意味着最大限度地减少停机时间。
  • 制定明确的行动规则 – 不要过分关注信心或关注抽样偏差或代表性数据
  • 教育,教育,教育 – 成功的课程与人们对测试课程的期望是如此不同。 您的主要职责是帮助人们成长并理解这一点。 测试只是实现目标的行动,而不是程序的唯一功能。

结论

花一点时间来真正考虑核心关注您的计划。 很容易陷入将测试视为证明某一点或验证网站变更的方法的陷阱。 这是有价值的,但它对你所能做的事情来说是如此之少而且效率低下。 真正获得结果的第一步是改变您查看测试和优化的方式。

专注于错误,专注于效率,然后围绕它设计你的程序。 您所做的一切,从与您的组织交谈,您运行的测试以及如何利用工具,都是由您对测试中重要事项的基本理解所决定的。

你自己的认知失调是真正改变你运行程序的方式和方式的第一个障碍。 真正评估您采取的行动以及您正在完成的计划。 即使您不同意我在本文中所说的所有内容,您也可以遵循我所说的简单规则,这将有助于打开程序以获得更高的回报。 最重要的是避免偏离轨道,因为你越是允许其他人开车去追求效率低下的结果就越难以回到正轨。

“我们就是要反复做。 因此,卓越不是一种行为而是一种习惯。”

– 亚里士多德

特色图片

相关文章

点赞

发表评论

电子邮件地址不会被公开。 必填项已用*标注