bts防弹少年团演唱会

bts防弹少年团演唱会

Jonas Weigert关于登陆页面之外的A / B测试(Q&A)

《Jonas Weigert关于登陆页面之外的A / B测试(Q&A)》

随着转换优化不断成熟并被更多组织采用,从网络中的人那里获得a” b>以了解他们如何接近增长和优化总是很有趣。 特别是对于我来说,在科技创业领域,由于这些公司经常生活和死于数据,并倾向于%E5%9B%B4%E7%BB%95%E5%AE%9E%E9%AA%8C%E5%BB%BA%E7%AB%8B%E8%87%AA%E5%B7%B1%E7%9A%84

LawnStarter就是这样一家公司,因此我们与他们的首席技术官Jonas” weigert>坐下来,了解他们如何在他们的产品和沟通中进行实验,以及他们如何处理公司的优化问题。

介绍Jonas Weigert和LawnStarter

LawnStarter%E5%8F%AF%E4%BB%A5%E8%BD%BB%E6%9D%BE%E9%A2%84%E8%AE%A2%E8%8D%89%E5%9D%AA%E6%8A%A4%E7%90%86%E3%80%82″>

简而言之,他们需要从多个方面处理数据和实验,因此实际执行此操作时会有点复杂,以及他们如何在实验与典型的产品开发过程之间取得平衡。

Jonas Weigert是这些决策的主要驱动力。 作为LawnStarter的首席技术官,他负责技术工作,包括产品和通信方面的实验。

问:您是如何参与LawnStarter的?

《Jonas Weigert关于登陆页面之外的A / B测试(Q&A)》 Jonas Weigert:

“我十二岁的时候开始开发软件,从那时起就开始构建一些小工具和网站。

目标始终是从人们的日常工作中删除一些问题或重复性任务。 我最终去了弗吉尼亚理工学院获得计算机科学,并加入了LawnStarter,以建立他们的平台,以缓解草坪护理空间在客户服务和运营效率方面面临的挑战。“

超越着陆页的A / B测试

由于LawnStarter涉及的不仅仅是传统的添加购物车,而是完整的购买转换指标,因此他们在各种渠道中使用他们的客户和网络数据。 他们是订阅业务,因此持续的沟通非常重要。 他们还经常尝试使用自己产品的功能。

问:LawnStarter的实验是什么样的?

《Jonas Weigert关于登陆页面之外的A / B测试(Q&A)》 Jonas Weigert:

“像大多数在线企业一样,我们A / B测试登陆页面和注册流程。 然而,由于我们是一家专注于运营的公司,这只是一个开始。

我们还投入了大量精力来测试产品通信(电子邮件,短信和推送通知),以吸引用户加入我们的产品。 最后,我们测试了许多内部功能,例如我们的市场分布算法,它们在幕后实现优化平台功能,并在一天结束时创建更好的客户体验。“

业界似乎正在​​进一步走向普遍优化,或者正如Optimizely的标语所说的那样, %E2%80%9C%E6%97%A0%E5%A4%84%E4%B8%8D%E5%9C%A8%E5%AE%9E%E9%AA%8C%E3%80%82%E2%80%9D%E8%80%8C%E4%B8%8D%E6%98%AF%E8%A1%A8%E9%9D%A2%E5%B1%82%E6%AC%A1%E7%9A%84%E5%8F%98%E5%8C%96%EF%BC%8C%E7%BB%84%E7%BB%87%E6%AD%A3%E5%9C%A8%E8%AF%A2%E9%97%AE%E4%BB%96%E4%BB%AC%E5%A6%82%E4%BD%95%E4%BD%BF%E7%94%A8%E4%BB%96%E4%BB%AC%E6%94%B6%E9%9B%86%E7%9A%84%E6%89%80%E6%9C%89%E6%95%B0%E6%8D%AE%E6%9D%A5%E8%B7%A8%E5%A0%86%E6%A0%88%E5%92%8C%E6%B2%9F%E9%80%9A%E6%B8%A0%E9%81%93%E8%BF%9B%E8%A1%8C%E5%AE%9E%E9%AA%8C%E3%80%82%E5%88%B6%E5%AE%9A%E6%95%B0%E6%8D%AE%E9%A9%B1%E5%8A%A8%E7%9A%84%E5%86%B3%E7%AD%96%EF%BC%8C%E8%80%8C%E5%85%88%E5%89%8D%E7%9A%84%E7%9B%B4%E8%A7%89%E5%86%B3%E7%AD%96%E5%8D%A0%E4%BA%86%E4%B8%8A%E9%A3%8E%E3%80%82″>

《Jonas Weigert关于登陆页面之外的A / B测试(Q&A)》
图片来自Conductrics“>

无论您使用Optimizely或Conductrics%E7%AD%89%E5%B7%A5%E5%85%B7%E6%9D%A5%E5%AE%9E%E7%8E%B0%E8%BF%99%E4%B8%80%E7%9B%AE%E6%A0%87%EF%BC%8C%E8%BF%98%E6%98%AF%E6%9E%84%E5%BB%BA%E8%87%AA%E5%B7%B1%E7%8B%AC%E7%89%B9%E7%9A%84%E5%B9%B3%E5%8F%B0%E4%BB%A5%E6%BB%A1%E8%B6%B3%E6%82%A8%E7%9A%84%E9%9C%80%E6%B1%82%EF%BC%8C%E6%8B%A5%E6%9C%89%E8%BF%99%E7%A7%8D%E7%81%B5%E6%B4%BB%E6%80%A7%E5%92%8C%E8%87%AA%E7%94%B1%E5%BA%A6%E5%8F%98%E5%BE%97%E8%B6%8A%E6%9D%A5%E8%B6%8A%E9%87%8D%E8%A6%81%E3%80%82″>

优化沟通和客户体验

当我们谈论CRO时,我们通常谈论的是在网络界面上运行实验 – 大多数情况下是电子商务或潜在客户生成,有时是SaaS优化。

LawnStarter作为一个市场,代表着一系列不同的挑战。 但它们也在实验方面突破了界限,因为它们也经过了网络界面来测试他们的产品通信。 他们在他们的工程博客上非常广泛地写了这篇文章。 这是他们发布的一个快速图表,可视化他们对电子邮件通信的参与度跟踪:

《Jonas Weigert关于登陆页面之外的A / B测试(Q&A)》

由于他们正在测试他们的网络界面,应用程序,产品通信和产品功能,他们使用什么技术来完成所有这些?

问:你们用什么来在产品和通信的不同部分进行实验?

《Jonas Weigert关于登陆页面之外的A / B测试(Q&A)》 Jonas Weigert:

“我相信对于我们这样规模的公司来说,最简单的解决方案就是最好的解决方案。

因此,对于目标网页和注册流程,我们将Optimizely与一些现成的报告工具结合使用。 对于产品通信测试,我们在内部构建了自己的解决方案,这使我们不仅可以在电子邮件上提高点击率,还可以了解用户在我们通过特定号召性用语启动的会话中所采取的操作。

测试内部功能很难标准化,因此为了简单起见,我们运行多个测试并标记已经暴露于一种变体或另一种变体的用户,然后随着时间的推移报告接触某个测试的用户如何使用我们的平台。

问:哇,所以你建立了自己的系统来做所有这些 – 你为什么选择这样做? 为什么不使用开箱即用的平台?

《Jonas Weigert关于登陆页面之外的A / B测试(Q&A)》 Jonas Weigert:

“正如我所提到的,对我们来说,最简单的解决方案通常是最好的(只要它能获得我们需要的见解)。

我们希望能够快速迭代,这有时意味着需要添加新的测试功能。

使用现成的解决方案,团队可以通过避免工程周期来快速迭代。 下一步是使用现成的解决方案来触发工程实施的测试。 这是必要的,因为我们面向用户的产品是单页面应用程序,而现有工具(如Optimizely)由于纯技术原因而无法很好地与该技术配合使用。

话虽如此,有时现有的解决方案将无法根据需要紧密集成到您的平台中,以获得您想要从测试中获得的所有洞察力。 当发生这种情况时,我们会建立自己的平台,一劳永逸地解决测试问题。“

就是这样。 在测试更多原型界面和用户体验元素时,他们通过Optimizely和现成的报告保持简单。 在测试产品通信或内部功能时,需要采用更加个性化的方法,他们构建了自己的系统来处理它。

单页应用程序面临的挑战

单页应用程序(SPA)因各种原因而变得越来越流行,允许更动态的应用程序和更加无缝的用户体验。 但由于%E5%AE%A2%E6%88%B7%E7%AB%AF%E4%BB%85%E5%8A%A0%E8%BD%BD%E4%B8%80%E6%AC%A1%EF%BC%8C%E5%9B%A0%E6%AD%A4%E5%AE%83%E4%BB%AC%E4%B8%BAA” b>

问:有趣的是你提到了单页应用。 我知道他们变得越来越受欢迎了。 你能解释为什么他们很难测试吗? 对于与他们打交道的人,您有什么建议?

《Jonas Weigert关于登陆页面之外的A / B测试(Q&A)》 Jonas Weigert:

“单页应用程序(SPA)的关键问题在于名称。

当您单击该功能时,应用页面将被加载一次并且页面上的内容被修改(而不是新加载的内容)。

用于测试页面内容的工具(如Optimizely)每次想要修改测试内容时都需要一个页面。 由于此事件无法可靠地触发并且应用程序不断对页面进行更改,因此这些工具无法在不破坏大量功能的情况下可靠地挂接到SPA中。“

算法优化

与Jonas交谈时,我最感兴趣的是他们如何尝试使用他们的产品功能,尤其是他们的分销算法,这就是他们如何将客户与草坪护理提供商相匹配。

它并不像通过付费,有机,社交等随机访问网站访问者那么简单。这些是您当前客户的实时实验,因此,存在一系列全新的挑战,包括随机化,分组,客户体验%E5%A4%8D%E6%9D%82%E6%80%A7%E9%97%AE%E9%A2%98%EF%BC%8C%E4%BB%A5%E5%8F%8A%E6%9B%B4%E5%85%B7%E6%8C%91%E6%88%98%E6%80%A7%E7%9A%84%E5%88%86%E6%9E%90%E3%80%82″>

问:你提到测试你的分配算法,你能进一步深入了解这意味着什么吗? 你如何确定一个分配算法是否“赢了”?

《Jonas Weigert关于登陆页面之外的A / B测试(Q&A)》 Jonas Weigert:

“衡量像我们的分销算法这样的成功绝对是一个挑战。

当我们创建此算法的不同版本时,这是因为我们正在尝试解决问题:客户满意度,提供商成功率,高评级等。

只有当我们试图解决的问题得到实质性减少或解决,并且其他关键业务指标(如流失,参与度,终身价值等)不受影响或改善时,我们才会认为该算法是胜者。“

如何用少量资源优先进行实验

LawnStarter没有美国运通的资源。 但他们仍然非常重视实验(正如许多创业公司所做的那样)。 然而,他们不断地采取平衡行动:与功能开发和其他机会领域相比,他们可以通过A / B测试可行地花费多少资源?

这种平衡行为对初创公司很有吸引力,因为他们经常需要充满斗志和创造力。

问:作为一家早期公司,您必须非常资源紧张。 您如何证明将这么多工程资源投入A / B测试?

《Jonas Weigert关于登陆页面之外的A / B测试(Q&A)》 Jonas Weigert:

“A / B测试毫无疑问是我们可以做的最有价值的事情,以推动我们的产品向前发展。

由于我们没有构建现有解决方案的更快,更便宜的版本,测试使我们能够通过了解这些想法对客户体验的最终影响来快速可靠地验证想法。 A / B测试的挑战不是设置或运行测试。

挑战在于跨客户群和/或市场报告结果。 由于我们使用Tableau对这些测试进行了所有报告,因此我们的工程团队可以专注于解决问题,而不必花费大量时间为每个测试构建报告工具。

此外,我们现在正在招聘一名成长工程师,因此我们可以让一个人专门负责测试。 这样我们就不会感到遗憾,因为工程资源正被拉向别的东西“

当然,当公司拥有更多的一般资源,人才和现金流时,资源挑战不会消失。 事实上,我经常看到稀缺资源的初创公司投入更多时间和精力进行实验,而不是企业的主宰者,他们往往行动缓慢,对产品开发的处理方式也大不相同。

因此,迭代,客户研究和报告的问题不会随着资源而消失。 维持实验文化的挑战始终存在。

通过与Jonas的谈话结束,我让他总结他的建议给那些希望认真对待优化的科技创业公司。

问:你在舞台上给公司的一个小窍门是什么?

《Jonas Weigert关于登陆页面之外的A / B测试(Q&A)》 Jonas Weigert:

“我们收集的关于人们如何使用我们平台的数据是制定产品决策时最宝贵的资产。

收集这些数据只是第一步。 你必须让它可行动。

我们很早就决定要“数据驱动”。为了实现工程设计解决方案,不仅可以工作,而且可以让我们通过在第一行之前提出“我们想要学习什么?”的问题来学习每一次迭代代码是写的。

对我们来说,最大的游戏规则改变者是%E4%BD%BF%E7%94%A8Redshift“>

结论

正如Jonas所说,数据是他们最宝贵的资产。 但它不只是集合,而是将其付诸行动。

虽然根据他们的行业和商业模式他们有独特的挑战,但这里也有一些更普遍的要点。

首先,批判性地思考如何优先考虑公司的测试和优化。 您是否希望在登陆页面之外进行实验并真正用它来推动增长? 随着您的扩展,您将如何授权团队实际执行此操作? 这里没有一个单一的答案,但它有助于开始对话。

其次,尽量让事情尽可能简单。 当然,确保您的技术和方法有效,但如果您的团队中没有人可以访问您的数据或运行测试,那么就存在固有的瓶颈。 LawnStarter倾向于采用简单的解决方案,因为它有助于加快测试和数据的速度和民主化。

这就是“数据驱动”组织的核心,对吗?

相关文章

点赞

发表评论

电子邮件地址不会被公开。 必填项已用*标注