正如在JMP启动会议上提到的那样,战略计划与分析团队正在jmp.com上进行定期实验,以最大程度地提高网站访问者的期望行为。 在2021年第一季度,该团队进行了三个实验。 结果可以在下面找到。 提醒:如果您将来有网站实验的想法或要求,请在这里提交。
Q1实验旨在回答以下问题:
- 更改首页的布局是否会增加最终下载该试用版的访问者数量?
- 在STIPS页面上个性化号召性用语是否会增加点击率?
- “购买JMP”页面上的圆角按钮会增加点击率吗?
实验1 –更改首页的布局是否会增加最终下载该试用版的访问者数量?
由Alexa Baltazar领导
背景:熟悉我们网站行为数据的人普遍认为,大多数JMP主页访问者都希望下载该行为。 JMP免费试用。 出于这种想法,我们创建了一个网站测试,在主页上突出显示了JMP试用版,并增加了可点击的不动产,从而引导访问者下载了该试用版。 我们的假设是,在首页上更改试用版的布局和位置将增加下载试用版的人数。
设计首页变体时,我们遵循着陆页最佳做法:
- 与人脸看着您的产品的大英雄形象。
- 快速的重点新闻标题和子新闻标题。
- 大型,易于点击的号召性用语按钮。
- 社会证明–以客户报价的形式。
- 好处说明。
本实验:该实验于1月初启动,针对我们的新设计(变体)测试了当前的首页(控件)。 我们利用网站测试工具VWO进行实验,从而使我们可以将现有的首页或变体形式随机提供给访问者。 除了跟踪每个用户收到的主页版本外,我们跟踪了他们随后的行动-包括他们是否下载了试用版。
由于首页的en_us版本比其他任何国家/地区的网站都获得了更多的访问量,因此我们首先在该国家/地区的网站上进行了实验。
控制

变体

结果:实验进行了六个星期。 然后,我们下载了用户级别的匹配数据,并准备了要在JMP中进行分析的数据。 (我们删除了JMP员工的访问量。)我们的数据确定了每个用户收到的主页版本,以及该用户是否在会话期间访问了试用版下载页面和/或下载了试用版。 清理并准备好数据后,我们能够运行两个卡方检验独立性以确定:
- 主页的布局是否会影响从中下载试用版的人数?
不,没有证据表明主页的布局会影响到达跟踪下载表的人数。 我们最初对这些结果感到惊讶,因此我们决定还要查看网站访问者是否已经在Salesforce中。 该分层不会影响初始结果。

- 在进入试用版下载页面的人中,首页的布局是否影响了实际浏览并下载该试用版的人数?
是的,有证据表明主页的布局会影响试用版的下载速度。 当我们查看从首页到达试用版下载页面的首页访问者时,使用首页变体的访问者的试用表格填写量增加了11%。

结论:该实验使我们相信,无论网页布局如何,都有一定数量的网页访问者有兴趣下载该试用版。 但是,在这些访问者中,主页的布局会影响对试用感兴趣的访问者实际完成试用下载表格的可能性。 因此,我们建议Web团队在JMP 16促销结束后实施新版本的主页。 我们的计划是继续进行其他实验,以查看是否可以测试首页的其他方面以优化所需的结果。
实验2-在STIPS页面上个性化号召性用语是否会增加点击率?
由Liz Zarzar完成
背景:激活号召性按钮的三个因素非常有效:紧迫性,相关性和人脉关系。 该测试试图评估STIPS登陆页面上的号召性用语按钮上的紧迫性和人际关系因素的有效性。 紧急是指表明必须立即采取行动的短语,例如“紧急”,“现在”和“今天”。人际关系以用户的名义呈现动作,并通过面向第一人称的号召性用语来显示-使用诸如“我”,“我”或“我的”之类的词。
本实验: 1月初,我们启动了STIPS号召性用语按钮实验。 此实验针对当前文本“立即注册”(控件)测试了新文本“立即访问我的免费课程”(变体)。 我们的测试工具VWO允许我们随机提供变体或控件。 除了跟踪每个用户收到的按钮版本外,我们还跟踪访问者的后续操作-包括他们是否单击了按钮。
控制

变体

结果:为了收集足够的数据,我们进行了几个月的实验。 在JMP中打开用户级别的匹配数据后,我们从JMP员工那里删除了流量,并确定为每个用户提供了哪个版本的注册按钮,以及该用户是否在会话期间最终单击了该按钮。 清理并准备好数据后,我们能够进行卡方独立性检验以确定:
- 在STIPS页面上个性化号召性用语是否会增加点击率?
没有足够的证据得出结论,CTA文本的更改是我们在变体页面上看到“立即访问我的免费课程”按钮文本的点击率提高了1%的原因。

结论:此实验尚无定论-向号召性用语文字添加个性化和紧迫性可能会导致点击率上升(观察到点击率上升1%),但是我们缺乏足够的统计证据来区分观察到的效果和机会变化。 但是,由于这是一个很小的网站更改,不需要任何开发,并且文献中有证据支持此更改,因此我们建议将文本更改为“立即访问我的免费课程”。
实验#3-“购买JMP”页面上的圆角按钮会增加点击率吗?
由Caroline Huang完成
背景:诸如Amazon和Target之类的公司已经对圆角按钮对购买产品的可能性的影响进行了测试。 从理论上讲,圆角传达了友善,平易近人的形象,吸引了购买者,而尖角则使客户更加谨慎。 此因素已经在“ JMP试用表”页面上实现,但是如果我们要在“ JMP购买”页面上实现圆角按钮,科学是否仍然适用,从而提高了转换率?
本实验: 1月初,我们启动了“圆角按钮角”实验,该实验在“购买JMP”页面上测试了圆角按钮角与方形按钮角。 我们利用网站测试工具VWO来运行我们的实验,这使我们可以随机提供现有的网页或变体。 除了跟踪每个用户收到的按钮的版本外,还包括:我们跟踪了他们的后续操作-包括他们是否单击了按钮。
控制
变体

结果:为了让我们收集足够的数据,我们进行了几个月的实验。 在向JMP打开用户级别的匹配数据之后,我们从JMP员工那里删除了流量,并确定为每个用户提供了哪个版本的注册按钮,以及该用户是否在会话期间最终单击了该按钮。 清理并准备好数据后,我们能够进行卡方独立性检验以确定:
“购买JMP”页面上的圆角按钮会增加点击率吗?
没有足够的证据得出结论,即按钮角的舍入会影响“购买JMP”页面上按钮的点击率。

结论:此实验尚无定论–我们无法检测到“购买JMP”页面上的按钮角变圆对按钮的点击率的影响。 尽管研究结果表明,圆角按钮对买家的吸引力较小,但此研究是在主要的在线零售商上进行的-因此,情况与我们的确切实验有所不同。
很高兴看到我们试图从我们所做的事情中获得证据。 继续努力!