正如在JMP啟動會議上提到的那樣,戰略計劃與分析團隊正在jmp.com上進行定期實驗,以最大程度地提高網站訪問者的期望行為。 在2021年第一季度,該團隊進行了三個實驗。 結果可以在下面找到。 提醒:如果您將來有網站實驗的想法或要求,請在這裡提交。
Q1實驗旨在回答以下問題:
- 更改首頁的佈局是否會增加最終下載該試用版的訪問者數量?
- 在STIPS頁面上個性化號召性用語是否會增加點擊率?
- “購買JMP”頁面上的圓角按鈕會增加點擊率嗎?
實驗1 –更改首頁的佈局是否會增加最終下載該試用版的訪問者數量?
由Alexa Baltazar領導
背景:熟悉我們網站行為數據的人普遍認為,大多數JMP主頁訪問者都希望下載該行為。 JMP免費試用。 出於這種想法,我們創建了一個網站測試,在主頁上突出顯示了JMP試用版,並增加了可點擊的不動產,從而引導訪問者下載了該試用版。 我們的假設是,在首頁上更改試用版的佈局和位置將增加下載試用版的人數。
設計首頁變體時,我們遵循著陸頁最佳做法:
- 與人臉看著您的產品的大英雄形象。
- 快速的重點新聞標題和子新聞標題。
- 大型,易於點擊的號召性用語按鈕。
- 社會證明–以客戶報價的形式。
- 好處說明。
本實驗:該實驗於1月初啟動,針對我們的新設計(變體)測試了當前的首頁(控件)。 我們利用網站測試工具VWO進行實驗,從而使我們可以將現有的首頁或變體形式隨機提供給訪問者。 除了跟踪每個用戶收到的主頁版本外,我們跟踪了他們隨後的行動-包括他們是否下載了試用版。
由於首頁的en_us版本比其他任何國家/地區的網站都獲得了更多的訪問量,因此我們首先在該國家/地區的網站上進行了實驗。
控制

變體

結果:實驗進行了六個星期。 然後,我們下載了用戶級別的匹配數據,並準備了要在JMP中進行分析的數據。 (我們刪除了JMP員工的訪問量。)我們的數據確定了每個用戶收到的主頁版本,以及該用戶是否在會話期間訪問了試用版下載頁面和/或下載了試用版。 清理並準備好數據後,我們能夠運行兩個卡方檢驗獨立性以確定:
- 主頁的佈局是否會影響從中下載試用版的人數?
不,沒有證據表明主頁的佈局會影響到達跟踪下載表的人數。 我們最初對這些結果感到驚訝,因此我們決定還要查看網站訪問者是否已經在Salesforce中。 該分層不會影響初始結果。

- 在進入試用版下載頁面的人中,首頁的佈局是否影響了實際瀏覽並下載該試用版的人數?
是的,有證據表明主頁的佈局會影響試用版的下載速度。 當我們查看從首頁到達試用版下載頁面的首頁訪問者時,使用首頁變體的訪問者的試用表格填寫量增加了11%。

結論:該實驗使我們相信,無論網頁佈局如何,都有一定數量的網頁訪問者有興趣下載該試用版。 但是,在這些訪問者中,主頁的佈局會影響對試用感興趣的訪問者實際完成試用下載表格的可能性。 因此,我們建議Web團隊在JMP 16促銷結束後實施主頁的新版本。 我們的計劃是繼續進行其他實驗,以查看是否可以測試首頁的其他方面以優化所需的結果。
實驗2-在STIPS頁面上個性化號召性用語是否會增加點擊率?
由Liz Zarzar完成
背景:激活號召性按鈕的三個因素非常有效:緊迫性,相關性和人脈關係。 該測試試圖評估STIPS登陸頁面上的號召性用語按鈕上的緊迫性和人際關係因素的有效性。 緊急是指表明必須立即採取行動的短語,例如“緊急”,“現在”和“今天”。人際關係以用戶的名義呈現動作,並通過面向第一人稱的號召性用語來顯示-使用諸如“我”,“我”或“我的”之類的詞。
本實驗: 1月初,我們啟動了STIPS號召性用語按鈕實驗。 此實驗針對當前文本“立即註冊”(控件)測試了新文本“立即訪問我的免費課程”(變體)。 我們的測試工具VWO允許我們隨機提供變體或控件。 除了跟踪每個用戶收到的按鈕版本外,我們還跟踪訪問者的後續操作-包括他們是否單擊了按鈕。
控制

變體

結果:為了收集足夠的數據,我們進行了幾個月的實驗。 在JMP中打開用戶級匹配數據後,我們從JMP員工那裡刪除了流量,並確定為每個用戶提供了哪個版本的註冊按鈕,以及該用戶是否在會話期間最終單擊了該按鈕。 清理並準備好數據後,我們能夠進行卡方獨立性檢驗以確定:
- 在STIPS頁面上個性化號召性用語是否會增加點擊率?
沒有足夠的證據得出結論,CTA文本的更改是我們在變體頁面上看到“立即訪問我的免費課程”按鈕文本的點擊率提高了1%的原因。

結論:此實驗尚無定論-向號召性用語文字添加個性化和緊迫性可能會導致點擊率上升(觀察到點擊率上升1%),但是我們缺乏足夠的統計證據來區分觀察到的效果和機會變化。 但是,由於這是一個很小的網站更改,不需要任何開發,並且文獻中有證據支持此更改,因此我們建議將文本更改為“立即訪問我的免費課程”。
實驗#3-“購買JMP”頁面上的圓角按鈕會增加點擊率嗎?
由Caroline Huang完成
背景:諸如Amazon和Target之類的公司已經對圓角按鈕對購買產品的可能性的影響進行了測試。 從理論上講,圓角傳達了友善,平易近人的形象,吸引了購買者,而尖角則使客戶更加謹慎。 此因素已經在“ JMP試用表”頁面上實現,但是如果我們要在“ JMP購買”頁面上實現圓角按鈕,科學是否仍然適用,從而提高了轉換率?
本實驗: 1月初,我們啟動了“圓角按鈕角”實驗,該實驗在“購買JMP”頁面上測試了圓角按鈕角與方形按鈕角。 我們利用網站測試工具VWO來運行我們的實驗,這使我們可以隨機提供現有的網頁或變體。 除了跟踪每個用戶收到的按鈕的版本外,還包括:我們跟踪了他們的後續操作-包括他們是否單擊了按鈕。
控制
變體

結果:為了讓我們收集足夠的數據,我們進行了幾個月的實驗。 在向JMP打開用戶級別的匹配數據之後,我們從JMP員工那裡刪除了流量,並確定為每個用戶提供了哪個版本的註冊按鈕,以及該用戶是否在會話期間最終單擊了該按鈕。 清理並準備好數據後,我們能夠進行卡方獨立性檢驗以確定:
“購買JMP”頁面上的圓角按鈕會增加點擊率嗎?
沒有足夠的證據得出結論,即按鈕角的捨入會影響“購買JMP”頁面上按鈕的點擊率。

結論:此實驗尚無定論–我們無法檢測到“購買JMP”頁面上的按鈕角變圓對按鈕的點擊率的影響。 儘管研究發現表明,圓角按鈕對買家的吸引力較小,但此研究是在主要的在線零售商上進行的-因此,這種情況與我們的確切實驗有所不同。
很高興看到我們試圖從我們所做的事情中獲得證據。 繼續努力!