當(dāng)前,A/B 測(cè)試日漸成為驅(qū)動(dòng)企業(yè)高增長的重要手段,其價(jià)值已被諸多企業(yè)看見并驗(yàn)證。借助 A/B 測(cè)試,通過觀察關(guān)鍵效果指標(biāo)的差異,選出更有效的方案,從而降低行動(dòng)成本和風(fēng)險(xiǎn),幫助企業(yè)擇優(yōu)選取策略,實(shí)現(xiàn)業(yè)績(jī)?cè)鲩L。
(資料圖片僅供參考)
隨著證券行業(yè)由增量市場(chǎng)轉(zhuǎn)變?yōu)榇媪渴袌?chǎng),券商的互聯(lián)網(wǎng)獲客成本逐漸攀升,加之證券行業(yè)的強(qiáng)監(jiān)管屬性,運(yùn)營逐漸從大刀闊斧的變革轉(zhuǎn)向精細(xì)化運(yùn)作,如何借助 A/B 測(cè)試工具調(diào)優(yōu)日常運(yùn)營動(dòng)作,提升客戶體驗(yàn),成為證券行業(yè)業(yè)務(wù)優(yōu)化的重要選擇。本文聚焦 A/B 測(cè)試在證券業(yè)務(wù)場(chǎng)景中的應(yīng)用與價(jià)值,為更多從業(yè)者開展實(shí)際應(yīng)用提供參考和借鑒。
成立于 2002 年的中銀證券,在全國 80 多個(gè)城市設(shè)有 110 余家分支機(jī)構(gòu),旗下有 「中銀證券」 APP 等,其曾獲評(píng)《證券時(shí)報(bào)》“年輕用戶喜愛的券商 APP”。在實(shí)際業(yè)務(wù)開展中,中銀證券與神策數(shù)據(jù)深入合作,共同探索如何利用 A/B 測(cè)試完成 APP 功能改版測(cè)試、用戶流量分流運(yùn)營、新功能上線發(fā)版等工作,提升效率的同時(shí)帶給客戶更優(yōu)質(zhì)的體驗(yàn)和服務(wù),驅(qū)動(dòng)業(yè)績(jī)?cè)鲩L。
關(guān)注神策數(shù)據(jù)公眾號(hào),了解神策在 30+ 細(xì)分領(lǐng)域的更多數(shù)字化實(shí)踐。
場(chǎng)景一:高效助力 APP 首頁九宮格改版,提升整體功能使用度
中銀證券業(yè)務(wù)人員計(jì)劃對(duì) APP 首頁九宮格功能區(qū)進(jìn)行改版,旨在提升首頁整體功能使用率。為了更科學(xué)地評(píng)估改版前后的效果,通常需要進(jìn)行對(duì)照試驗(yàn),以往的試驗(yàn)中銀證券比較依賴于研發(fā)人員,諸如圈選人群、建立試驗(yàn)層、獲取結(jié)果數(shù)據(jù)等都需要等待研發(fā)排期。
現(xiàn)在借助神策數(shù)據(jù) A/B 測(cè)試工具,可以便捷創(chuàng)建試驗(yàn),具體步驟如下:設(shè)置試驗(yàn)名稱等基本信息——選取受眾用戶——配置關(guān)注指標(biāo)(核心指標(biāo) & 留存指標(biāo))——設(shè)置試驗(yàn)分組——進(jìn)行代碼調(diào)試。此外可以實(shí)時(shí)生成試驗(yàn)報(bào)告,業(yè)務(wù)人員可以方便快速地查看試驗(yàn)結(jié)果,同時(shí)內(nèi)置的統(tǒng)計(jì)學(xué)檢驗(yàn),可以助力業(yè)務(wù)人員更科學(xué)地決策,如此以來減少了研發(fā)的工作量,提升了試驗(yàn)效率,業(yè)務(wù)人員可以做更多的試驗(yàn)進(jìn)行改版方案的驗(yàn)證。
為更好地驗(yàn)證方案的表現(xiàn)效果,業(yè)務(wù)人員選取每日訪問手機(jī) APP 的隨機(jī)流量作為試驗(yàn)人群,試驗(yàn)分層區(qū)使用根據(jù)業(yè)務(wù)特點(diǎn)定義的自帶代碼進(jìn)行人群圈選。
在最終效果觀測(cè)對(duì)比時(shí),將「核心功能區(qū)域的人均點(diǎn)擊次數(shù)」作為重點(diǎn)關(guān)注指標(biāo),通過神策分析工具的接入,可以及時(shí)查看和監(jiān)控指標(biāo)的變化趨勢(shì)和情況。經(jīng)過試驗(yàn)結(jié)果觀察和數(shù)據(jù)校驗(yàn),業(yè)務(wù)人員發(fā)現(xiàn)進(jìn)入實(shí)驗(yàn)組(新版本)人群人均點(diǎn)擊數(shù)優(yōu)于對(duì)照組(老版本),且控制組與對(duì)照組無顯著差異。
之后,再通過對(duì)首頁 UI 設(shè)計(jì)、核心功能布局、活動(dòng)頁面文案、核心流程引導(dǎo)等點(diǎn)位設(shè)計(jì)不同試驗(yàn)版本,業(yè)務(wù)人員不斷驗(yàn)證出更有效的方案,有效推動(dòng)了核心指標(biāo)的增長。
關(guān)注神策數(shù)據(jù)公眾號(hào),了解神策在 30+ 細(xì)分領(lǐng)域的更多數(shù)字化實(shí)踐。
場(chǎng)景二:借助 A/B 模塊分流,優(yōu)化 Banner位推薦算法
為了持續(xù)提升運(yùn)營效果,中銀證券大數(shù)據(jù)團(tuán)隊(duì)針對(duì)首頁 Banner 坑位進(jìn)行算法策略迭代,為了及時(shí)驗(yàn)證不同算法調(diào)整的有效性,大數(shù)據(jù)團(tuán)隊(duì)希望可以借助 A/B 試驗(yàn)的實(shí)時(shí)分流能力,有效評(píng)估不同展示策略對(duì)用戶的吸引力和效果。
借助神策數(shù)據(jù) A/B 測(cè)試工具,通過資金賬號(hào)圈定客戶人群后,將設(shè)備ID同步到神策數(shù)據(jù)用戶分群,再進(jìn)行用戶分群試驗(yàn),采用不同算法策略對(duì)客戶進(jìn)行輪播圖運(yùn)營,神策數(shù)據(jù) A/B 試驗(yàn)可以支持全端實(shí)施試驗(yàn),覆蓋用戶完整操作觸點(diǎn),這意味著試驗(yàn)結(jié)果可以實(shí)現(xiàn)用戶跨端識(shí)別,從而全面觀察算法策略對(duì) Banner 坑位的流量影響和結(jié)果指標(biāo)情況。
同時(shí)還會(huì)對(duì)所有進(jìn)入試驗(yàn)的用戶創(chuàng)建「試驗(yàn)標(biāo)簽」 ,該標(biāo)簽可用于神策系統(tǒng)的所有分析模型,完成全場(chǎng)景數(shù)據(jù)模型打通,全面掌握用戶行為,持續(xù)追蹤試驗(yàn)效果。
神策數(shù)據(jù) A/B 試驗(yàn)這種支持選取隨機(jī)流量進(jìn)行多版本試驗(yàn)的能力,高效地助力算法權(quán)重方案調(diào)優(yōu),通過逐步放量的方式進(jìn)行推廣,提升了人均坑位點(diǎn)擊次數(shù)。
場(chǎng)景三:A/B 測(cè)試助力灰度發(fā)布新功能,加快產(chǎn)品迭代優(yōu)化
A/B測(cè)試同樣可以有力支持新功能灰度發(fā)布,及時(shí)管理潛在風(fēng)險(xiǎn)。中銀證券產(chǎn)品團(tuán)隊(duì)計(jì)劃上線某項(xiàng)新功能,借助神策數(shù)據(jù) A/B 測(cè)試工具可以控制流量,實(shí)現(xiàn)先圈定部分特定人群體驗(yàn)新功能,觀察客戶反饋及投訴情況,根據(jù)數(shù)據(jù)表現(xiàn)進(jìn)一步擴(kuò)大試驗(yàn)人群范圍,逐步培養(yǎng)用戶習(xí)慣和接受程度,從而平滑完成新功能的上線發(fā)布。
業(yè)務(wù)人員可以控制整個(gè)過程,發(fā)布過程逐級(jí)擴(kuò)量,如果發(fā)現(xiàn)指標(biāo)異?；蚬δ?Bug,可以快速回滾切換版本,較大程度地降低業(yè)務(wù)損失。
未來,中銀證券還將與神策數(shù)據(jù)合力深挖 A/B 測(cè)試的價(jià)值,進(jìn)一步助力 APP 功能運(yùn)營與營銷彈窗觸達(dá),以及優(yōu)化產(chǎn)品、內(nèi)容及服務(wù)的推薦算法,尋找全局收益最大化,持續(xù)賦能業(yè)務(wù)團(tuán)隊(duì),全面提升產(chǎn)品的用戶體驗(yàn)。
關(guān)注神策數(shù)據(jù)公眾號(hào),了解神策在 30+ 細(xì)分領(lǐng)域的更多數(shù)字化實(shí)踐。
免責(zé)聲明：此文內(nèi)容為本網(wǎng)站轉(zhuǎn)載自其他媒體企業(yè)宣傳資訊，僅代表作者個(gè)人觀點(diǎn)，與本網(wǎng)無關(guān)。僅供讀者參考，并請(qǐng)自行核實(shí)相關(guān)內(nèi)容。您若對(duì)稿件處理有任何疑問或質(zhì)疑，請(qǐng)即與我們聯(lián)系，本網(wǎng)將迅速給您回應(yīng)并做處理。
郵箱：contactus@stockstar.com 處理時(shí)間：9:00—17:00。
關(guān)鍵詞： 中銀證券 測(cè)試工具 試驗(yàn)結(jié)果
