建築釺


Braze如何用迷宮在規模上測試產品設計

伊藤由奈Akazawa 通過伊藤由奈Akazawa2020年7月2日

在Braze,可用性是關鍵。Braze客戶參與平台的用戶界麵(UI)旨在幫助營銷人員、增長團隊成員和其msports万博体育客服他終端用戶輕鬆地在活動、用戶旅程、測試等之間導航。這使得他們能夠在當今複雜、快速變化的世界中成功地執行公司的營銷戰略。但是,雖然我們為我們提供的用戶體驗(UX)感到自豪,但我們也非常清楚實現和維護它需要做的重要工作。

這項工作的一個重要元素是可用性測試。它允許我們的產品團隊測試和驗證Braze產品及其設計,同時還可以識別潛在的流程,提供公正的反饋,並發現新的見解。這使得它成為Braze產品開發周期中最重要的步驟之一,對於世界各地的產品組織來說也是如此。

鑒於此,讓我們來看看我們的產品團隊是如何利用迷宮,一個用戶測試平台,以加快我們的設計過程,獲得有意義的見解,並推動更好的設計決策,同時測試我們的最新產品之一-Braze多媒體消息服務(MMS)——規模。

Braze的用戶體驗:擁抱以客戶為中心的方法

在Braze,我們的產品團隊長期以來一直采取以客戶為中心的方法來實現用戶體驗,這種方法是基於我們從客戶那裏學到的知識來不斷迭代和改進我們的產品。manbetx万博全站客户端近年來,Braze客戶和合作夥伴營銷團隊一直在努力釺篝火,一個Slack的營銷、增長和產品團隊成員小組,變成了一個緊密的Braze用戶社區,致力於幫助彼此成功。當我們調查Braze產品的用戶體驗元素時,這個社區的成員是我們重要的合作夥伴,為我們提供了有意義的、可操作的見解,了解Braze客戶如何使用和感知我們所構建的產品。manbetx万博全站客户端

我們的產品設計團隊通過視頻聊天來進行可用性測試。然而,根據我們正在研究的功能,這種測試方法可能會占用我們團隊過多的時間和精力,也會占用那些慷慨地自願付出時間的最終用戶的時間和精力。所以,我們決定嚐試Maze,看看我們是否可以使用這個解決方案更容易地進行大規模的可用性測試。

Braze的可用性測試過程

在開始可用性測試之前,你需要確保你的原型已經準備好。在Braze,這意味著使用協同界麵設計工具Figma.以我們的MMS功能為例,我們通過內部的幾個人測試原型,讓我們充實最初的假設,並確定一些重要的細節。

接下來,為了大規模運行可用性測試,我們采取了以下高級步驟:

1.假設/問題列表

這一步要求產品設計團隊鞏固在設計過程中出現的任何假設/問題,包括原型設計、內部測試和設計評審,以確保他們的可用性測試著眼於正確的東西。對我們來說,在設計MMS原型時,我們提出了以下假設和問題:

  • 采用和理解工作流程:如果用戶在使用該功能時看到的第一項是媒體文件,我們是否可以鼓勵用戶首先上傳媒體文件?
  • 可用性:如果該選項顯示為第三個按鈕而不是獨立字段,用戶是否不太可能上傳非braze托管的資產(圖像、gif等)?
  • 視覺傳達:如果我們在原型的預覽視圖中添加一個更醒目的橫幅,用戶是否會更容易理解他們無法控製彩信的順序?

2.設置並啟動原型

從原型到實際測試有時會很複雜。但使用Maze的一個巨大好處在這個階段變得清晰起來,當新的Figma /迷宮集成這使得無縫地將我們的Figma原型導入到Maze中成為可能,然後設計一個自定義調查來捕捉我們原型的定量和定性反饋。我們設置了兩個獨立的測試(而不是在一個測試中進行A/B測試),因為我們的原型具有不同的布局和流程。我們希望能夠定製我們的調查,以匹配每個被測試的體驗,利用Maze和Figma一起使事情變得容易。

我們發現一旦你導入原型並選擇你的幸福的路徑在美國,添加一些反饋問題來從用戶那裏獲得額外的信息是明智的。下麵是我們在MMS可用性測試中問他們的問題:

一旦你的問卷設置好了,在你的測試中添加介紹和指導方針是一個好主意,這樣所有的用戶都清楚他們被要求做什麼,以及他們如何有效地表達他們的聲音。

然後是排練的時候了!我們用Braze Product團隊的一個更廣泛的子集測試了我們的MMS原型,並根據他們的反饋略微調整了我們所問的問題。一旦我們對一切都感到滿意,我們就聯係Bonfire社區,招募那些對測試我們的MMS工作流感興趣的人。感興趣的人被邀請到我們專門為測試而創建的私人Slack頻道,並獲得了兩個原型的鏈接和附帶的說明。

3.分析可用性測試結果

對於我們的MMS原型可用性測試,我們最終有超過20名測試參與者。他們花了不到一周的時間來完成測試,但遠程測試的一個好處是,它可以在第一個用戶完成測試後立即開始收集定性數據。然後,一旦所有參與者都完成了測試,我們就可以開始觀察定量結果(例如,總體滿意度得分)。

當需要綜合我們的A/B測試結果時,我們首先查看來自調查的定性數據並指出共同主題。然後我們看了一下總體滿意度:

我們的下一步是深入研究Maze生成的每個原型的交互熱圖。因為我們與一個較小的測試人員小組一起工作,我們專注於分析每個用戶的路徑和交互行為,以便識別(並截屏)常見行為以及不同操作發生的頻率。

它看起來像什麼?舉個例子,我們發現點擊帶有MMS標簽的右下拉選項的總體成功率為81%。但原型B的這一比率高出16個百分點,這表明用戶在與原型交互時正在學習如何使用原型。為了進一步改善體驗,減少摩擦,並將成功率提高到100%,我們正在采用這些見解並使用它們來改進我們在Braze儀表板中顯示SMS/MMS的方式。

使用Maze加速可用性測試

從我們啟動可用性測試的那一刻起,我們隻花了一周的時間就得到了有用的結果——而且我們能夠在每個用戶的反饋中開始綜合結果,讓我們實時了解測試的進展情況。這種速度和清晰度是一個很大的優勢。在我們之前的流程中,通常需要大約11個小時的視頻會議時間來獲得類似的洞察,加上與Braze客戶聯係、協調日程安排和編寫測試腳本相關的額外時間,如果不使用Maze,至少需要2-3周才能完成測試。manbetx万博全站客户端

使用Maze加速了我們的產品設計過程,並有可能推動更快的周轉時間,加快產品迭代,並為更好,更快的終端用戶體驗。隨著Braze繼續擴大其產品設計團隊,我們希望模具在我們的運營中發揮不可或缺的作用。通過探索和利用像Maze這樣的工具,我們正在投資於構建Braze所涉及的長期工作,為我們的最終用戶提供更好的體驗,並推動我們產品可能的邊界。

有興趣在Braze工作?看看我們目前的職位空缺


伊藤由奈Akazawa

伊藤由奈Akazawa

相關內容

從B2C研究到B2B研究:我的用戶體驗之旅

閱讀更多

黑客日的故事:Braze軟件工程經理Derek Schultz談競選評論

閱讀更多

來自黑客日的故事:Braze首席產品設計師Sarah Wilson和高級軟件工程師Camden Reslink測試拖放式應用內消息編輯器

閱讀更多

擴展企業SaaS產品團隊

閱讀更多