用來評估業務影響的 Azure 技術

已完成

組織建立 MVP 之後,需要驗證創新假設。 在本單元中,您將了解 Azure 工具在創新流程中的這項重要部分可提供哪些協助。

評估效益

評估假設是否正確可能很棘手,因為有多種因素可能會影響關鍵效能指標。 由於建立因果可能很複雜,這些因素都可能會提供關於預期成功的提示。 例如,即使在導入某項功能之後銷售額增加,也難以證明新功能是否為銷量增加的主因。

但是,將功能發行給應用程式使用者的方式,有助於評估假設的有效性:

  • 具有功能旗標功能通道Canary 部署的受控部署,可讓您將功能釋出給一組有限的使用者,避免中斷整體客戶的體驗。 此外,您可以直接將擁有功能與沒有功能的客戶效能互相進行比較。
  • 入口網站選項可讓使用者決定是否要使用新功能,讓使用者能夠掌控自己的體驗。 若有許多使用者選用新功能,則幾乎可以確定先前的功能確實有需要改進的地方。 如果選用新功能的客戶退回至先前的版本,則可能代表部署的 MVP 沒有達到目的。
  • 客戶問卷若正確施行,會是一項功能強大的意見反應機制。 如果問卷易於填寫,客戶將會提供其滿意度的相關資訊。 只需按一下的「紅綠燈」滿意度問卷,或是關於新功能的單一問題,也許能提供見解來協助評估創新假設是否正確。 一般情況下,僅有少數使用者會願意花費時間,完整且誠實地填寫篇幅冗長的問卷。

瞭解您的應用程式

Azure Application Insights 是一個應用程式效能管理 (APM) 平台,提供一組豐富的工具來收集應用程式遙測。 您可以將這些深入解析用於多個用途,例如效能監視、問題疑難排解,或了解使用者移轉應用程式的方式。 最後一個項目對於創新生命週期至關重要。 您可以將其用來驗證創新的假設,並判斷特定的創新是否有改善客戶體驗。

比使用者早一步偵測到問題

影響使用者體驗的重要元素,就是應用程式的效能和可用性。 如果應用程式無法正常運作並發生錯誤,或是回應不夠迅速,則會導致部分使用者因挫折感而放棄這款應用程式。 您的組織可能會因此失去業務。 如果那些受挫的使用者在社交媒體上分享他們的體驗,可能也會損害到貴公司的信譽。

在這些問題影響使用者之前,偵測到這些問題是非常重要的。 為了達成此目標,您需要主動監視應用程式,並在潛在問題影響業務之前開始處理。 例如,您可以啟用通知以自動開啟事件,以便在客戶回報報告之前進行調查。

智慧偵測是 Azure Application Insights 的實用功能。 它可能會在應用程式行為不尋常時發出警示。 其會使用機器學習來偵測異常狀況,而警示內容會比傳統的錯誤通知更豐富。

通知通常會報告可能發生問題,而不會有潛在業務影響的相關內容。 智慧偵測會警示包含受影響的使用者數目、與失敗相關聯的模式,或與一般行為相較之下的失敗率等資訊。 如此一來,您便可以將焦點放在業務上最重要的問題。

監視使用者活動

Azure Application Insights 中的使用量分析可協助您評估哪些應用程式區域需要改善。 例如,使用方式分析可識別最受歡迎的應用程式功能,或使用者離開入口網站的特定點。 例如,您可以探索應用程式是否在特定地理區域的表現優於其他地區,藉以獲得應用程式優缺差異的珍貴資訊。

使用 Azure 應用程式 Insights 所提供的資料來制訂假設後,您可以分析遙測資料以測量現在狀況是否更好或更壞。 您可以將自訂商務事件內嵌在應用程式中,如此遙測資料會包含其他可協助測量流程的資訊。

漏斗圖可成為具有洞察力的工具。 您可以透過漏斗圖,預先定義您預期使用者使用應用程式時將遵循的流程。 然後,您可以監視使用者遵循的模式,並在使用者以非預期的方式運作時,判斷應用程式中的問題。

保留使用者

Application Insights 的保留工具提供有關使用者流失的特定功能。 與商務事件合併時,保留工具包含有價值的學習資料。 例如,了解意外離開應用程式的客戶採取了哪些動作,將讓您制定何為對業務最具衝擊力的假設。

例如,若大多數使用者從付款方式分頁中離開網站,您應懷疑那裡可能存在商務問題。 付款選項可能不足或未清楚顯示,或另一個問題,就是讓使用者無法在他們的購物流程中繼續進行。

影響分析

影響分析是 Azure 應用程式 Insights 中的功能,可將應用程式技術層面與有形商務計量相互關聯。

例如,產品網頁載入速度應該多快,讓大多數使用者持續購買流程? 使用影響分析,您可以展示網頁載入時間和使用者購買呈現產品比率間的關聯。 此資訊可協助您驗證或拒絕創新假設,以及將商務需求轉換為技術規格。

摘要

Tailwind Traders 決定引進一些新功能至其電子商務應用程式,如新的付款平台。 應用程式已使用 Azure 應用程式 Insights 進行檢測,以了解有多少客戶正在使用新的付款方式,以及付款流程的轉換率是否提高。 新的付款方式已標示為預覽,讓使用者在遇到問題時更能理解。

Application Insights 協助 Tailwind Traders 識別,儘管有「預覽」橫幅,仍有高比例的使用者決定使用新的付款方式。 Application Insights 確認新功能有如預期般運作,且無重大錯誤。 此外,購買轉換率大幅增加。

Tailwind Traders 現在可專注於將新付款方式的 MVP 轉換成產品等級的功能。 公司可以前進至創新週期的學習階段,以制定更多假設。