透過 Firebase Test Lab 開始測試 Android 應用程式

Firebase Test Lab 可讓您在各種裝置和設定中測試應用程式。本入門指南提供實作路徑,並介紹 Test Lab 的 Android 產品。

如要進一步瞭解 Test Lab 配額與定價方案,請參閱用量、配額和定價

基本概念

針對您選取的裝置和設定執行測試或一組測試案例時,Test Lab 會批次對應用程式執行測試,然後以「測試矩陣」顯示結果。

裝置 × 測試執行 = 測試矩陣

裝置
用來執行測試的實體或虛擬裝置 (僅限 Android),例如手機、平板電腦或穿戴式裝置。測試矩陣中的裝置會依裝置型號、OS 版本、螢幕方向和語言代碼 (也稱為地理位置和語言設定) 識別。
測試、測試執行
要在裝置上執行的測試 (或一組測試案例)。您可以對每部裝置執行一項測試,或選擇對測試進行資料分割,並在不同的裝置上執行測試案例。
測試矩陣
包含測試執行的狀態和測試結果。如果矩陣中的任何測試執行失敗,整個矩陣就會失敗。

步驟 1:準備測試以上傳至 Test Lab

可用的測試類型

您可以使用 Test Lab 執行下列測試。請注意,所有測試類型都限制在實體裝置上執行 45 分鐘,在虛擬裝置上執行 60 分鐘。任何未偵測到的例外狀況都會導致測試失敗。

  • 檢測設備測試檢測設備單元測試:您使用 EspressoUI Automator 架構編寫的測試。透過這項測試,您可以使用 AndroidJUnitRunnerAPIs 對應用程式狀態做出明確宣告,驗證應用程式正常運作。

  • Robo 測試:這項自動化測試會分析應用程式 UI,然後模擬使用者活動以有條理的方式進行探索,而且無須編寫任何程式碼。詳情請參閱「關於 Robo 測試」。

  • 遊戲迴圈測試:使用「示範模式」模擬玩家在遊戲應用程式中動作的測試。以快速且可擴充的方式驗證遊戲對使用者而言執行效能良好。選擇執行遊戲迴圈測試時,您可以:

    • 編寫遊戲引擎原生的測試

    • 避免為不同的 UI 或測試架構編寫相同的程式碼

    • 視需要建立多個迴圈,以在單一測試執行作業中執行 (詳情請參閱「關於遊戲迴圈測試」)。您也可以使用標籤整理迴圈,以便持續追蹤及重新執行特定迴圈。

    如要瞭解如何使用 Test Lab 執行這項測試,請參閱「執行遊戲迴圈測試」。

執行測試的工具

您可以選擇下列工具來執行測試:

您也可以使用 Alpha 版或 Beta 版,將應用程式的 APK 檔案上傳並發布到 Play 商店,無須另外付費。詳情請參閱「透過正式發布前測試報告找出問題」和「Robo 測試」。

步驟 2:選擇測試裝置

Test Lab 支援在 Google 資料中心內安裝及執行的多種 Android 裝置製造商和型號進行測試。在 Test Lab 裝置上執行測試,有助於偵測使用 Android Studio 中的模擬器測試應用程式時,可能不會發生的問題。詳情請參閱「可用的裝置」一文。

步驟 3:查看測試結果

無論您如何啟動測試,所有測試結果都由 Test Lab 管理,並可在線上檢視。

系統會自動儲存測試結果摘要,您可以在 Firebase 控制台中查看。內含測試作業最相關的資料,包括測試案例的影片、螢幕截圖、通過的測試數量、失敗或結果不穩定的等。

原始測試結果包含測試記錄和應用程式失敗詳細資料,並會自動儲存在 Google Cloud 值區中。如果您指定值區,則須支付儲存空間的費用如果您未指定值區,Test Lab 會為您免費建立值區。

詳情請參閱「分析 Firebase Test Lab 結果」。

Android Studio 啟動測試時,您也可以在開發環境內部查看測試結果。

清除裝置

Google 非常重視應用程式資料的安全性。我們會按照業界標準最佳做法,在每次執行測試後移除應用程式資料,並重設實體裝置的系統設定,確保裝置準備好執行新的測試。針對可以透過自訂復原映像檔刷新的裝置,我們會在測試執行期間刷新這些裝置。

針對 Test Lab 使用的虛擬裝置,系統會在使用裝置執行個體後刪除執行個體,因此每次執行測試時都會使用新的虛擬裝置執行個體。


Test Lab 和 Google Play 服務

Test Lab 裝置通常可在最新版 Google Play 服務 SDK 上執行,但新版 SDK 發布後,可能需要幾天才能更新。請注意,部分裝置可能會發生相容性問題。

允許測試裝置存取私人後端伺服器

部分行動應用程式需要與私人後端服務通訊,才能在測試期間正常運作。如果您的後端伺服器受防火牆規則保護,您可以使用下列 IP 位址區塊透過防火牆開啟路徑,允許 Test Lab 的實體和虛擬裝置存取。

行動廣告

Test Lab 提供的可擴充基礎架構可自動執行應用程式測試,但是很抱歉,用於產生詐欺廣告收益的惡意應用程式可能會濫用這項功能。

解決方法如下:

  • 如果您使用或與第三方數位廣告供應商合作 (例如廣告聯播網或需求端平台),建議您在開發和測試期間使用測試廣告,而非實際廣告。

  • 如果您需要在測試中使用實際廣告,請使用以下的 IP 位址區塊通知與您合作的數位廣告供應商,以篩除 Test Lab 產生的收益和所有相應流量。您不需要通知 Google 自有的廣告供應商,Test Lab 會代為處理。

Test Lab 裝置使用的 IP 位址

Test Lab 裝置產生的所有網路流量都來自下列 IP 位址區塊。您也可以在 gcloud CLI 中使用 gcloud beta firebase test ip-blocks list 指令存取這份清單。這份清單每年平均更新一次

平台和裝置類型 CIDR IP 位址區塊
Android 和 iOS 實體裝置、Arm 虛擬裝置

70.32.128.0/19 (於 2022 年 2 月新增)

108.177.6.0/23

108.177.18.192/26 (在 2022 年 2 月 26 日新增)

108.177.29.64/27 (將於 2022 年 2 月展開)

108.177.31.160/27 (於 2022 年 2 月新增)

199.36.156.8/29 (於 2022 年 2 月新增)

199.36.156.16/28 (於 2022 年 2 月新增)

209.85.131.0/27 (於 2022 年 2 月新增)

2001:4860:1008::/48 (新增 02-2022)

2001:4860:1018::/48 (新增 02-2022)

2001:4860:1019::/48 (新增 02-2022)

2001:4860:1020::/48 (新增 02-2022)

2001:4860:1022::/48 (新增 02-2022)

70.32.128.48/28 (新增 04 至 2024)

Android 虛擬裝置 (非 Arm)

34.68.194.64/29 (於 2019 年 11 月新增)

34.69.234.64/29 (於 2019 年 11 月新增)

34.73.34.72/29 (於 2019 年 11 月新增)

34.73.178.72/29 (於 2019 年 11 月新增)

34.74.10.72/29 (於 2022 年 2 月新增)

34.136.2.136/29 (於 2022 年 2 月新增)

34.136.50.136/29 (於 2022 年 2 月新增)

34.145.234.144/29 (於 2022 年 2 月 29 日新增)

35.192.160.56/29

35.196.166.80/29

35.196.169.240/29

35.203.128.0/28

35.234.176.160/28

35.243.2.0/27 (於 2019 年 7 月新增)

35.245.243.240/29 (在 2022 年 2 月 29 日新增)

199.192.115.0/30

199.192.115.8/30

199.192.115.16/29

裝置 IP 區塊已不再使用

74.125.122.32/29 (已於 2022 年 2 月移除)

216.239.44.24.24/29 (已於 2022 年 2 月移除)