MeterSphere案例分享丨88完美郵箱全面提升產品質量的落地指南

595次閱讀

2019年，全球領先的文化娛樂產業集團完美世界拿下了“一定是東半球最貴的”頂級域名www.88.com。2020年8月8號，歷時一年研發，88完美郵箱與大家正式見面。立足產品角度，這是完美世界正式進軍郵箱賽道的起點。對于88郵箱團隊來說，此舉邁出了從0到1的第一步。

不同于QQ郵箱和網易郵箱，88完美郵箱主打商務與協同辦公，提供團隊郵件快速創建（日報、周報、月報、任務和審批）、團隊通訊錄、團隊郵件組管理、88便簽、對接飛書會議、在線文檔，以及免費開放5GB容量網盤等高效協同的功能。

對于完美世界來說，郵箱業務的誕生與快速發展催生出一個全新的團隊，從0到1組建團隊，需要建立新的研發流程和規范。在這一過程中，測試如何發揮更大的價值是一個重要的課題，而測試實現左移和右移是關鍵目標和突破方向。

測試左移和測試右移模型

對軟件產品而言，傳統的質量模式通過測試左移和測試右移被賦予更多的內涵，也承擔起更多的職責。

圖1 測試左移和右移模式

■ 測試左移：測試左移，本質上是借助工具和測試手段更早地發現問題和預防問題。

需求：對需求、架構和設計模型的測試；
開發：著重增加對單元、組件和服務層的測試；
持續測試：自動化測試。

■ 測試右移：對測試同學來說，版本上線后需要持續關注線上監控和預警，及時發現問題并跟進解決，將影響范圍降到最低。

灰度發布：新版本線上測試；
監控：合理的性能監測、數據監控和預警機制；
用戶反饋：線上問題處理、跟蹤機制。

測試左移如何落地？

1. 測試任務跟蹤

測試任務跟蹤，不僅僅只是跟蹤測試本身的工作，還需要介入到需求、技術方案、編碼的全過程。只有前序每一步都跟蹤到位，才能盡量避免測試過程中的不可控因素，從而保證產品質量。

圖2 測試任務跟蹤流程

測試同學的任務其實是不好度量和跟蹤的，但是MeterSphere開源持續測試平臺為我們解決了這個痛點。測試計劃、測試用例、執行情況等都可以在MeterSphere平臺上直觀地看到，做到了“讓數據為質量說話”。

圖3 MeterSphere測試跟蹤界面

2. 建立代碼分支管理規范

開發同學在編碼過程中，經常會因為環境不夠用、或者代碼被覆蓋等問題而煩惱。對于敏捷開發模式的團隊，需求多、分支多是常態，怎樣讓開發測試有序地協同工作，規范分支管理流程是必要的。

圖4 代碼分支管理

3. Sonar代碼質量檢測

Sonar是可視化的代碼質量檢查平臺，支持的語言包括PHP、Java、Python、C#等，包含項目、問題、代碼規則、質量配置、質量閥和配置五個模塊。

圖5 Sonar代碼質量管理平臺

以下是項目執行情況的概覽，每個項目名稱代表一個項目，項目檢查的結果簡單呈現在項目首頁概覽中，包含Bug數量、漏洞數量、不規范、單元覆蓋率、代碼重復度等維度。

我們通常會將Sonar發現的問題以Bug的方式提交給開發團隊，要求致命、嚴重級別的Bug必須修改，并跟蹤解決進度。在實際的運用過程中，也會根據項目實際情況調整質量閥門，以避免誤報等情況出現。

圖6 項目執行情況概覽

4. 持續測試：基于Metersphere平臺實現接口自動化

接口測試提前接入，通過YApi管理接口文檔，開發同學在需求評審后即進入技術設計與接口設計階段，測試同學則根據接口文檔進行Mock測試。

圖7 接口測試界面

基于MeterSphere開源持續測試平臺，我們實現了測試工作的自動化。提測后自動化測試接口通過率，提前發現問題，有效提升測試效率。

圖8 為什么要做接口自動化？

MeterSphere持續測試平臺采用開源可擴展框架，實現了測試跟蹤、接口自動化、性能自動化的全覆蓋，特別適合創業團隊。從測試團隊的角度看，MeterSphere平臺既能切實地提升產品質量和測試效率，又解決了自研自動化框架人力不足的痛點。

同時，MeterSphere支持與Jenkins的集成，每次有新的代碼提交后，平臺自動觸發環境部署和接口自動化Job執行，并發送郵件通知，實現了主流程功能的回歸測試，提升測試效率。

圖9 MeterSphere開源持續測試平臺界面

測試右移如何落地？

1. 灰度發布

使用灰度發布方式，新版本上線后先更新部分服務器，測試人員先進行驗收通過后，再全量發布。這樣一來，盡可能地避免了測試和正式環境配置不一致、數據庫更新不及時等不確定因素引起的問題。

圖10 灰度發布流程

2. 服務監控

對于測試人員來說，服務上線后仍然需要關注服務的運行情況，以便在出現系統問題時能夠快速做出反應，將影響降至最低。在這一環節，我們引入了Zabbix系統檢測工具，實時監控系統硬件資源使用情況。同時設置報警通知，將異常情況第一時間通知給相關負責人。

Zabbix通過調用ODBC來獲取數據庫的數據，以及數據庫狀態等信息；通過IPMI Agent 監控硬件設備，例如Dell或者HP服務器的主板溫度、CPU電壓、蓋子是不是被打開等；通過JMX Agent監控Java JVM，例如Tomcat；通過追蹤模擬鼠標在Web網站上的點擊操作，來檢查Web網站的功能和響應時間。