運營商O域數據中心承擔著在網絡運行維護過程中采集、處理各環節信息,從而為網絡規劃、設備運行、業務發展等多方面提供決策支持的任務,是運營商業務支撐的關鍵系統之一。隨著運營商信令類數據量的迅速增長、數據源種類的變化和用戶日益增長的通信需求,數據中心對數據庫的實時性、可用性、安全性等能力提出了更高的要求。
為進一步優化平臺架構、提升O域數據處理能力與管理水平,北京移動2022年開始啟動數據共享平臺能力優化項目,項目引入睿帆科技雪球數據庫Snowball替換原有數據庫,構建運營商數據中心實時數倉,為數據中心提供全面的數據庫服務支撐。
國產創新,深入核心
雪球數據庫Snowball是一款睿帆科技自主研發的支持PB級數據量的、高并發的OLAP數據庫管理系統,具備高可用、高性能、高容錯等特性。優于傳統數據庫10倍以上的超快查詢速度、每秒數百萬行的超強寫入性能與1000節點以上的超強擴展性,使得雪球數據庫Snowball不僅滿足超大規模數據量下對查詢性能要求極其苛刻的應用場景,更是構建大規模、實時數據倉庫的核心基石。
憑借睿帆科技在運營商領域深耕近10年的經驗和對運營商業務技術的深厚積累,雪球數據庫Snowball已成功服務全國超過半數省份的運營商用戶,在多個運營商核心系統持續平穩運行多年,因此成為本次北京移動的首選產品。
平滑替代,全面升級
在本次改造前,北京移動數據中心一直使用的是Hbase。作為成熟分布式存儲系統之一,HBase雖然具備高可靠、高性能、可伸縮的優勢,但在使用過程中也存在著查詢時延大、查詢模式單一、運維復雜等難題,很難滿足北京移動數據多維及時分析要求。
要完成本次國產數據庫產品的替換,不僅需要在功能、安全性、穩定性上達到原有Hbase水平,還要具備快速查詢的能力,滿足北京移動各級人員訪問和相關重點應用數據計算需求;在性能和容量上,更要同時滿足數據實時處理和海量存儲的需求。
歷時數月,經過多輪測試,睿帆團隊在不影響原系統架構和邏輯的前提下,依托與原庫的極致兼容性,準確、高效、低風險地將原庫數據無損移植到雪球數據庫Snowball,并進一步完成多項能力的擴展與提升:
1.不僅支撐了海量數據入庫查詢這類通用場景,還擴展了即席分析、實時數據合成、實時數據匯聚等多種業務能力,沉淀了實時數倉的構建能力,提升了運營商數據中心項目中模型計算的及時性;
2.在保障現網業務穩定性的前提下,先后完成了大吞吐入庫的性能提升優化、查詢接口的兼容性適配、數據查詢效率優化、數據合成算法的計算性能優化、告警數據入庫及時性的優化等多項優化內容;
3.通過在雪球數據庫Snowball中使用小批次關聯計算,實現了VoLTE話單的多接口關聯,將原有的關聯合成時延從2小時提升至10分鐘,并最終實現了15分鐘粒度的核心網問題的異常定位能力。
平穩運行,賦能一線
截至今年,雪球數據庫Snowball已在北京移動數據共享平臺上線運行近兩年,穩定、高效地支撐起O域數據中心各項任務,在效率提升、成本控制、客戶感知等方面成效顯著:
1.提升一線工作效率:在完成VoLTExdr從Hbase向雪球數據庫Snowball的遷移后,基于VoLTE的多維查詢提數效率顯著提升,SQL查詢時間縮短80%以上,從原本的幾小時縮短到幾分鐘,有效提升業務人員工作效率;
2.降低軟硬件成本:雪球數據庫Snowball的引入提升了運營商數據中心項目中模型計算的及時性,節省了服務器硬件的投入,并實現綜合節省資源30%。
3.提升客戶感知:為客戶滿意度分析、業務感知指標分析提供數據與算力支持,間接協助提升客戶感知。
近年來,雪球數據庫Snowball持續服務運營商、軌交、政務等各行業數字化轉型升級,憑借高性能、可靠性、易用性等贏得北京移動、四川移動、廣州公安等眾多客戶認可。未來,睿帆科技將繼續加強研發投入和自主創新,加速推動雪球數據庫Snowball迭代升級與重點行業典型場景應用落地,以高水平科技創新賦能千行百業高質量發展。
相關稿件