運營(yíng)商O(píng)域數據中心承擔著(zhù)在網(wǎng)絡(luò )運行維護過(guò)程中采集、處理各環(huán)節信息,從而為網(wǎng)絡(luò )規劃、設備運行、業(yè)務(wù)發(fā)展等多方面提供決策支持的任務(wù),是運營(yíng)商業(yè)務(wù)支撐的關(guān)鍵系統之一。隨著(zhù)運營(yíng)商信令類(lèi)數據量的迅速增長(cháng)、數據源種類(lèi)的變化和用戶(hù)日益增長(cháng)的通信需求,數據中心對數據庫的實(shí)時(shí)性、可用性、安全性等能力提出了更高的要求。
為進(jìn)一步優(yōu)化平臺架構、提升O域數據處理能力與管理水平,北京移動(dòng)2022年開(kāi)始啟動(dòng)數據共享平臺能力優(yōu)化項目,項目引入睿帆科技雪球數據庫Snowball替換原有數據庫,構建運營(yíng)商數據中心實(shí)時(shí)數倉,為數據中心提供全面的數據庫服務(wù)支撐。
國產(chǎn)創(chuàng )新,深入核心
雪球數據庫Snowball是一款睿帆科技自主研發(fā)的支持PB級數據量的、高并發(fā)的OLAP數據庫管理系統,具備高可用、高性能、高容錯等特性。優(yōu)于傳統數據庫10倍以上的超快查詢(xún)速度、每秒數百萬(wàn)行的超強寫(xiě)入性能與1000節點(diǎn)以上的超強擴展性,使得雪球數據庫Snowball不僅滿(mǎn)足超大規模數據量下對查詢(xún)性能要求極其苛刻的應用場(chǎng)景,更是構建大規模、實(shí)時(shí)數據倉庫的核心基石。
憑借睿帆科技在運營(yíng)商領(lǐng)域深耕近10年的經(jīng)驗和對運營(yíng)商業(yè)務(wù)技術(shù)的深厚積累,雪球數據庫Snowball已成功服務(wù)全國超過(guò)半數省份的運營(yíng)商用戶(hù),在多個(gè)運營(yíng)商核心系統持續平穩運行多年,因此成為本次北京移動(dòng)的首選產(chǎn)品。
平滑替代,全面升級
在本次改造前,北京移動(dòng)數據中心一直使用的是Hbase。作為成熟分布式存儲系統之一,HBase雖然具備高可靠、高性能、可伸縮的優(yōu)勢,但在使用過(guò)程中也存在著(zhù)查詢(xún)時(shí)延大、查詢(xún)模式單一、運維復雜等難題,很難滿(mǎn)足北京移動(dòng)數據多維及時(shí)分析要求。
要完成本次國產(chǎn)數據庫產(chǎn)品的替換,不僅需要在功能、安全性、穩定性上達到原有Hbase水平,還要具備快速查詢(xún)的能力,滿(mǎn)足北京移動(dòng)各級人員訪(fǎng)問(wèn)和相關(guān)重點(diǎn)應用數據計算需求;在性能和容量上,更要同時(shí)滿(mǎn)足數據實(shí)時(shí)處理和海量存儲的需求。
歷時(shí)數月,經(jīng)過(guò)多輪測試,睿帆團隊在不影響原系統架構和邏輯的前提下,依托與原庫的極致兼容性,準確、高效、低風(fēng)險地將原庫數據無(wú)損移植到雪球數據庫Snowball,并進(jìn)一步完成多項能力的擴展與提升:
1.不僅支撐了海量數據入庫查詢(xún)這類(lèi)通用場(chǎng)景,還擴展了即席分析、實(shí)時(shí)數據合成、實(shí)時(shí)數據匯聚等多種業(yè)務(wù)能力,沉淀了實(shí)時(shí)數倉的構建能力,提升了運營(yíng)商數據中心項目中模型計算的及時(shí)性;
2.在保障現網(wǎng)業(yè)務(wù)穩定性的前提下,先后完成了大吞吐入庫的性能提升優(yōu)化、查詢(xún)接口的兼容性適配、數據查詢(xún)效率優(yōu)化、數據合成算法的計算性能優(yōu)化、告警數據入庫及時(shí)性的優(yōu)化等多項優(yōu)化內容;
3.通過(guò)在雪球數據庫Snowball中使用小批次關(guān)聯(lián)計算,實(shí)現了VoLTE話(huà)單的多接口關(guān)聯(lián),將原有的關(guān)聯(lián)合成時(shí)延從2小時(shí)提升至10分鐘,并最終實(shí)現了15分鐘粒度的核心網(wǎng)問(wèn)題的異常定位能力。
平穩運行,賦能一線(xiàn)
截至今年,雪球數據庫Snowball已在北京移動(dòng)數據共享平臺上線(xiàn)運行近兩年,穩定、高效地支撐起O域數據中心各項任務(wù),在效率提升、成本控制、客戶(hù)感知等方面成效顯著(zhù):
1.提升一線(xiàn)工作效率:在完成VoLTExdr從Hbase向雪球數據庫Snowball的遷移后,基于VoLTE的多維查詢(xún)提數效率顯著(zhù)提升,SQL查詢(xún)時(shí)間縮短80%以上,從原本的幾小時(shí)縮短到幾分鐘,有效提升業(yè)務(wù)人員工作效率;
2.降低軟硬件成本:雪球數據庫Snowball的引入提升了運營(yíng)商數據中心項目中模型計算的及時(shí)性,節省了服務(wù)器硬件的投入,并實(shí)現綜合節省資源30%。
3.提升客戶(hù)感知:為客戶(hù)滿(mǎn)意度分析、業(yè)務(wù)感知指標分析提供數據與算力支持,間接協(xié)助提升客戶(hù)感知。
近年來(lái),雪球數據庫Snowball持續服務(wù)運營(yíng)商、軌交、政務(wù)等各行業(yè)數字化轉型升級,憑借高性能、可靠性、易用性等贏(yíng)得北京移動(dòng)、四川移動(dòng)、廣州公安等眾多客戶(hù)認可。未來(lái),睿帆科技將繼續加強研發(fā)投入和自主創(chuàng )新,加速推動(dòng)雪球數據庫Snowball迭代升級與重點(diǎn)行業(yè)典型場(chǎng)景應用落地,以高水平科技創(chuàng )新賦能千行百業(yè)高質(zhì)量發(fā)展。
相關(guān)稿件