日前,由中國計算機學會(CCF)主辦,CCF開源發(fā)展委員會及夜鶯項目開源社區(qū)承辦的第二屆 CCF 夜鶯開發(fā)者創(chuàng)新論壇在京召開。本屆論壇聚焦可觀測性數據治理、標準化、可擴展性、eBPF、AI提效、故障診斷等方向,助力推動可觀測性技術的研究落地。作業(yè)幫作為國內領先的教育科技公司,在數據治理領域有著豐富的實踐經驗,作業(yè)幫運維負責人聶安在論壇上從技術運營視角分享了監(jiān)控數據治理的實踐。
隨著業(yè)務的高速發(fā)展以及數據分析體系的日益完善,數據成為業(yè)務日常運作中重要的指南針和風向標。觀測數據的生命周期能夠通過全生命周期管理和透明化管理,提升數據資產的價值,確保數據質量和合規(guī)性。在分享中,聶安以作業(yè)幫觀測數據Metric為例,介紹了數據生命周期治理的要點。
觀測數據的生命周期覆蓋了數據的整個生命周期,一般包括建模、生產、收集、處理、存儲、使用這幾個環(huán)節(jié),確保數據的準確性、一致性、安全性和合規(guī)性。此外,數據生命周期治理是一個持續(xù)的過程,需要企業(yè)從數據的提取、治理到安全保障等各個環(huán)節(jié)進行精心設計和規(guī)劃。
作業(yè)幫的數據生命周期治理專注于多個層面,包括策略制定、數據分類、存儲、安全性和質量檢查。從觀測數據的全生命周期來看,各個環(huán)節(jié)應該如何治理?聶安介紹,數據生產階段,盡量利舊,在服務治理框架層面統(tǒng)一埋點;數據收集階段,引入 pipeline,比如 telegraf,統(tǒng)一規(guī)范化指標命名;數據處理階段,標簽 enrichment,流式聚合,場景化聚合;存儲使用階段,建議參考數據分析領域的實踐思路。
聶安在分享的最后提到,從生命周期的視角看,觀測只是數據分析的一個子域,它還很年輕、理念還在不斷演化。要充分做好企業(yè)通盤的數據分析,強化數據觀測的價值。作業(yè)幫技術團隊服務于作業(yè)幫所有業(yè)務,經過多年的積累,在語音識別、自然語言處理、圖像和OCR識別、大數據等技術領域擁有超200+的高精尖技術專利。
- HDC 2025:開發(fā)者搭上“鴻蒙快車”,鴻蒙生態(tài)加速前行
- HarmonyOS 6開發(fā)者Beta正式啟動:打造無處不在的AI體驗
- 馬蜂窩發(fā)布夏季“旅行蜂向標”,進山、玩水、擁抱草原是最受關注的夏季玩法
- 餓了么灰測“悅享會員”加碼用戶體驗,提供一系列專屬優(yōu)惠和個性化服務
- 啟信寶2025奶茶趣味報告:奶茶企業(yè)5年激增140%,40萬家共筑3500億帝國
- 《黑神話:悟空》PS5國行版將于6月18日正式發(fā)售,建議零售價268元起
- 報告:2029年美國AI搜索廣告支出將達260億美元,占比13.6%
- 重塑內生安全體系 實現(xiàn)AI時代安全突圍 ——2025北京網絡安全大會(BCS)開幕
- 門禁憑證技術進化簡史:開啟更加安全和便利的未來
免責聲明:本網站內容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網站出現(xiàn)的信息,均僅供參考。本網站將盡力確保所提供信息的準確性及可靠性,但不保證有關資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網站對有關資料所引致的錯誤、不確或遺漏,概不負任何法律責任。任何單位或個人認為本網站中的網頁或鏈接內容可能涉嫌侵犯其知識產權或存在不實內容時,應及時向本網站提出書面權利通知或不實情況說明,并提供身份證明、權屬證明及詳細侵權或不實情況證明。本網站在收到上述法律文件后,將會依法盡快聯(lián)系相關文章源頭核實,溝通刪除相關內容或斷開相關鏈接。