8月19-20日，GOPS全球運(yùn)維大會(huì)2022·深圳站成功舉辦，大會(huì)圍繞數(shù)字化轉(zhuǎn)型、降本增效、DevOps、AIOps、MLOps、可觀(guān)測(cè)等話(huà)題展開(kāi)，吸引了全國(guó)各地企業(yè)、專(zhuān)家齊聚。全球運(yùn)維大會(huì)旨在幫助IT技術(shù)從業(yè)者系統(tǒng)學(xué)習(xí)了解相關(guān)知識(shí)體系，讓創(chuàng)新技術(shù)推動(dòng)社會(huì)進(jìn)步，嘉為藍(lán)鯨受邀出席共同探討。

19日主會(huì)場(chǎng)及騰訊專(zhuān)場(chǎng)上，多位來(lái)自騰訊IEG事業(yè)群的專(zhuān)家進(jìn)行了相關(guān)主題分享，與現(xiàn)場(chǎng)參會(huì)嘉賓共同探索數(shù)字化轉(zhuǎn)型實(shí)踐經(jīng)驗(yàn)。

01. 騰訊專(zhuān)場(chǎng)主題分享

回顧往年，運(yùn)維的蓬勃發(fā)展，各行業(yè)企業(yè)是有目共睹的，以騰訊為例，從運(yùn)維小團(tuán)隊(duì)，到以藍(lán)鯨體系為支撐的智能運(yùn)維平臺(tái)體系，到運(yùn)維開(kāi)發(fā)時(shí)代的研發(fā)運(yùn)營(yíng)PaaS體系，到研運(yùn)一體化理念的提出，再到DataOps、AIOps的普及，運(yùn)維正在一步一步的走上更大的舞臺(tái)。

如今許多企業(yè)的IT部門(mén)也不再是割裂的煙囪式組織架構(gòu)，越來(lái)越多的企業(yè)開(kāi)始關(guān)注研發(fā)運(yùn)營(yíng)一體化體系的構(gòu)建與轉(zhuǎn)型，然而，隨著疫情逐漸常態(tài)化，老生常談的“降本增效”，也成為后疫情時(shí)代運(yùn)維團(tuán)隊(duì)不得不面對(duì)的問(wèn)題。

會(huì)上，黨受輝與現(xiàn)場(chǎng)的嘉賓分享了企業(yè)在降本增效時(shí)，運(yùn)維應(yīng)該怎樣發(fā)展。在降本方面，各個(gè)領(lǐng)域的重心，要轉(zhuǎn)向控制運(yùn)營(yíng)成本，包括在人員，機(jī)器，資源等等各方面優(yōu)化或改變傳統(tǒng)的方式，探索更低成本的價(jià)值實(shí)現(xiàn)方法。另一方面，提高效率，在保證成本的情況下增加服務(wù)帶寬，以及尋求更多SaaS場(chǎng)景以擴(kuò)充生態(tài)實(shí)現(xiàn)增效。

隨后，黨受輝分別就機(jī)器帶寬、提高人效、人員薪資、研發(fā)市場(chǎng)四個(gè)方面進(jìn)行了深入分享。除此之外，黨受輝還介紹了通過(guò)外部生態(tài)回饋內(nèi)部的生態(tài)協(xié)同方式提效。通過(guò)藍(lán)鯨社區(qū)，進(jìn)行低成本的行業(yè)交流，與開(kāi)源社區(qū)合作節(jié)省研發(fā)人力，通過(guò)與合作伙伴嘉為藍(lán)鯨合作共研，節(jié)約人力與時(shí)間，更加高效的助力企業(yè)實(shí)現(xiàn)研運(yùn)一體化轉(zhuǎn)型。

19日下午，大會(huì)騰訊專(zhuān)場(chǎng)現(xiàn)場(chǎng)，來(lái)自騰訊的孫藝平介紹了騰訊內(nèi)部數(shù)萬(wàn)研發(fā)公用的流水線(xiàn)的設(shè)計(jì)經(jīng)驗(yàn)。2012-2017年間，藍(lán)鯨平臺(tái)作為IEG的運(yùn)維支撐體系，通過(guò)作業(yè)平臺(tái)完成了從游戲運(yùn)維到整個(gè)IEG業(yè)務(wù)去Console化的使命，支撐住了海量的調(diào)度，獲得內(nèi)部高度的認(rèn)可。隨后2018年，藍(lán)盾DevOps平臺(tái)上線(xiàn)，以全新的流水線(xiàn)引擎及PaaS化機(jī)構(gòu)和工業(yè)化設(shè)計(jì)，將口碑?dāng)U大至全公司。

如今DevOps流水線(xiàn)已經(jīng)實(shí)現(xiàn)了騰訊數(shù)萬(wàn)研發(fā)的共用，并構(gòu)建了獨(dú)立的DevOps生態(tài)，逐步完善協(xié)同能力，助力研發(fā)效能的提升。但任何成功都不是一蹴而就的，藍(lán)盾從初代流水線(xiàn)狀態(tài)機(jī)發(fā)展到DevOps平臺(tái)，期間經(jīng)歷了大大小小的“戰(zhàn)役”，孫藝平詳細(xì)介紹了整個(gè)發(fā)展歷程，并將整個(gè)平臺(tái)的設(shè)計(jì)思路總結(jié)為四點(diǎn)：

• 大平臺(tái)：全力提供穩(wěn)定平臺(tái)服務(wù)，從基礎(chǔ)設(shè)施的遷移，到新功能的上線(xiàn)交付，嚴(yán)禁一切停服行為。
• 小內(nèi)核：聚焦流水線(xiàn)，規(guī)則簡(jiǎn)單化，提供靈活的Pipeline定義和場(chǎng)景延展。
• 業(yè)務(wù)自助：實(shí)現(xiàn)業(yè)務(wù)效能團(tuán)隊(duì)便捷自助上架插件、定義流水線(xiàn)編排模板和規(guī)范，平臺(tái)透明化
• 求同存異：存在無(wú)法滿(mǎn)足的場(chǎng)景時(shí)，可在平臺(tái)服務(wù)上自建上層場(chǎng)景SaaS，并整合已有的研發(fā)平臺(tái)資產(chǎn)。

由此助力業(yè)務(wù)研效的提升，隨后，孫藝平詳細(xì)展示了平臺(tái)的具體能力，并分享了藍(lán)盾在對(duì)外開(kāi)源賦能的期望以及未來(lái)優(yōu)化迭代的展望。

云原生作為數(shù)字化時(shí)代的代表，帶來(lái)了以微服務(wù)，分布式為主的等全新的技術(shù)架構(gòu)，以容器、K8s、虛擬化、公有云、私有云為代表基礎(chǔ)設(shè)施及DevOps、SRE等文化理念。

而隨著云原生環(huán)境的進(jìn)一步落地，帶來(lái)的是巨大的技術(shù)變革，陳睿分別介紹了制品交付、發(fā)布變更、故障處理、觀(guān)測(cè)度量、運(yùn)營(yíng)成本管理以及運(yùn)維智能化場(chǎng)景下，云原生所帶來(lái)的技術(shù)的轉(zhuǎn)變， 并指出，在這些場(chǎng)景的技術(shù)變革下，企業(yè)需要構(gòu)建運(yùn)維能力模型，以適應(yīng)云原生模式對(duì)運(yùn)維能力轉(zhuǎn)型的要求。

定制業(yè)務(wù)云原生轉(zhuǎn)型方案：

實(shí)現(xiàn)云原生應(yīng)用接入，提供技術(shù)保障，結(jié)合業(yè)務(wù)場(chǎng)景，進(jìn)行云原生能力邊界拓展，以及有效推動(dòng)架構(gòu)的革新。

構(gòu)建SaaS工具：

聚焦于業(yè)務(wù)場(chǎng)景，利用平臺(tái)設(shè)計(jì)開(kāi)發(fā)工具SaaS，提升業(yè)務(wù)效能，降低運(yùn)營(yíng)成本。

運(yùn)營(yíng)成本治理：

通過(guò)持續(xù)進(jìn)行成本洞察、成本優(yōu)化與成本核算。實(shí)現(xiàn)云原生場(chǎng)景下的成本分析、優(yōu)化與持續(xù)迭代。

運(yùn)維大數(shù)據(jù)分析：

建立數(shù)據(jù)識(shí)別與接入能力，數(shù)據(jù)模型應(yīng)用與調(diào)優(yōu)能力，工程化封裝能力，數(shù)據(jù)建模與算法創(chuàng)新能力，通過(guò)大數(shù)據(jù)驅(qū)動(dòng)云原生技術(shù)提高效率。

隨后陳睿以藍(lán)鯨為例，詳細(xì)分享了運(yùn)維云原生基礎(chǔ)平臺(tái)建設(shè)與服務(wù)體系建設(shè)的相關(guān)內(nèi)容。

作為SRE的核心原則之一，可觀(guān)測(cè)一詞近年來(lái)十分火熱，SRE中提到，只有可觀(guān)測(cè)的系統(tǒng)，才能客觀(guān)的衡量系統(tǒng)是否穩(wěn)定可靠，那么可觀(guān)測(cè)與傳統(tǒng)監(jiān)控究竟有何區(qū)別？如何進(jìn)行“觀(guān)測(cè)”？SRE理論體系又如何在平臺(tái)中實(shí)踐？騰訊SRE技術(shù)專(zhuān)家梁俊杰對(duì)此作出了分享。

梁俊杰首先介紹了藍(lán)鯨可觀(guān)測(cè)平臺(tái)的設(shè)計(jì)理念，指出可觀(guān)測(cè)的目標(biāo)是：日益復(fù)雜的系統(tǒng)、可有效調(diào)試系統(tǒng)以及基于未知模式的探索，其關(guān)鍵在于通過(guò)Metrics、Tracing、Logging的環(huán)環(huán)相扣，建立全面的觀(guān)測(cè)能力，以幫助企業(yè)對(duì)系統(tǒng)真實(shí)穩(wěn)定性和可靠性進(jìn)行統(tǒng)一把控。

通過(guò)建立統(tǒng)一的觀(guān)測(cè)平臺(tái)，打通metric-Trace數(shù)據(jù)，確保業(yè)務(wù)與系統(tǒng)真正可被感知、觀(guān)測(cè)，實(shí)現(xiàn)故障與問(wèn)題的可追溯性，是企業(yè)可觀(guān)測(cè)性建設(shè)的價(jià)值所在，這也是藍(lán)鯨可觀(guān)測(cè)平臺(tái)的架構(gòu)設(shè)計(jì)思路。隨后梁俊杰從技術(shù)與業(yè)務(wù)維度分別深入講述了藍(lán)鯨可觀(guān)測(cè)性體系的整體設(shè)計(jì)思路與實(shí)現(xiàn)方法。

API網(wǎng)關(guān)，作為PaaS平臺(tái)與上層SaaS的核心紐帶，在企業(yè)運(yùn)維中發(fā)揮著不可或缺的作用。朱雷以騰訊游戲的研運(yùn)一體化實(shí)踐為例，介紹了基于APISIX的PaaS網(wǎng)關(guān)應(yīng)用與實(shí)踐。

騰訊游戲作為海量業(yè)務(wù)的典型場(chǎng)景，由于海量的游戲類(lèi)型、不同的開(kāi)發(fā)廠(chǎng)商等原因，其業(yè)務(wù)架構(gòu)差異很大、且極其復(fù)雜，同時(shí)各個(gè)業(yè)務(wù)相互獨(dú)立，語(yǔ)言、運(yùn)行平臺(tái)、流程等等也存在很大的差異。在面對(duì)如此海量松散的異構(gòu)業(yè)務(wù)，平臺(tái)要能夠支撐起整個(gè)運(yùn)營(yíng)體系，就必須具備以下能力：

• 將能力抽象打散，原子化、微服務(wù)化，建立PaaS架構(gòu)；
• 通過(guò)低代碼SaaS高效封裝PaaS原子能力；
• 具備靈活應(yīng)對(duì)不同服務(wù)場(chǎng)景的能力。

而以上場(chǎng)景，正是依賴(lài)API網(wǎng)關(guān)能力得以應(yīng)用實(shí)現(xiàn)，抽象的來(lái)說(shuō)，API網(wǎng)關(guān)就像是一個(gè)服務(wù)中心，當(dāng)上層SaaS場(chǎng)景需要調(diào)用某一公共服務(wù)時(shí)，API網(wǎng)關(guān)作為中心，將平臺(tái)的原子能力打通并整合，以API調(diào)用方式提供給上層服務(wù)，從而實(shí)現(xiàn)原子能力的復(fù)用與流程的效能提升。這就要求網(wǎng)關(guān)需要具備服務(wù)發(fā)現(xiàn)、權(quán)限管理、頻率控制、動(dòng)態(tài)分配等等能力。

藍(lán)鯨API網(wǎng)關(guān)歷經(jīng)了多個(gè)版本的迭代，過(guò)程中也遇到了算法性能、框架性能不高，網(wǎng)絡(luò)開(kāi)銷(xiāo)太大等問(wèn)題，隨著需求場(chǎng)景的增多，請(qǐng)求量級(jí)的快速增長(zhǎng)，對(duì)API網(wǎng)關(guān)的能力要求也愈加復(fù)雜。

隨時(shí)云原生時(shí)代的來(lái)臨，也帶來(lái)了新的網(wǎng)關(guān)技術(shù)，APISIX作為微網(wǎng)關(guān)技術(shù)的典型，其具備高性能、擴(kuò)展性好、方案成熟等優(yōu)勢(shì)，基于APISIX技術(shù)，可以進(jìn)一步提高網(wǎng)關(guān)在云原生環(huán)境下的能力，從而滿(mǎn)足日益增長(zhǎng)的業(yè)務(wù)需求。

隨后，朱雷詳細(xì)介紹了APISIX的相關(guān)技術(shù)內(nèi)容，并分享了基于APISIX的藍(lán)鯨網(wǎng)關(guān)在騰訊游戲的應(yīng)用與實(shí)踐案例。

02 研運(yùn)一體，管理閉環(huán)

嘉為藍(lán)鯨研發(fā)運(yùn)營(yíng)一體化平臺(tái)，基于騰訊藍(lán)鯨PaaS平臺(tái)的技術(shù)架構(gòu)，結(jié)合嘉為科技20余年研運(yùn)服務(wù)經(jīng)驗(yàn)打造，貫穿企業(yè)IT應(yīng)用系統(tǒng)的研發(fā)測(cè)試、運(yùn)維管理和運(yùn)營(yíng)管理全生命周期，實(shí)現(xiàn)企業(yè)IT研運(yùn)管理的完整閉環(huán)。

• 通過(guò)DevOps解決方案提升研發(fā)質(zhì)效，一站式幫助企業(yè)建立快速響應(yīng)需求的敏捷研發(fā)運(yùn)維體系，加速業(yè)務(wù)交付；
• 通過(guò)AIOps智能運(yùn)維解決方案，覆蓋客戶(hù)各類(lèi)運(yùn)維場(chǎng)景，提供強(qiáng)大的擴(kuò)展能力，滿(mǎn)足運(yùn)維管理需求，實(shí)現(xiàn)企業(yè)一體化運(yùn)維；
• 通過(guò)WeOps一站式運(yùn)維（訂閱制）解決方案，打通各業(yè)務(wù)單元，貫穿各技術(shù)棧，以故障定位和全生命周期管理為核心，保障業(yè)務(wù)連續(xù)性。

嘉為藍(lán)鯨研發(fā)運(yùn)營(yíng)一體化解決方案的落地，幫助用戶(hù)實(shí)現(xiàn)一體化研運(yùn)管理，從咨詢(xún)、規(guī)劃、設(shè)計(jì)到落地、部署、上線(xiàn)、監(jiān)測(cè)、優(yōu)化的全生命周期服務(wù)，為用戶(hù)解決系統(tǒng)數(shù)據(jù)孤島、業(yè)務(wù)隔離、眾多的IT運(yùn)維對(duì)象管理難、自動(dòng)化程度低、信創(chuàng)產(chǎn)品兼容等問(wèn)題，實(shí)現(xiàn)資源整合、管運(yùn)分離、數(shù)據(jù)融合、業(yè)務(wù)貫通。