解鎖自動(dòng)化運(yùn)維的「正確姿勢(shì)」
去年，短視頻《后浪》作為網(wǎng)絡(luò)話題火爆網(wǎng)絡(luò)，視頻中，演員何冰激情演講，以“后浪”稱呼新一代青年人，他們散發(fā)的光芒，是時(shí)代前方的希望。不過，正所謂“長(zhǎng)江后浪推前浪，浮事新人換舊人”，“后浪”也在不斷沖擊和取代“前浪”。因此“后浪”也就具備了多一層含義：想要不被超越，就得躬身入局。
在數(shù)字化轉(zhuǎn)型的這波浪潮中，“前浪”企業(yè)要想不被“拍死在沙灘上”，就要積極投身探索與實(shí)踐，廣東移動(dòng)也是其中一員。
1987年，就已在我國最早開通移動(dòng)電話業(yè)務(wù)的廣東移動(dòng)，是我國信息通信行業(yè)中規(guī)模最大的省級(jí)公司。這家已建成全球規(guī)模最大、結(jié)構(gòu)最為復(fù)雜的全業(yè)務(wù)移動(dòng)通信網(wǎng)絡(luò)，但在5G網(wǎng)絡(luò)高速建設(shè)時(shí)期，網(wǎng)絡(luò)運(yùn)營(yíng)同樣也面臨復(fù)雜化、難度大、成本高等挑戰(zhàn)，廣東移動(dòng)亟需向數(shù)智化運(yùn)維模式轉(zhuǎn)型。
廣東移動(dòng)云資源池運(yùn)維主管馮旭瀚分享了他們的自動(dòng)化運(yùn)維經(jīng)驗(yàn)。作為萬事開頭難的第一步，企業(yè)首先要有明確規(guī)劃，評(píng)估運(yùn)維效果，當(dāng)然除了顯而易見的技術(shù)問題，在整個(gè)項(xiàng)目實(shí)施過程中要特別留意那些隱藏在“冰山之下”的潛在或者未知風(fēng)險(xiǎn)，如人員個(gè)人能力、流程等。他認(rèn)為一個(gè)在自動(dòng)化領(lǐng)域?qū)I(yè)的服務(wù)團(tuán)隊(duì)非常重要。
談實(shí)踐、挑戰(zhàn)和經(jīng)驗(yàn)
記者：任何軟件的開發(fā)與使用一定少不了IT運(yùn)維，少不了安全穩(wěn)定的運(yùn)行環(huán)境，廣東移動(dòng)推動(dòng)自動(dòng)化運(yùn)維工作的初衷是什么？是在什么樣的背景下啟動(dòng)這樣一項(xiàng)工作的呢？
馮旭瀚：從整個(gè)的技術(shù)選型上來說，廣東移動(dòng)運(yùn)維自動(dòng)化開始得比較早，有十年左右的時(shí)間了，從最早的腳本為主逐步進(jìn)行工具化，通過平臺(tái)化實(shí)現(xiàn)整個(gè)自動(dòng)化。廣東移動(dòng)整個(gè)公司數(shù)字化轉(zhuǎn)型的技術(shù)核心能力，就是自動(dòng)化能力，這需要高度標(biāo)準(zhǔn)化，通過這種腳本的快速執(zhí)行大規(guī)模操作，保證系統(tǒng)更安全。運(yùn)維自動(dòng)化、智能化轉(zhuǎn)型以及降本增效的業(yè)務(wù)目標(biāo)是企業(yè)無法繞開的話題。
最近幾年，云環(huán)境下的業(yè)務(wù)需求特點(diǎn)是變化迅速，包括產(chǎn)品線增加以及整個(gè)云資源池運(yùn)維對(duì)象的擴(kuò)大，給我們整個(gè)運(yùn)維工作都帶來了很大挑戰(zhàn)，通過自動(dòng)化工作實(shí)施提高我們的自動(dòng)化成熟度，這就是我們實(shí)行自動(dòng)化運(yùn)維、向智能運(yùn)維發(fā)展的初衷。
記者：對(duì)于自動(dòng)化運(yùn)維項(xiàng)目此前有何預(yù)期，是否達(dá)到了預(yù)期？現(xiàn)在取得了哪些效果？
馮旭瀚：預(yù)期肯定是希望不斷提升我們自動(dòng)化的能力，無論是廣度、深度，還是優(yōu)先度，最終是希望可以早日實(shí)現(xiàn)智能運(yùn)維，也就是現(xiàn)在所說的AIOps。
從每一年階段性的發(fā)展來講，降本增效也是我們一直想要達(dá)到的預(yù)期，通過自動(dòng)化提升了工作效率、提升了工作質(zhì)量、減少了人工犯錯(cuò)的成本、釋放了勞動(dòng)力，我們逐步推進(jìn)實(shí)現(xiàn)了部分預(yù)期，甚至可以說有部分超出了我們的預(yù)期。
舉個(gè)例子，日常中我們可以通過自動(dòng)化平臺(tái)進(jìn)行自動(dòng)化的補(bǔ)丁管理，提升補(bǔ)丁分發(fā)、安裝、部署的效率，同時(shí)紅帽的插件工具能夠提供比較友好的人機(jī)交互界面，方便我們統(tǒng)計(jì)分析歷史數(shù)據(jù)，整理運(yùn)維報(bào)表，我們都可以實(shí)現(xiàn)自動(dòng)化、可視化，減輕這種高度重復(fù)類的工作，從而大大節(jié)省人力，提高效率。
記者：你們選擇了什么技術(shù)來實(shí)施自動(dòng)化運(yùn)維，選擇的原因是什么？
馮旭瀚：在當(dāng)時(shí)選擇自動(dòng)化運(yùn)維工具時(shí)候，我們考慮到會(huì)有很多因素，包括整個(gè)技術(shù)以及產(chǎn)品的優(yōu)缺點(diǎn)，可擴(kuò)展性、可維護(hù)性、兼容性、穩(wěn)定性等要求。種種考慮之后，我們注意到了紅帽有一個(gè)Ansible開源工具，它的整個(gè)技術(shù)架構(gòu)在業(yè)界是被廣泛高度認(rèn)可的。本身Ansible是比較輕量級(jí)，對(duì)整個(gè)操作系統(tǒng)和設(shè)備屬于非入侵式，正好我們已有的技術(shù)可以實(shí)現(xiàn)快速兼容，我們就通過引入紅帽平臺(tái)作為自動(dòng)化運(yùn)維工作的有效補(bǔ)充。
記者：自動(dòng)化運(yùn)維這個(gè)項(xiàng)目在進(jìn)行過程中是否遇到了什么挑戰(zhàn)？有什么值得分享的經(jīng)驗(yàn)或者教訓(xùn)？
馮旭瀚：我很高興可以和大家分享一下我們?cè)趯?shí)現(xiàn)自動(dòng)化運(yùn)維過程中的一些經(jīng)驗(yàn)和亮點(diǎn)。
企業(yè)的自動(dòng)化轉(zhuǎn)型做得怎么樣？有什么短板需要補(bǔ)？接下來怎么繼續(xù)做？大家剛開始或多或少都會(huì)缺少明確規(guī)劃，也不知道如何評(píng)估運(yùn)維效果，所以第一點(diǎn)我建議大家開始的時(shí)候可以結(jié)合業(yè)界的經(jīng)驗(yàn)或?qū)＜业慕ㄗh，制定好規(guī)劃，再一步步實(shí)現(xiàn)自動(dòng)化運(yùn)維目標(biāo)。
第二個(gè)點(diǎn)，技術(shù)問題我們可以看得見的“冰山之上”的問題，但整個(gè)項(xiàng)目實(shí)施過程中，一些其他問題隱藏在“冰山之下”，有潛在或者未知風(fēng)險(xiǎn)，卻比較容易被忽略。例如，“藏”在技術(shù)環(huán)境下，“藏”在團(tuán)隊(duì)中，還可能存在于人員能力、流程、實(shí)際自動(dòng)化操作中。因此大家需要找到一個(gè)在自動(dòng)化領(lǐng)域比較專業(yè)的服務(wù)團(tuán)隊(duì)，比如像紅帽服務(wù)團(tuán)隊(duì)這種比較專業(yè)的團(tuán)隊(duì)，我們也和他們一起合作去做自動(dòng)化運(yùn)維的事情。
談自動(dòng)化運(yùn)維和智能運(yùn)維
記者：您怎么看待DevOps？
馮旭瀚：DevOps是一個(gè)運(yùn)維開發(fā)一體化的理念，除了所說的DevOps工具，還包括開發(fā)測(cè)試、交付、部署、運(yùn)維的流程，更多也是代表一個(gè)企業(yè)文化、組織架構(gòu)。
廣東移動(dòng)一直高度關(guān)注DevOps，也進(jìn)行了一些實(shí)踐。譬如，2019年10月，廣東移動(dòng)獲得了由當(dāng)時(shí)中國信息通信研究院頒發(fā)的研發(fā)運(yùn)維一體化DevOps標(biāo)準(zhǔn)的能力模型證書，我們達(dá)到了三級(jí)，在國內(nèi)是屬于領(lǐng)先水平。
記者：您怎么看待自動(dòng)化運(yùn)維和智能運(yùn)維之間的關(guān)系？
馮旭瀚：我認(rèn)為自動(dòng)化運(yùn)維和智能運(yùn)維之間的關(guān)系，是相輔相成，缺一不可的。自動(dòng)化運(yùn)維的下一步階段，更加偏向于智能運(yùn)維，結(jié)合人工智能技術(shù)或者是智能算法分析得出決策，再通過一些自動(dòng)化方式來執(zhí)行這個(gè)策略。
記者：DevOps與自動(dòng)化運(yùn)維之間是否有關(guān)聯(lián)？
馮旭瀚：對(duì)整個(gè)團(tuán)隊(duì)來說，帶來的改變最大在于運(yùn)維效率的提升，還有降低人力，運(yùn)維最終境界，智能運(yùn)維的設(shè)想從運(yùn)維角度來說實(shí)現(xiàn)無人值守的目標(biāo)，通過這個(gè)平臺(tái)就可以實(shí)現(xiàn)故障自愈、故障預(yù)測(cè)的發(fā)現(xiàn)。
記者：在運(yùn)維工作方面，您有哪些計(jì)劃目標(biāo)？
馮旭瀚：運(yùn)維工作下一步計(jì)劃是往智能運(yùn)維方向去進(jìn)行研究和發(fā)展建設(shè)，在這個(gè)過程中還會(huì)繼續(xù)針對(duì)現(xiàn)在的運(yùn)維自動(dòng)化工具或者這個(gè)平臺(tái)去繼續(xù)打磨它，讓它變得更加完善，把整個(gè)自動(dòng)化運(yùn)維水平再把它繼續(xù)提升，為下一步智能運(yùn)維能力去打造這種更加堅(jiān)實(shí)的基礎(chǔ)，這是我們下一個(gè)階段的目標(biāo)。
