應(yīng)用維護之后臺進程

IT那活兒發(fā)布于2023-01-11 13:20 / 3010人閱讀

應(yīng)用維護之后臺進程

[

一、后臺進程介紹

]

應(yīng)用后臺進程的意義不同于系統(tǒng)后臺進程，系統(tǒng)后臺進程指的是系統(tǒng)守護進程等，應(yīng)用后臺進程指的是應(yīng)用系統(tǒng)中獨立部署的一種進程，一般此類進程大多按功能點劃分部署，一個進程實現(xiàn)一個功能點。

使用后臺進程的優(yōu)缺點：

優(yōu)點：通過后臺進程實現(xiàn)功能的解耦，當(dāng)業(yè)務(wù)需求變更時，只需要找到對應(yīng)功能的進程進行代碼更新即可，且便于版本上線發(fā)布；

缺點：業(yè)務(wù)復(fù)雜且變更頻繁的系統(tǒng)，會產(chǎn)生大量的后臺進程，不便于后期維護管理；

[

二、后臺進程的管理

]

以某運營商為例，筆者剛接手生產(chǎn)系統(tǒng)維護時，維護范圍包括2000多的后臺進程維護，但沒有任何的資料，進程的功能用途全都在前輩的腦海里。

1、梳理后臺進程信息

該項工作前期花費筆者大量時間，前期跟局方多次討論后確定可能涉及的項目后，花費數(shù)月的時間將分布在40余臺小機上的進程進程信息并整理入庫。

1 ）主要梳理方法通過ps取到所有進程的運行目錄，然后根據(jù)目錄類啟動腳本進行匹配，得到進程目錄、腳本、進程數(shù)量、開發(fā)語言、資源類等部分所需信息形成初步進程列表。

2 ）將初步進程列表反饋給局方以及開發(fā)商，協(xié)調(diào)其補充進程信息、業(yè)務(wù)、項目經(jīng)理、網(wǎng)絡(luò)等信息，形成一個較為完備的進程信息并寫入到性能基線庫的process進程信息表，如下；

這是個排雷踩坑的過程，期間發(fā)現(xiàn)各式問題（分享2個常見問題）：

1 ）期間發(fā)現(xiàn)大量無人認(rèn)領(lǐng)的進程，對于該部分進程只能以現(xiàn)有信息入庫作為存量待補全進程，在后期版本更新中慢慢補充；

2 ）同一目錄多個進程多個啟動腳本且腳本之間相互有交集，對于該部分只能仔細(xì)區(qū)分同時協(xié)調(diào)開發(fā)商測試環(huán)境進行確認(rèn)；

2、梳理完善進程監(jiān)控

在前期進程信息梳理基本完成后，開發(fā)工具對主機進程進行管理，主要兩個方面：

1 )常駐進程監(jiān)控，同步process表至主機比對主機實際運行進程情況，主要比對進程數(shù)量、生產(chǎn)用戶以及資源使用等情況

2 )定時任務(wù)監(jiān)控，主要與process表數(shù)據(jù)對比，是否存在未經(jīng)授權(quán)或登記的任務(wù)；

3、梳理進程用途及責(zé)任人

在初步完成主機進程整理以及監(jiān)控后，由于局點每月有多次上線任務(wù)且均伴有進程上線或更新工作，經(jīng)與局方討論我們開始對進程涉及業(yè)務(wù)、涉及資源（數(shù)據(jù)庫、中間件、網(wǎng)絡(luò)、文件系統(tǒng)等）進行登記及新增進程審核等工作。

存量進程：基于監(jiān)控項梳理責(zé)任人后，分別跟進責(zé)任人確認(rèn)進程功能用途；

新增進程：版本上線前要求開發(fā)側(cè)提交進程信息，介入進程評審管控，上線完成后對實際進程進行檢查；

對于進程管理經(jīng)與局方討論，目前已明確所有進程變更（新增、修改、下線）均要求走進程變更流程，按下圖excel表格提供進程信息提交維護團隊進行評審管理。

評審?fù)ㄟ^后將進程信息更新入庫。

[

三、進程故障診斷及處理

]

在維護后臺進程過程中，筆者發(fā)現(xiàn)進程故障主要有以下三種情況：

1、進程異常掉線

對于進程異常掉線情況，目前已做bomc監(jiān)控以及異常進程信息入庫等

2、進程僵死

在進程維護中，經(jīng)常會發(fā)現(xiàn)進程狀態(tài)或者日志等均顯示正常，但是進程數(shù)據(jù)未得到處理，這種情況我們將其定義為僵死。該種情況目前處理辦法主要是通過添加業(yè)務(wù)監(jiān)控，發(fā)現(xiàn)數(shù)據(jù)積壓或規(guī)定時間未處理及時告警。目前該種情況筆者及同事未有較為有效的辦法進行處理，歡迎提供意見。

3、處理效率不足

特殊情況下處理效率問題主要是月頭月末關(guān)鍵進程比如各渠道的繳費、停開機等數(shù)據(jù)量監(jiān)控，發(fā)現(xiàn)處理效率不夠時及時擴容進程個數(shù)等。

[

四、進程高可用改造及性能優(yōu)化

]

進程信息梳理完后，標(biāo)志后臺進程已經(jīng)納入維護管理范圍，但并非針對進程的維護到此為止，專業(yè)的維護工程師還可以進一步對后臺進程進行高可用改造及性能優(yōu)化；

1、進程高可用

1 ）對進程進行分級，時效性要求沒有那么高，我們目前采用冷備的方式實現(xiàn)進程高可用；

2 ）對關(guān)鍵、實時性要求較高進程，我們采用分布式部署；