摘要：在考慮建立自己的業(yè)務(wù)流程解決方案后，網(wǎng)易決定將其私有云平臺建立在上。這項技術(shù)來自的事實讓團(tuán)隊相信它可以跟上網(wǎng)易的規(guī)模。網(wǎng)易團(tuán)隊報告說，使研發(fā)效率提高了以上。無論是否使用網(wǎng)易產(chǎn)品，該團(tuán)隊都鼓勵其他公司嘗試。

網(wǎng)易如何利用Kubernetes支持全球互聯(lián)網(wǎng)業(yè)務(wù)

公司：網(wǎng)易
地點：中國杭州
行業(yè)：互聯(lián)網(wǎng)技術(shù)

它的游戲業(yè)務(wù)是世界上最大的游戲業(yè)務(wù)之一，但這并不是網(wǎng)易為中國消費(fèi)者提供的唯一服務(wù)。該公司還經(jīng)營電子商務(wù)、廣告、音樂流媒體、在線教育和電子郵件平臺；最后一個通過163.com等網(wǎng)站為近十億用戶提供免費(fèi)電子郵件服務(wù)。2015年，為所有這些系統(tǒng)提供基礎(chǔ)設(shè)施的網(wǎng)易云團(tuán)隊，意識到他們的研發(fā)流程正在減緩開發(fā)者的速度?！拔覀兊挠脩粜枰约簻?zhǔn)備所有基礎(chǔ)設(shè)施?！本W(wǎng)易云和容器服務(wù)架構(gòu)師Feng Changjian說?！拔覀兛释ㄟ^無服務(wù)器的容器服務(wù)，自動為我們的用戶提供基礎(chǔ)設(shè)施和工具。”

在考慮建立自己的業(yè)務(wù)流程解決方案后，網(wǎng)易決定將其私有云平臺建立在Kubernetes上。這項技術(shù)來自Google的事實讓團(tuán)隊相信它可以跟上網(wǎng)易的規(guī)模。“經(jīng)過2到3個月的評估，我們相信它可以滿足我們的需求。”Changjian說。該團(tuán)隊在2015年開始使用Kubernetes，甚至在1.0之前。今天，網(wǎng)易內(nèi)部云平臺還利用了CNCF項目Prometheus、Envoy、Harbor、gRPC和Helm，在生產(chǎn)集群中運(yùn)行10,000個節(jié)點，并且可以在一個集群中支持多達(dá)30,000個節(jié)點?；谄鋬?nèi)部平臺的經(jīng)驗，該公司向外部客戶推出了基于Kubernetes的云和面向微服務(wù)的PaaS產(chǎn)品，網(wǎng)易輕舟微服務(wù)。

網(wǎng)易團(tuán)隊報告說，Kubernetes使研發(fā)效率提高了100％以上。部署效率提高了280％?！霸谶^去，如果我們想進(jìn)行升級，我們需要與其他團(tuán)隊合作，甚至在其他部門工作。”Changjian說。“我們需要特殊的工作人員來準(zhǔn)備一切，所以花了大約半個小時。現(xiàn)在我們可以在5分鐘內(nèi)完成。”新平臺還允許使用GPU和CPU資源進(jìn)行混合部署?！爸埃绻覀儗⑺匈Y源都用于GPU，我們就不會為CPU提供備用資源。但是現(xiàn)在我們通過混合部署得到了改進(jìn)。”他說。這些改進(jìn)也提高了資源的利用率。

“該系統(tǒng)可以在一個集群中支持30,000個節(jié)點。在生產(chǎn)中，我們在單個集群中獲得了10,000個節(jié)點的數(shù)據(jù)。整個內(nèi)部系統(tǒng)正在使用該系統(tǒng)進(jìn)行開發(fā)、測試和生產(chǎn)。” - Zeng Yuxing，網(wǎng)易架構(gòu)師

它的游戲業(yè)務(wù)是全球第五大，但這并非網(wǎng)易為消費(fèi)者提供的唯一服務(wù)。

該公司還在中國經(jīng)營電子商務(wù)、廣告、音樂流媒體、在線教育和電子郵件平臺；其中最后一個通過163.com和126.com等熱門網(wǎng)站為近十億用戶提供免費(fèi)電子郵件服務(wù)。憑借這種規(guī)模，網(wǎng)易云團(tuán)隊為所有這些系統(tǒng)提供基礎(chǔ)設(shè)施，在2015年發(fā)現(xiàn)他們的研發(fā)流程難以使開發(fā)者滿足需求?！拔覀兊挠脩粜枰约簻?zhǔn)備所有基礎(chǔ)設(shè)施?！本W(wǎng)易云和容器服務(wù)架構(gòu)師Feng Changjian說。“我們渴望通過無服務(wù)器的容器服務(wù)，自動為我們的用戶提供基礎(chǔ)設(shè)施和工具?！?/p>

在考慮建立自己的業(yè)務(wù)流程解決方案后，網(wǎng)易決定將其私有云平臺建立在Kubernetes上。這項技術(shù)來自Google的事實讓團(tuán)隊相信它可以跟上網(wǎng)易的規(guī)模?！敖?jīng)過2到3個月的評估，我們相信它可以滿足我們的需求?！盋hangjian說。

“我們利用Kubernetes的可編程性，以便我們可以構(gòu)建一個平臺來滿足內(nèi)部客戶的升級和部署需求?！?- Feng Changjian，網(wǎng)易云和容器服務(wù)架構(gòu)師

該團(tuán)隊在2015年開始采用Kubernetes，甚至在1.0之前，因為它相對容易使用，并且讓公司啟用了DevOps。“我們放棄了Kubernetes的一些概念；我們只想使用標(biāo)準(zhǔn)化框架?！盋hangjian說?！拔覀兝肒ubernetes的可編程性，以便我們可以構(gòu)建一個平臺來滿足內(nèi)部客戶的升級和部署需求?！?/p>

該團(tuán)隊首先專注于構(gòu)建容器平臺，以更好地管理資源，然后通過添加監(jiān)控等內(nèi)部系統(tǒng)，將注意力轉(zhuǎn)向改進(jìn)其對微服務(wù)的支持。這意味著整合CNCF項目Prometheus、Envoy、Harbor、gRPC和Helm。“我們努力提供簡化和標(biāo)準(zhǔn)化的流程，因此我們的用戶和客戶可以利用我們的最佳實踐?！盋hangjian說。

團(tuán)隊正在繼續(xù)改進(jìn)。例如，企業(yè)的電子商務(wù)部分需要利用混合部署，這在過去需要使用兩個獨(dú)立的平臺：基礎(chǔ)架構(gòu)即服務(wù)平臺和Kubernetes平臺。最近，網(wǎng)易創(chuàng)建了一個跨平臺的應(yīng)用程序，可以同時使用單命令部署。

“只要公司擁有一支成熟的團(tuán)隊和足夠的開發(fā)者，我認(rèn)為Kubernetes是一種非常好的技術(shù)，可以幫助他們?！?- Li Lanqing，網(wǎng)易Kubernetes開發(fā)者

今天，網(wǎng)易內(nèi)部云平臺“可以在一個集群中支持30,000個節(jié)點。”架構(gòu)師Zeng Yuxing說?！霸谏a(chǎn)中，我們在單個集群中獲得了10,000個節(jié)點的數(shù)據(jù)。整個內(nèi)部系統(tǒng)正在使用該系統(tǒng)進(jìn)行開發(fā)、測試和生產(chǎn)。”

網(wǎng)易團(tuán)隊報告說，Kubernetes使研發(fā)效率提高了100％以上。部署效率提高了280％?！霸谶^去，如果我們想進(jìn)行升級，我們需要與其他團(tuán)隊合作，甚至在其他部門工作?！盋hangjian說?！拔覀冃枰厥獾墓ぷ魅藛T來準(zhǔn)備一切，所以花了大約半個小時。現(xiàn)在我們可以在5分鐘內(nèi)完成?！毙缕脚_還允許使用GPU和CPU資源進(jìn)行混合部署?！爸?，如果我們將所有資源都用于GPU，我們就不會為CPU提供備用資源。但是現(xiàn)在我們通過混合部署得到了改進(jìn)?！彼f。這些改進(jìn)也提高了資源的利用率。

“通過與這個社區(qū)合作，我們可以從中獲得一些經(jīng)驗，我們也可以從中受益。我們可以看到社區(qū)面臨的問題和挑戰(zhàn)，并參與其中?！?- Li Lanqing，網(wǎng)易Kubernetes開發(fā)者

基于使用其內(nèi)部平臺的結(jié)果和經(jīng)驗，該公司向外部客戶推出基于Kubernetes的云和面向微服務(wù)的PaaS產(chǎn)品，網(wǎng)易輕舟微服務(wù)?！拔覀兊南敕ㄊ?，我們可以找到我們的游戲和電子商務(wù)以及云音樂供應(yīng)商遇到的問題，因此我們可以整合他們的經(jīng)驗，并提供一個平臺來滿足用戶的需求?！盋hangjian說。

無論是否使用網(wǎng)易產(chǎn)品，該團(tuán)隊都鼓勵其他公司嘗試Kubernetes?！爸灰緭碛幸恢С墒斓膱F(tuán)隊和足夠的開發(fā)者，我認(rèn)為Kubernetes是一種非常好的技術(shù)，可以幫助他們?！盞ubernetes開發(fā)者Li Lanqing說。

作為最終用戶和供應(yīng)商，網(wǎng)易已經(jīng)更多地參與社區(qū)，向其他公司學(xué)習(xí)并分享他們所做的事情。該團(tuán)隊一直在為Harbor和Envoy項目做出貢獻(xiàn)，并在網(wǎng)易規(guī)模測試技術(shù)時提供反饋。“我們是一個專注于解決微服務(wù)架構(gòu)挑戰(zhàn)的團(tuán)隊?！盋hangjian說?！巴ㄟ^與這個社區(qū)合作，我們可以從中獲得一些經(jīng)驗，我們也可以從中受益。我們可以看到社區(qū)面臨的問題和挑戰(zhàn)，并參與其中?！?/p>

KubeCon + CloudNativeCon + Open Source Summit大會日期：

會議日程通告日期：2019 年 4 月 10 日

會議活動舉辦日期：2019 年 6 月 24 至 26 日

KubeCon + CloudNativeCon + Open Source Summit贊助方案
KubeCon + CloudNativeCon + Open Source Summit多元化獎學(xué)金現(xiàn)正接受申請
KubeCon + CloudNativeCon和Open Source Summit即將首次合體落地中國
KubeCon + CloudNativeCon + Open Source Summit購票窗口，立即購票！
CNCF邀請你加入最終用戶社區(qū)