【51CTO記者 謝海平 北京報(bào)道】YY 游戲云團(tuán)隊(duì)在2013年基于 OpenStack 上線了云平臺(tái)1.0版本，在實(shí)際的運(yùn)營(yíng)過(guò)程遇到非常多的OpenStack 的質(zhì)量問(wèn)題，踩過(guò)很多的坑，隨著規(guī)模增長(zhǎng)，維護(hù)難度非常大，穩(wěn)定性越來(lái)越低?；谫|(zhì)量和業(yè)務(wù)需求，YY 游戲云團(tuán)隊(duì)自主開(kāi)發(fā)了第二代云平臺(tái)，從零開(kāi)始打造一套適合自己的企業(yè)私有云系統(tǒng)。

[[187951]]

【講師簡(jiǎn)介】劉亞丹：現(xiàn)任職YY-虎牙直播基礎(chǔ)運(yùn)維負(fù)責(zé)人，負(fù)責(zé)基礎(chǔ)運(yùn)維平臺(tái)建設(shè)管理工作，9年互聯(lián)網(wǎng)運(yùn)維經(jīng)歷，經(jīng)歷服務(wù)器從數(shù)百到數(shù)千的規(guī)模，目前主要關(guān)注云計(jì)算和運(yùn)維管理領(lǐng)域。深度參與 YY 游戲私有云1.0和2.0平臺(tái)建設(shè)。深度參與YY 游戲 PaaS平臺(tái)建設(shè)。對(duì)基于 OpenStack 的游戲私有云建設(shè)和運(yùn)維、自主實(shí)現(xiàn) SDN 虛擬網(wǎng)絡(luò)和企業(yè)私有云建設(shè)方面經(jīng)驗(yàn)豐富。

51CTO：YY語(yǔ)音為什么會(huì)部署Cloud 1.0？OpenStack又為何成為***？

劉亞丹：首先是基于公司業(yè)務(wù)發(fā)展的需要，云平臺(tái)1.0主要服務(wù)于頁(yè)游和web 類(lèi)應(yīng)用。頁(yè)游業(yè)務(wù)是內(nèi)存密集型業(yè)務(wù)，適合通過(guò)虛擬化提高 CPU 利用率。頁(yè)游的特點(diǎn)是開(kāi)服快、周期短、通過(guò)云化，提升頁(yè)游開(kāi)服效率和運(yùn)維自動(dòng)化水平。Web 類(lèi)應(yīng)用通過(guò)上層的 PaaS 平臺(tái)，實(shí)現(xiàn)資源的彈性伸縮，故障自動(dòng)隔離等特性。Openstack是非常優(yōu)秀的開(kāi)源項(xiàng)目，有非常好的設(shè)計(jì)思想，是云計(jì)算開(kāi)源領(lǐng)域的標(biāo)準(zhǔn)。1.0版本在2014年上線前，我們對(duì)Openstack做了深入調(diào)研，結(jié)合自身的技術(shù)儲(chǔ)備情況，認(rèn)為Openstack滿足我們當(dāng)前和今后一段時(shí)間的發(fā)展需求。

51CTO：后來(lái)為什么舍棄了這套基于OpenStack的云平臺(tái)1.0? OpenStack到底存在哪些問(wèn)題？

劉亞丹：在運(yùn)營(yíng)基于 openstack 的1.0過(guò)程中，隨著業(yè)務(wù)規(guī)模的快速增長(zhǎng)，openstack 的自身問(wèn)題逐漸被凸顯出來(lái)，其中包括：穩(wěn)定性，可維護(hù)性和擴(kuò)展性方面的問(wèn)題。

在穩(wěn)定性方面，缺失穩(wěn)定的版本支持，架構(gòu)復(fù)雜，過(guò)多的模塊、擴(kuò)展、功能，導(dǎo)致容易出錯(cuò)且難以調(diào)試，組件代碼質(zhì)量不高；在可維護(hù)性方面，openstack 是出了名的安裝部署復(fù)雜，對(duì)運(yùn)維人員的素質(zhì)要求非常高，且無(wú)法實(shí)現(xiàn)平滑版本升級(jí)；而在擴(kuò)展性方面，隨著業(yè)務(wù)規(guī)模的增長(zhǎng)，各個(gè)組件的性能問(wèn)題非常嚴(yán)重，如 dnsmasq，keystone，以及核心組件 MQ 的性能問(wèn)題。以上這些問(wèn)題，導(dǎo)致平臺(tái)在使用上小問(wèn)題不斷，開(kāi)發(fā)和運(yùn)維人員救火不斷，疲于奔命。

51CTO:Cloud 2.0是自主研發(fā)的，采用了什么技術(shù)？架構(gòu)上做了哪些調(diào)整，哪些優(yōu)化？

劉亞丹：Cloud2.0核心是實(shí)現(xiàn)基于硬件的VXLAN網(wǎng)絡(luò)封裝和實(shí)現(xiàn)自主可控的云管理平臺(tái)。通過(guò)交換機(jī)硬件實(shí)現(xiàn)VXLAN數(shù)據(jù)包的解封裝，實(shí)現(xiàn)真正的二層隔離的軟件定義網(wǎng)絡(luò)。在性能方面，采用萬(wàn)兆以太網(wǎng)節(jié)接入。而在存儲(chǔ)方面，使用了分布式的塊存儲(chǔ)，實(shí)現(xiàn)VM的秒級(jí)快速啟動(dòng)和快速的故障恢復(fù)，以及存儲(chǔ)容量和性能水平***擴(kuò)展能力。

51CTO：游戲行業(yè)私有云平臺(tái)建設(shè)與運(yùn)維具有哪些特點(diǎn)？

劉亞丹： 前面提到，游戲業(yè)務(wù)天生適合運(yùn)行在云上，內(nèi)存密集型，非 CPU 密集型。頁(yè)游具備開(kāi)服快，周期短等特點(diǎn)。YY語(yǔ)音作為一個(gè)游戲平臺(tái)和游戲發(fā)行方，主要提供 IaaS 的游戲私有云平臺(tái)。游戲業(yè)務(wù)是一個(gè)現(xiàn)金流的業(yè)務(wù)，平臺(tái)的穩(wěn)定性非常重要，平臺(tái)故障直接導(dǎo)致經(jīng)濟(jì)損失。作為私有云平臺(tái)，本身的容量池不會(huì)非常龐大，平臺(tái)的容量管理非常重要，容量空閑過(guò)多造成資源浪費(fèi)，容量不足將導(dǎo)致服務(wù)不可用，而爆款游戲的資源需求非?？焖?，因此運(yùn)維的核心在平臺(tái)的穩(wěn)定性保障和容量管理。保障有足夠的容量滿足業(yè)務(wù)需求，同時(shí)又不至于造成過(guò)多的資源空閑。

[[187952]]

51CTO:新平臺(tái)運(yùn)維的重點(diǎn)和難點(diǎn)在哪兒？

劉亞丹：新的云平臺(tái)運(yùn)維的重點(diǎn)是網(wǎng)絡(luò)和存儲(chǔ)的運(yùn)維。

網(wǎng)絡(luò)和存儲(chǔ)都是云平臺(tái)的核心組件，任意一個(gè)組件出現(xiàn)故障，都將導(dǎo)致云平臺(tái)整體故障。在網(wǎng)絡(luò)方面，在整體架構(gòu)設(shè)計(jì)上，全部采用高可用架構(gòu)設(shè)計(jì)，無(wú)單點(diǎn)故障，由于第三方網(wǎng)絡(luò)設(shè)備 QoS 能力還不盡完善，在QoS 上更多借助于外部的監(jiān)控和預(yù)警。在存儲(chǔ)方面，ceph 存儲(chǔ)的容量和性能做過(guò)大量的壓測(cè)和應(yīng)用場(chǎng)景模擬，對(duì)基于當(dāng)前硬件架構(gòu)的集群的性能和容量有一定的經(jīng)驗(yàn)，對(duì)相應(yīng)的指標(biāo)做好監(jiān)控和預(yù)警，如集群的讀寫(xiě)吞吐量，讀寫(xiě)次數(shù)分別作監(jiān)控預(yù)警，云上業(yè)務(wù)的場(chǎng)景較為復(fù)雜，云存儲(chǔ)的容量直接影響 VM 的可用性。需及時(shí)把握業(yè)務(wù)的容量需求，適時(shí)補(bǔ)充存儲(chǔ)容量，保證業(yè)務(wù) SLA。

51CTO:您對(duì)DevOps如何理解？如何實(shí)踐DevOps？

劉亞丹：我認(rèn)為 DevOps是先進(jìn)的 IT 軟件開(kāi)發(fā)模型，將以往開(kāi)發(fā)、運(yùn)維團(tuán)隊(duì)的關(guān)注的不同目標(biāo)，轉(zhuǎn)為共同的目標(biāo)，即面向業(yè)務(wù)的最終用戶價(jià)值交付。DevOps 更多強(qiáng)調(diào)的是開(kāi)發(fā)、運(yùn)維團(tuán)隊(duì)的合作，以達(dá)到軟件交付的敏捷、高效、可靠。DevOps 在實(shí)踐中，要求從5個(gè)方面進(jìn)行落地，分別是文化(culture)、精益（Lean）、自動(dòng)化（automation）、度量（mertrics）、分享（sharing）。

具體到公司內(nèi)部，我們?cè)谖幕戏浅５陌?，比如在遇到?yīng)用故障的時(shí)候，開(kāi)發(fā)和運(yùn)維團(tuán)隊(duì)更多強(qiáng)調(diào)問(wèn)題的解決，不會(huì)過(guò)分的強(qiáng)調(diào)責(zé)任歸誰(shuí)。在業(yè)務(wù)交付鏈中，通過(guò)平臺(tái)建立了一系列的自動(dòng)化工具，整合從開(kāi)發(fā)、構(gòu)建，、打包、測(cè)試、部署、反饋的工具和度量體系。

51CTO:私有云建設(shè)將是未來(lái)很多企業(yè)要面臨的選擇，對(duì)此，能否結(jié)合您以往的這段規(guī)劃、建設(shè)、運(yùn)維經(jīng)驗(yàn)，總結(jié)一下企業(yè)私有云建設(shè)，應(yīng)該需要注意哪些關(guān)鍵問(wèn)題？

劉亞丹：有三個(gè)問(wèn)題需要重點(diǎn)關(guān)注。

***，獲得支持。私有云建設(shè)在 企業(yè) it 建設(shè)中是一個(gè)戰(zhàn)略問(wèn)題，需要得到自上而下的支持；

第二，逐項(xiàng)落地。私有云建設(shè)需要結(jié)合企業(yè)的自身需求，逐步落地各項(xiàng)功能，比如可以先從計(jì)算虛擬化開(kāi)始；

三是，控制風(fēng)險(xiǎn)。私有云是未來(lái)很多企業(yè)的選擇，對(duì)于 IT 從業(yè)者來(lái)說(shuō)，充滿挑戰(zhàn)和機(jī)遇，在實(shí)踐的過(guò)程中，需要控制好風(fēng)險(xiǎn)。

51CTO：對(duì)于云計(jì)算的發(fā)展您是如何看待的？一些新的技術(shù)您是如何看待的?

劉亞丹：云計(jì)算作為一種高效的 IT 資源供給模式，未來(lái)幾年會(huì)有更多基礎(chǔ)設(shè)施資源，通過(guò)云的方式提供服務(wù)，也會(huì)有越來(lái)越多的行業(yè)，使用云來(lái)滿足企業(yè)發(fā)展。幾年前，當(dāng)我們討論說(shuō)云計(jì)算未來(lái)是不是像水電資源一樣被人們使用，可能有很多人覺(jué)得太遙遠(yuǎn)了。但今天來(lái)看，這樣的情況變得越來(lái)越現(xiàn)實(shí)。

一些新技術(shù)，比如人工智能領(lǐng)域的GPU算法的進(jìn)步，以超乎想象的速度落地到應(yīng)用，產(chǎn)生了很多機(jī)會(huì)。而一些創(chuàng)業(yè)公司，正是抓住了這些新技術(shù)，因而能夠快速成長(zhǎng)為獨(dú)角獸型的公司，比如今日頭條，快手等 App。這些公司通過(guò)機(jī)器學(xué)習(xí)算法做精準(zhǔn)內(nèi)容推薦，比傳統(tǒng)的靜態(tài)內(nèi)容分發(fā)更具競(jìng)爭(zhēng)力。作為一個(gè)技術(shù)人員，我們需要保持對(duì)新技術(shù)的好奇之心，需要不斷的學(xué)習(xí)，才能跟上時(shí)代的發(fā)展步伐。

【51CTO原創(chuàng)稿件，合作站點(diǎn)轉(zhuǎn)載請(qǐng)注明原文作者和出處為51CTO.com】