本文是WOT2016互聯(lián)網(wǎng)運(yùn)維與開(kāi)發(fā)者大會(huì)的現(xiàn)場(chǎng)干貨，新一屆主題為WOT2016企業(yè)安全技術(shù)峰會(huì)將在2016年6月24日-25日于北京珠三角JW萬(wàn)豪酒店隆重召開(kāi)！

嘉賓簡(jiǎn)介

溫敏，2014年加入浪淘金，擔(dān)任運(yùn)維負(fù)責(zé)人。在移動(dòng)端用戶和數(shù)據(jù)快速增長(zhǎng)的過(guò)程中，憑借自身超強(qiáng)的學(xué)習(xí)能力，有力保障了系統(tǒng)的穩(wěn)定性，同時(shí)積累了豐富的移動(dòng)應(yīng)用運(yùn)維經(jīng)驗(yàn)。此前在多家公司長(zhǎng)期從事系統(tǒng)運(yùn)維工作，具備豐富的運(yùn)維業(yè)務(wù)和管理經(jīng)驗(yàn)。

WOT2016互聯(lián)網(wǎng)運(yùn)維與開(kāi)發(fā)者大會(huì)的運(yùn)維安全專場(chǎng)的演講中，溫敏分享了"她社區(qū)"從0到千萬(wàn)月活的快速增長(zhǎng)過(guò)程中，對(duì)運(yùn)維提出的挑戰(zhàn)，從運(yùn)維系統(tǒng)架構(gòu)、網(wǎng)絡(luò)等各個(gè)方面所做出的應(yīng)對(duì)等。

背景介紹

她社區(qū)安卓版本去年4月份上線，兩個(gè)月后上線了iOS版本。經(jīng)過(guò)大概八個(gè)月的時(shí)間，也就是2015年底時(shí)，做到月活躍度達(dá)千萬(wàn)量級(jí)，用戶發(fā)帖量200w左右，每日新增的圖片和音頻達(dá)200GB。目前她社區(qū)已經(jīng)擁有6000多個(gè)圈子，有1300多位圈主，這些圈主也是由用戶來(lái)構(gòu)成的，來(lái)負(fù)責(zé)圈子的一些管理工作。

初期業(yè)務(wù)構(gòu)架

在早期為了讓業(yè)務(wù)盡早上線，并沒(méi)有一個(gè)大而全的整體構(gòu)架。做了一些基本的組件，比如用Nginx做代理，后端的應(yīng)用服務(wù)用到Redis、Memcache等，底層的數(shù)據(jù)存儲(chǔ)是用的Mysql、Mongodb。在圖片存儲(chǔ)和日志搜集方面還用到一些第三方的組件。

出現(xiàn)的問(wèn)題以及解決方案

在用戶上漲的過(guò)程中，有一些問(wèn)題也逐漸浮出水面。主要的問(wèn)題有：網(wǎng)絡(luò)問(wèn)題、組件問(wèn)題、存儲(chǔ)問(wèn)題、后續(xù)處理問(wèn)題等。

***，網(wǎng)絡(luò)問(wèn)題。

用戶量上來(lái)后經(jīng)常會(huì)遇到劫持問(wèn)題。DNS劫持，我們使用了第三方的httpdns來(lái)解決了這個(gè)問(wèn)題。還有就是內(nèi)容劫持，為解決這個(gè)問(wèn)題走了很多彎路。比如更換域名、更換IP、對(duì)代碼做一些混淆等。剛開(kāi)始會(huì)有一點(diǎn)效果，但是后來(lái)還會(huì)恢復(fù)到劫持狀態(tài)，***沒(méi)辦法上線https，把域名、把IP這些信息也全部更換了。目前來(lái)說(shuō)也沒(méi)有再發(fā)現(xiàn)大批量劫持的情況。

還有網(wǎng)絡(luò)性能慢的問(wèn)題。因?yàn)樯暇€之初對(duì)這方面的考量比較少，對(duì)線路質(zhì)量大多沒(méi)有做優(yōu)化。解決方案就是找一些優(yōu)質(zhì)線路做反向代理，基于這點(diǎn)我們可以對(duì)用戶的網(wǎng)絡(luò)性能進(jìn)行分析。通過(guò)客戶端自動(dòng)上報(bào)到服務(wù)端，在服務(wù)端把數(shù)據(jù)包壓縮，把日志格式化，把日志存儲(chǔ)到后端，最終通過(guò)計(jì)算生成可視化的圖表。

第二，數(shù)據(jù)庫(kù)。

首先面臨的問(wèn)題是數(shù)據(jù)量大。我們做了一個(gè)分表的操作，對(duì)應(yīng)用透明。但是分了表之后ID會(huì)出現(xiàn)問(wèn)題，所以使用了第三方的ID生成。還有就是性能問(wèn)題，可以通過(guò)升級(jí)硬件，比如硬盤、CPU等來(lái)解決。SQL也需要專門優(yōu)化，輔以數(shù)據(jù)變更服務(wù)通知來(lái)減少對(duì)數(shù)據(jù)庫(kù)的讀寫(xiě)壓力。

第三，存儲(chǔ)。

目前是使用fastdfs文件系統(tǒng)，容量大概是三十四五T左右。這里都是用戶上傳的圖片，我們會(huì)對(duì)圖片做一些裁圖或者質(zhì)量壓縮，主要還是能優(yōu)化用戶打開(kāi)圖片的速度。還有一些是音頻處理，主要是做一些格式轉(zhuǎn)換。

第三方云存儲(chǔ)我們也調(diào)研過(guò)，都比較穩(wěn)定成熟，各種API也豐富，數(shù)據(jù)處理種類多，目前這個(gè)工作已經(jīng)做完了，音頻、圖片、視頻也都會(huì)使用第三方云存儲(chǔ)，使用它們?cè)幚淼墓δ堋?o:p>

以上幾點(diǎn)說(shuō)完，總來(lái)來(lái)講整個(gè)架構(gòu)已經(jīng)處于一個(gè)比較穩(wěn)定的階段。當(dāng)然，中間還有一些細(xì)節(jié)的、小的問(wèn)題，比如數(shù)據(jù)讀寫(xiě)頻繁等。除了這些基礎(chǔ)功能外，還有自動(dòng)化以及運(yùn)維相關(guān)的功能。包括DNS管理、CDN管理、Git管理和上傳文件或者定期任務(wù)等?？偟膩?lái)說(shuō)，八個(gè)月當(dāng)中，主要做了這些工作。

演講視頻：http://edu.51cto.com/lesson/id-100755.html