為什么有HTTP協(xié)議,還要有websocket協(xié)議
?平時我們打開網(wǎng)頁,比如購物網(wǎng)站某寶。都是點一下列表商品,跳轉(zhuǎn)一下網(wǎng)頁就到了商品詳情。
從HTTP協(xié)議的角度來看,就是點一下網(wǎng)頁上的某個按鈕,前端發(fā)一次HTTP請求,網(wǎng)站返回一次HTTP響應(yīng)。
這種由客戶端主動請求,服務(wù)器響應(yīng)的方式也滿足大部分網(wǎng)頁的功能場景。
但有沒有發(fā)現(xiàn),這種情況下,服務(wù)器從來就不會主動給客戶端發(fā)一次消息。
就像你喜歡的女生從來不會主動找你一樣。
但如果現(xiàn)在,你在刷網(wǎng)頁的時候右下角突然彈出一個小廣告,提示你【一個人在家偷偷才能玩哦】。
求知,好學(xué),勤奮,這些刻在你DNA里的東西都動起來了。
你點開后發(fā)現(xiàn)。
長相平平無奇的古某提示你"道士9條狗,全服橫著走"。
影帝某輝老師跟你說"系兄弟就來砍我"。
來都來了,你就選了個角色進(jìn)到了游戲界面里。
這時候,上來就是一個小怪,從遠(yuǎn)處走來,然后瘋狂拿木棒子抽你。
你全程沒點任何一次鼠標(biāo)。服務(wù)器就自動將怪物的移動數(shù)據(jù)和數(shù)據(jù)源源不斷發(fā)給你了。
這….太暖心了。
感動之余,問題就來了,
像這種看起來服務(wù)器主動發(fā)消息給客戶端的場景,是怎么做到的?
在真正回答這個問題之前,我們先來聊下一些相關(guān)的知識背景。
使用HTTP不斷輪詢
其實問題的痛點在于,怎么樣才能在用戶不做任何操作的情況下,網(wǎng)頁能收到消息并發(fā)生變更。
最常見的解決方案是,網(wǎng)頁的前端代碼里不斷定時發(fā)HTTP請求到服務(wù)器,服務(wù)器收到請求后給客戶端響應(yīng)消息。
這其實時一種偽服務(wù)器推的形式。
它其實并不是服務(wù)器主動發(fā)消息到客戶端,而是客戶端自己不斷偷偷請求服務(wù)器,只是用戶無感知而已。
用這種方式的場景也有很多,最常見的就是掃碼登錄。
比如某信公眾號平臺,登錄頁面二維碼出現(xiàn)之后,前端網(wǎng)頁根本不知道用戶掃沒掃,于是不斷去向后端服務(wù)器詢問,看有沒有人掃過這個碼。而且是以大概1到2秒的間隔去不斷發(fā)出請求,這樣可以保證用戶在掃碼后能在1到2s內(nèi)得到及時的反饋,不至于等太久。

使用HTTP定時輪詢
但這樣,會有兩個比較明顯的問題
- 當(dāng)你打開F12頁面時,你會發(fā)現(xiàn)滿屏的HTTP請求。雖然很小,但這其實也消耗帶寬,同時也會增加下游服務(wù)器的負(fù)擔(dān)。
- 最壞情況下,用戶在掃碼后,需要等個1~2s,正好才觸發(fā)下一次http請求,然后才跳轉(zhuǎn)頁面,用戶會感到明顯的卡頓。
使用起來的體驗就是,二維碼出現(xiàn)后,手機(jī)掃一掃,然后在手機(jī)上點個確認(rèn),這時候卡頓等個1~2s,頁面才跳轉(zhuǎn)。

不斷輪詢查看是否有掃碼
那么問題又來了,有沒有更好的解決方案?
有,而且實現(xiàn)起來成本還非常低。
長輪詢
我們知道,HTTP請求發(fā)出后,一般會給服務(wù)器留一定的時間做響應(yīng),比如3s,規(guī)定時間內(nèi)沒返回,就認(rèn)為是超時。
如果我們的HTTP請求將超時設(shè)置的很大,比如30s,在這30s內(nèi)只要服務(wù)器收到了掃碼請求,就立馬返回給客戶端網(wǎng)頁。如果超時,那就立馬發(fā)起下一次請求。
這樣就減少了HTTP請求的個數(shù),并且由于大部分情況下,用戶都會在某個30s的區(qū)間內(nèi)做掃碼操作,所以響應(yīng)也是及時的。

長輪詢
比如,某度云網(wǎng)盤就是這么干的。所以你會發(fā)現(xiàn)一掃碼,手機(jī)上點個確認(rèn),電腦端網(wǎng)頁就秒跳轉(zhuǎn),體驗很好。

長輪詢的方式來替代
真一舉兩得。
像這種發(fā)起一個請求,在較長時間內(nèi)等待服務(wù)器響應(yīng)的機(jī)制,就是所謂的長訓(xùn)輪機(jī)制。我們常用的消息隊列RocketMQ中,消費者去取數(shù)據(jù)時,也用到了這種方式。

RocketMQ的消費者通過長輪詢獲取數(shù)據(jù)
像這種,在用戶不感知的情況下,服務(wù)器將數(shù)據(jù)推送給瀏覽器的技術(shù),就是所謂的服務(wù)器推送技術(shù),它還有個毫不沾邊的英文名,comet技術(shù),大家聽過就好。
上面提到的兩種解決方案,本質(zhì)上,其實還是客戶端主動去取數(shù)據(jù)。
對于像掃碼登錄這樣的簡單場景還能用用。
但如果是網(wǎng)頁游戲呢,游戲一般會有大量的數(shù)據(jù)需要從服務(wù)器主動推送到客戶端。
這就得說下websocket了。
websocket是什么
我們知道TCP連接的兩端,同一時間里,雙方都可以主動向?qū)Ψ桨l(fā)送數(shù)據(jù)。這就是所謂的全雙工。
而現(xiàn)在使用最廣泛的HTTP1.1,也是基于TCP協(xié)議的,同一時間里,客戶端和服務(wù)器只能有一方主動發(fā)數(shù)據(jù),這就是所謂的半雙工。
也就是說,好好的全雙工TCP,被HTTP用成了半雙工。
為什么?
這是由于HTTP協(xié)議設(shè)計之初,考慮的是看看網(wǎng)頁文本的場景,能做到客戶端發(fā)起請求再由服務(wù)器響應(yīng),就夠了,根本就沒考慮網(wǎng)頁游戲這種,客戶端和服務(wù)器之間都要互相主動發(fā)大量數(shù)據(jù)的場景。
所以為了更好的支持這樣的場景,我們需要另外一個基于TCP的新協(xié)議。
于是新的應(yīng)用層協(xié)議websocket就被設(shè)計出來了。
大家別被這個名字給帶偏了。雖然名字帶了個socket,但其實socket和websocket之間,就跟雷峰和雷峰塔一樣,二者接近毫無關(guān)系。

websocket在四層網(wǎng)絡(luò)協(xié)議中的位置
怎么建立websocket連接
我們平時刷網(wǎng)頁,一般都是在瀏覽器上刷的,一會刷刷圖文,這時候用的是HTTP協(xié)議,一會打開網(wǎng)頁游戲,這時候就得切換成我們新介紹的websocket協(xié)議。
為了兼容這些使用場景。瀏覽器在TCP三次握手建立連接之后,都統(tǒng)一使用HTTP協(xié)議先進(jìn)行一次通信。
- 如果此時是普通的HTTP請求,那后續(xù)雙方就還是老樣子繼續(xù)用普通HTTP協(xié)議進(jìn)行交互,這點沒啥疑問。
- 如果這時候是想建立websocket連接,就會在HTTP請求里帶上一些特殊的header頭。
Connection: Upgrade
Upgrade: websocket
Sec-WebSocket-Key: T2a6wZlAwhgQNqruZ2YUyg==\r\n
這些header頭的意思是,瀏覽器想升級協(xié)議(Connection: Upgrade),并且想升級成websocket協(xié)議(Upgrade: websocket)。
同時帶上一段隨機(jī)生成的base64碼(Sec-WebSocket-Key),發(fā)給服務(wù)器。
如果服務(wù)器正好支持升級成websocket協(xié)議。就會走websocket握手流程,同時根據(jù)客戶端生成的base64碼,用某個公開的算法變成另一段字符串,放在HTTP響應(yīng)的 Sec-WebSocket-Accept? 頭里,同時帶上101狀態(tài)碼,發(fā)回給瀏覽器。
HTTP/1.1 101 Switching Protocols\r\n
Sec-WebSocket-Accept: iBJKv/ALIW2DobfoA4dmr3JHBCY=\r\n
Upgrade: websocket\r\n
Connection: Upgrade\r\n
http狀態(tài)碼=200(正常響應(yīng))的情況,大家見得多了。101確實不常見,它其實是指協(xié)議切換。

base64轉(zhuǎn)為新的字符串
之后,瀏覽器也用同樣的公開算法將base64碼轉(zhuǎn)成另一段字符串,如果這段字符串跟服務(wù)器傳回來的字符串一致,那驗證通過。

對比客戶端和服務(wù)端生成的字符串
就這樣經(jīng)歷了一來一回兩次HTTP握手,websocket就建立完成了,后續(xù)雙方就可以使用webscoket的數(shù)據(jù)格式進(jìn)行通信了。

建立websocket連接.drawio
websocket抓包
我們可以用wireshark抓個包,實際看下數(shù)據(jù)包的情況。

客戶端請求升級為websocket
上面這張圖,注意畫了紅框的第2445?行報文,是websocket的第一次握手,意思是發(fā)起了一次帶有特殊Header的HTTP請求。

服務(wù)器同意升級為websocket協(xié)議
上面這個圖里畫了紅框的4714?行報文,就是服務(wù)器在得到第一次握手后,響應(yīng)的第二次握手,可以看到這也是個HTTP類型的報文,返回的狀態(tài)碼是101。同時可以看到返回的報文header中也帶有各種websocket?相關(guān)的信息,比如Sec-WebSocket-Accept。

兩次HTTP請求之后正式使用websocket通信
上面這張圖就是全貌了,從截圖上的注釋可以看出,websocket和HTTP一樣都是基于TCP的協(xié)議。經(jīng)歷了三次TCP握手之后,利用HTTP協(xié)議升級為websocket協(xié)議。
你在網(wǎng)上可能會看到一種說法:"websocket是基于HTTP的新協(xié)議",其實這并不對,因為websocket只有在建立連接時才用到了HTTP,升級完成之后就跟HTTP沒有任何關(guān)系了。
這就好像你喜歡的女生通過你要到了你大學(xué)室友的微信,然后他們自己就聊起來了。你能說這個女生是通過你去跟你室友溝通的嗎?不能。你跟HTTP一樣,都只是個工具人。
這就有點"借殼生蛋"的那意思。

HTTP和websocket的關(guān)系
websocket的消息格式
上面提到在完成協(xié)議升級之后,兩端就會用webscoket的數(shù)據(jù)格式進(jìn)行通信。
數(shù)據(jù)包在websocket中被叫做幀。
我們來看下它的數(shù)據(jù)格式長什么樣子。

websocket報文格式
這里面字段很多,但我們只需要關(guān)注下面這幾個。
opcode字段:這個是用來標(biāo)志這是個什么類型的數(shù)據(jù)幀。比如。
等于1時是指text類型(string)的數(shù)據(jù)包
等于2是二進(jìn)制數(shù)據(jù)類型([]byte)的數(shù)據(jù)包
等于8是關(guān)閉連接的信號
payload字段:存放的是我們真正想要傳輸?shù)臄?shù)據(jù)的長度,單位是字節(jié)。比如你要發(fā)送的數(shù)據(jù)是字符串"111"?,那它的長度就是3。

另外,可以看到,我們存放payload長度的字段有好幾個,我們既可以用最前面的7bit?, 也可以用后面的7+16bit或7+64bit。
那么問題就來了。
我們知道,在數(shù)據(jù)層面,大家都是01二進(jìn)制流。我怎么知道什么情況下應(yīng)該讀7bit,什么情況下應(yīng)該讀7+16bit呢?
websocket會用最開始的7bit做標(biāo)志位。不管接下來的數(shù)據(jù)有多大,都先讀最先的7個bit,根據(jù)它的取值決定還要不要再讀個16bit或64bit。
- 如果最開始的7bit的值是 0~125,那么它就表示了 payload 全部長度,只讀最開始的7個bit就完事了。

payload長度在0到125之間
- 如果是126(0x7E)。那它表示payload的長度范圍在 126~65535 之間,接下來還需要再讀16bit。這16bit會包含payload的真實長度。

payload長度在126到65535之間
- 如果是127(0x7F)。那它表示payload的長度范圍>=65536,接下來還需要再讀64bit。這64bit會包含payload的長度。這能放2的64次方byte的數(shù)據(jù),換算一下好多個TB,肯定夠用了。

payload長度大于等于65536的情況
payload data字段:這里存放的就是真正要傳輸?shù)臄?shù)據(jù),在知道了上面的payload長度后,就可以根據(jù)這個值去截取對應(yīng)的數(shù)據(jù)。
大家有沒有發(fā)現(xiàn)一個小細(xì)節(jié),websocket的數(shù)據(jù)格式也是 數(shù)據(jù)頭(內(nèi)含payload長度) + payload data 的形式。
之前寫的《既然有HTTP協(xié)議,為什么還要有RPC》提到過,TCP協(xié)議本身就是全雙工,但直接使用純裸TCP去傳輸數(shù)據(jù),會有粘包的"問題"。為了解決這個問題,上層協(xié)議一般會用消息頭+消息體的格式去重新包裝要發(fā)的數(shù)據(jù)。
而消息頭里一般含有消息體的長度,通過這個長度可以去截取真正的消息體。
HTTP協(xié)議和大部分RPC協(xié)議,以及我們今天介紹的websocket協(xié)議,都是這樣設(shè)計的。

消息邊界長度標(biāo)志
websocket的使用場景
websocket完美繼承了TCP協(xié)議的全雙工能力,并且還貼心的提供了解決粘包的方案。它適用于需要服務(wù)器和客戶端(瀏覽器)頻繁交互的大部分場景。比如網(wǎng)頁/小程序游戲,網(wǎng)頁聊天室,以及一些類似飛書這樣的網(wǎng)頁協(xié)同辦公軟件。
回到文章開頭的問題,在使用websocket協(xié)議的網(wǎng)頁游戲里,怪物移動以及玩家的行為是服務(wù)器邏輯產(chǎn)生的,對玩家產(chǎn)生的傷害等數(shù)據(jù),都需要由服務(wù)器主動發(fā)送給客戶端,客戶端獲得數(shù)據(jù)后展示對應(yīng)的效果。

websocket的使用場景
總結(jié)
- TCP協(xié)議本身是全雙工的,但我們最常用的HTTP1.1,雖然是基于TCP的協(xié)議,但它是半雙工的,對于大部分需要服務(wù)器主動推送數(shù)據(jù)到客戶端的場景,都不太友好,因此我們需要使用支持全雙工的websocket協(xié)議。
- 在HTTP1.1里。只要客戶端不問,服務(wù)端就不答?;谶@樣的特點,對于登錄頁面這樣的簡單場景,可以使用定時輪詢或者長輪詢的方式實現(xiàn)服務(wù)器推送(comet)的效果。
- 對于客戶端和服務(wù)端之間需要頻繁交互的復(fù)雜場景,比如網(wǎng)頁游戲,都可以考慮使用websocket協(xié)議。
- websocket和socket幾乎沒有任何關(guān)系,只是叫法相似。
- 正因為各個瀏覽器都支持HTTP協(xié)議,所以websocket會先利用HTTP協(xié)議加上一些特殊的header頭進(jìn)行握手升級操作,升級成功后就跟HTTP沒有任何關(guān)系了,之后就用websocket的數(shù)據(jù)格式進(jìn)行收發(fā)數(shù)據(jù)。?






























