微服務(wù)的灰度發(fā)布就該這樣設(shè)計(jì)
實(shí)際生產(chǎn)中如有需求變更,并不會(huì)直接更新線上服務(wù),最通常的做法便是:切出線上的小部分流量進(jìn)行體驗(yàn)測(cè)試,經(jīng)過(guò)測(cè)試后無(wú)問(wèn)題則全面的上線。
這樣做的好處也是非常明顯,一旦出現(xiàn)了BUG,能夠保證大部分的客戶端正常使用。
要實(shí)現(xiàn)這種平滑過(guò)渡的方式就需要用到本篇文章介紹到的全鏈路灰度發(fā)布。
什么是灰度發(fā)布?
灰度發(fā)布(又名金絲雀發(fā)布)是指在黑與白之間,能夠平滑過(guò)渡的一種發(fā)布方式。在其上可以進(jìn)行A/B testing,即讓一部分用戶繼續(xù)用產(chǎn)品特性A,一部分用戶開始用產(chǎn)品特性B,如果用戶對(duì)B沒有什么反對(duì)意見,那么逐步擴(kuò)大范圍,把所有用戶都遷移到B上面來(lái)?;叶劝l(fā)布可以保證整體系統(tǒng)的穩(wěn)定,在初始灰度的時(shí)候就可以發(fā)現(xiàn)、調(diào)整問(wèn)題,以保證其影響度。
為什么是全鏈路灰度發(fā)布?
在陳某前面一篇文章有介紹到網(wǎng)關(guān)的灰度發(fā)布實(shí)現(xiàn),僅僅是實(shí)現(xiàn)了網(wǎng)關(guān)路由轉(zhuǎn)發(fā)的灰度發(fā)布,如下圖:
如上圖,網(wǎng)關(guān)灰度發(fā)布實(shí)現(xiàn)的是網(wǎng)關(guān)通過(guò)灰度標(biāo)記路由到文章服務(wù)B(灰度服務(wù)),至于從文章服務(wù)B到評(píng)論服務(wù)是通過(guò)openFeign內(nèi)部調(diào)用的,默認(rèn)無(wú)法實(shí)現(xiàn)灰度標(biāo)記grayTag的透?jìng)鳎虼宋恼路?wù)B最終調(diào)用的是評(píng)論服務(wù)A,并不是評(píng)論服務(wù)B。
全鏈路灰度發(fā)布需要實(shí)現(xiàn)的是:
- 網(wǎng)關(guān)通過(guò)灰度標(biāo)記將部分流量轉(zhuǎn)發(fā)給文章服務(wù)B
- 文章服務(wù)B能夠?qū)崿F(xiàn)灰度標(biāo)記grayTag的透?jìng)?,最終調(diào)用評(píng)論服務(wù)B
經(jīng)過(guò)以上分析,全鏈路灰度發(fā)布需要實(shí)現(xiàn)兩個(gè)點(diǎn):
- 網(wǎng)關(guān)路由轉(zhuǎn)發(fā)實(shí)現(xiàn)灰度發(fā)布
- 服務(wù)內(nèi)部通過(guò)openFeign調(diào)用實(shí)現(xiàn)灰度發(fā)布(透?jìng)骰叶葮?biāo)記grayTag)。
網(wǎng)關(guān)層的灰度路由轉(zhuǎn)發(fā)
本篇文章將使用Ribbon+Spring Cloud Gateway 進(jìn)行改造負(fù)載均衡策略實(shí)現(xiàn)灰度發(fā)布。
實(shí)現(xiàn)思路如下:
- 在網(wǎng)關(guān)的全局過(guò)濾器中根據(jù)業(yè)務(wù)規(guī)則給流量打上灰度標(biāo)記
- 將灰度標(biāo)記放入請(qǐng)求頭中,傳遞給下游服務(wù)
- 改造Ribbon負(fù)載均衡策略,根據(jù)流量標(biāo)記從注冊(cè)中心獲取灰度服務(wù)
- 請(qǐng)求路由轉(zhuǎn)發(fā)
第一個(gè)問(wèn)題:根據(jù)什么條件打上灰度標(biāo)記?
這個(gè)需要根據(jù)實(shí)際的業(yè)務(wù)需要,比如根據(jù)用戶所在的地區(qū)、使用客戶端類型、隨機(jī)截取流量.....
這里我將直接使用一個(gè)標(biāo)記grayTag,只要客戶端請(qǐng)求頭中攜帶了這個(gè)參數(shù),并且設(shè)置為true,則走灰度發(fā)布邏輯。
請(qǐng)求頭中攜帶:grayTag=true
第二個(gè)問(wèn)題:為什么要在請(qǐng)求頭中添加灰度標(biāo)記傳遞給下游服務(wù)?
這一步非常關(guān)鍵,實(shí)現(xiàn)灰度標(biāo)記透?jìng)鹘o下游服務(wù)的關(guān)鍵,將灰度標(biāo)記放在請(qǐng)求頭中,下游服務(wù)只需要從請(qǐng)求頭中獲取灰度標(biāo)記便知道是否是灰度發(fā)布,這個(gè)和令牌中繼一個(gè)原理。
第三個(gè)問(wèn)題:灰度標(biāo)記如何請(qǐng)求隔離?
Spring MVC中的每個(gè)請(qǐng)求都是開啟一個(gè)線程進(jìn)行處理,因此可以將灰度標(biāo)記放置在ThreadLocal中進(jìn)行線程隔離。
第四個(gè)問(wèn)題:如何知道注冊(cè)中心的服務(wù)哪個(gè)是灰度服務(wù)?
Nacos支持在服務(wù)中配置一些元數(shù)據(jù),可以將灰度標(biāo)記配置在元數(shù)據(jù)中,這樣就能區(qū)分哪些是灰度服務(wù),哪些是正常服務(wù)。
第五個(gè)問(wèn)題:如何針對(duì)特定的服務(wù)進(jìn)行灰度發(fā)布?
比如我的《Spring Cloud Alibaba實(shí)戰(zhàn)》中涉及的一條調(diào)用鏈路如下圖:
需求:現(xiàn)在只對(duì)文章服務(wù)、評(píng)論服務(wù)進(jìn)行灰度發(fā)布,其他服務(wù)依然使用線上正在運(yùn)行的服務(wù)
此時(shí)的調(diào)用關(guān)系就變成了下圖:
我們知道網(wǎng)關(guān)路由中配置的服務(wù)很多,如何只針對(duì)文章服務(wù)進(jìn)行灰度發(fā)布呢?
很簡(jiǎn)單:只需要將自定義的Ribbon灰度發(fā)布規(guī)則只對(duì)文章服務(wù)生效。
這里涉及到Ribbon中的一個(gè)注解:@RibbonClients ,只需要在其中的value屬性指定需要生效的服務(wù)名稱,那么此時(shí)網(wǎng)關(guān)中的配置如下:
@RibbonClient可以指定多個(gè),這個(gè)注解有如下兩個(gè)屬性:
- value:指定服務(wù)的名稱,在注冊(cè)中心配置的服務(wù)名稱
- configuration:自定義的負(fù)載均衡策略,這里是灰度發(fā)布的策略
@RibbonClients其中有一個(gè)屬性defaultConfiguration,一旦使用這個(gè)屬性,那么灰度發(fā)布的策略對(duì)網(wǎng)關(guān)路由中配置的所有服務(wù)都將生效。
第六個(gè)問(wèn)題:說(shuō)了這么多,具體如何實(shí)現(xiàn)?
網(wǎng)關(guān)中首先需要定義一個(gè)全局過(guò)濾器,偽代碼如下:
①處的代碼:從請(qǐng)求頭中獲取客戶端傳遞過(guò)來(lái)的灰度標(biāo)記(這里根據(jù)自己業(yè)務(wù)需要自行更改),判斷是否是灰度發(fā)布
②處的代碼:GrayRequestContextHolder則是自定義的ThreadLocal實(shí)現(xiàn)的線程隔離工具,用來(lái)存放灰度標(biāo)記
③處的代碼:將灰度標(biāo)記放置在請(qǐng)求頭中,傳遞給下游微服務(wù),這里是和令牌一個(gè)邏輯。
注意:這個(gè)全局過(guò)濾器一定要放在OAuth2.0鑒權(quán)過(guò)濾器之前,優(yōu)先級(jí)要調(diào)高
全局過(guò)濾器中已經(jīng)將灰度標(biāo)記打上了,放置在GrayRequestContextHolder中,下面只需要改造Ribbon的負(fù)載均衡的策略去注冊(cè)中心選擇灰度服務(wù)。
創(chuàng)建GrayRule,代碼如下:
邏輯很簡(jiǎn)單,如下:
- 獲取灰度標(biāo)記
- 從Nacos注冊(cè)中心獲取灰度服務(wù)和正常服務(wù)
- 根據(jù)灰度標(biāo)記去判斷,如果灰度發(fā)布則選擇特定的灰度服務(wù)進(jìn)行轉(zhuǎn)發(fā)
定義一個(gè)配置類,注入改造的灰度策略GrayRule,如下:
注意:這個(gè)GrayRuleConfig不能被掃描進(jìn)入IOC容器,一旦掃描進(jìn)入則全局生效
因?yàn)椴粌H僅網(wǎng)關(guān)需要用到這個(gè)灰度發(fā)布策略,凡是涉及到OpenFeign調(diào)用的微服務(wù)如果需要配置灰度發(fā)布都需要用到,因此這里陳某定義了一個(gè)公用的gray-starter。
經(jīng)過(guò)上述步驟網(wǎng)關(guān)的灰度發(fā)布則已經(jīng)配置完成,此時(shí)只需要通過(guò)@RibbonClients指定對(duì)應(yīng)哪個(gè)服務(wù)灰度發(fā)布。
openFeign透?jìng)骰叶葮?biāo)記
上面在介紹網(wǎng)關(guān)的灰度發(fā)布配置時(shí),是將灰度標(biāo)記(grayTag=true)放在了請(qǐng)求頭中,因此在下游服務(wù)中需要做的就只是從請(qǐng)求頭中將灰度標(biāo)記取出來(lái),然后將其存入GrayRequestContextHolder上下文中。
這樣一來(lái)下游服務(wù)中的GrayRule則能從GrayRequestContextHolder獲取到灰度標(biāo)記,從注冊(cè)中心獲取灰度服務(wù)進(jìn)行調(diào)用了。
問(wèn)題來(lái)了:如何從請(qǐng)求頭中取出灰度標(biāo)記?
在介紹OAuth2.0相關(guān)知識(shí)時(shí),曾經(jīng)出過(guò)一篇文章:實(shí)戰(zhàn)!openFeign如何實(shí)現(xiàn)全鏈路JWT令牌信息不丟失?
其中介紹了令牌中繼的解決方案,使用的是openFeign的請(qǐng)求攔截器去配置請(qǐng)求頭信息。
如上圖:openFeign在調(diào)用時(shí)并不是用的原先的Request,而是內(nèi)部新建了一個(gè)Request,其中復(fù)制了請(qǐng)求的URL、請(qǐng)求參數(shù)一些信息,但是請(qǐng)求頭并沒有復(fù)制過(guò)去,因此openFeign調(diào)用會(huì)丟失請(qǐng)求頭中的信息。
但是可以通過(guò)實(shí)現(xiàn)RequestInterceptor將原先的請(qǐng)求頭給復(fù)制過(guò)去,代碼如下:
①處的代碼:從請(qǐng)求頭中獲取灰度發(fā)布的標(biāo)記,設(shè)置到GrayRequestContextHolder上下文中
②處的代碼:將這個(gè)請(qǐng)求頭設(shè)置到新的Request中,繼續(xù)向下游服務(wù)傳遞。
其實(shí)配置一下RequestInterceptor就已經(jīng)完成了,關(guān)于灰度發(fā)布策略只需要復(fù)用網(wǎng)關(guān)的GrayRule
注意:也需要使用@RibbonClients注解去標(biāo)注文章服務(wù)調(diào)用的哪些服務(wù)需要灰度發(fā)布。
代碼如下:
Nacos中服務(wù)如何做灰度標(biāo)記
其實(shí)很簡(jiǎn)單,分為兩種:
1、在配置文件中指定,如下:
2、在Nacos中動(dòng)態(tài)的指定灰度標(biāo)記
配置完成之后,在客戶端請(qǐng)求的時(shí)候只需要攜帶grayTag=true這個(gè)請(qǐng)求頭即可調(diào)用灰度服務(wù)。
總結(jié)
微服務(wù)中全鏈路灰度發(fā)布方案其實(shí)很簡(jiǎn)單,重要的就是灰度打標(biāo),整體流程如下:
網(wǎng)關(guān)中通過(guò)全局過(guò)濾器實(shí)現(xiàn)灰度打標(biāo),將灰度標(biāo)記放入請(qǐng)求頭中傳遞給下游服務(wù)。
網(wǎng)關(guān)通過(guò)自定義的負(fù)載均衡策略,從注冊(cè)中心獲取灰度服務(wù),進(jìn)行轉(zhuǎn)發(fā)。
在openFeign調(diào)用時(shí)需要從請(qǐng)求頭中獲取灰度標(biāo)記,放入上下文中。
openFeign調(diào)用同樣是根據(jù)自定義的負(fù)載均衡策略從注冊(cè)中心獲取灰度服務(wù),進(jìn)行調(diào)用。