偷偷摘套内射激情视频,久久精品99国产国产精,中文字幕无线乱码人妻,中文在线中文a,性爽19p

Redis的模糊查詢在生產環(huán)境出現(xiàn)嚴重的性能問題

數(shù)據(jù)庫 其他數(shù)據(jù)庫 Redis
Redis是一個高性能高效率的key-value存儲的nosql數(shù)據(jù)庫,由于數(shù)據(jù)是存儲在內存中,因此訪問速度非??欤捎陧椖可婕暗綌?shù)據(jù)庫的查詢非常多,而數(shù)據(jù)變大并不是非常頻繁,所以在項目中采用Redis分擔大部分MySQL的壓力。

Redis是一個高性能高效率的key-value存儲的nosql數(shù)據(jù)庫,由于數(shù)據(jù)是存儲在內存中,因此訪問速度非???,由于項目涉及到數(shù)據(jù)庫的查詢非常多,而數(shù)據(jù)變大并不是非常頻繁,所以在項目中采用Redis分擔大部分MySQL的壓力。

在項目中實際使用我用的Redis提供的客戶端連接工具包jedis,在項目中引入jedis.Jar即可。

  1. public static Set<String> searchLike(String like_key) { 
  2.    //線上環(huán)境模糊查詢帶來嚴重的性能問題,杜絕使用 
  3.    if(!Config.IS_BUG){ 
  4.         return null
  5.    } 
  6.    Jedis jedis = RedisApi.getJedis(); 
  7.    boolean is_ok = true
  8.    try { 
  9.         if (jedis == null) { 
  10.            return null
  11.         } 
  12.         return jedis.keys(like_key); 
  13.     } catch (Exception e) { 
  14.         // TODO: handle exception 
  15.         is_ok = false
  16.        return null
  17.     } finally { 
  18.         close(jedis, is_ok); 
  19.    } 

每當用戶登錄成功之后,都會生成一個cookie,分別存在客戶端和Redis數(shù)據(jù)庫,cookie的key由cookie值+用戶ID組成:cookie字符串+"_"+用戶ID,例如用戶cookie為“d9fb0ea5955fcf0a2183c5076”,用戶ID為 19092,那Redis中存儲的key就是 d9fb0ea5955fcf0a2183c5076_19092,最終的key-vlaue就是: 

  1. {"d9fb0ea5955fcf0a2183c5076_19092":d9fb0ea5955fcf0a2183c5076} 

而在用戶不斷的登錄成功,就不斷地產生這樣的記錄,久而久之,會積累出非常多的無用的key,浪費redis的空間,也加重了redis查詢的負擔,因此想到使用Redis的模糊查詢來清掉無用的cookie的key。

而Redis的客戶端jedis操作是通過jedis.keys(keys)來完成的,keys可以使用通配符來匹配Redis中的key。

通配符說明:

*: 0到任意多個字符 eg: searchLike("test*")

?: 1個字符

比如現(xiàn)在需要清除某個用戶所有的無用的cookie的key,,則可以寫成“ *_19092 ”。

  1. String key_like = "*_19092"
  2. Set<String> keys = RedisApi.searchLike(key_like); 

這樣就可以查出所有這個用戶的keys,調用jedis提供的批量刪除key的方法即可達到目的。

  1. String key_like = "*_19092"
  2. Set<String> keys = RedisApi.searchLike(key_like); 

到這里從需求到邏輯到編碼一氣呵成,簡單測試沒什么問題后,就發(fā)布到線上,由于平時網站的流量不算非常高,所以運行了幾天也沒發(fā)生什么異常,直到今天早上,擁有幾十萬粉絲的公眾號發(fā)推文,推文的內容直接鏈接到網站,因此說瞬間流量是非常高。 


運行了大約十分鐘之后,運營突然發(fā)瘋的過來說網站訪問非常慢,甚至出現(xiàn)錯誤碼,心里一慌,趕緊上去看日志,我了個乖乖啊,簡直是嚇人,error日志想流水一樣蹦出來,但五一不例外都是下面圖示的錯誤:從Redis池中獲取不大連接數(shù),馬上上redis服務器查看,發(fā)現(xiàn)CPU已經到達了100%以上。 


能讓Redis的CPU到100%的,我想出了一下幾個可能:

  1. 連接數(shù)過多,占用連接的時間過長
  2. 存儲的值過大,存取均很占用CPU和內存
  3. 慢查詢,事其它操作等待時間超時
  4. redis阻塞,某個操作把Redis阻塞,導致CPU飆升

由于項目上線時間已經很久,前三個可能基本都在平時查看Redis服務器性能的過程中排除掉,因此很大概率是第四個,突然想起前幾天做的功能,有個模糊查詢,該不是這個問題吧?我到網站輸入“Redis 模糊查詢 性能”,出來非常多關于redis模糊查詢性能急劇下降的的情況,而且建議生產環(huán)境下禁用redis的模糊查詢,于是我把模糊查詢這塊業(yè)務直接注釋掉,重新上線,運行了半天,再沒出現(xiàn)這個問題,因此可以斷定就是模糊查詢搞的鬼。

【替代方案】

有問題肯定是要解決的,既然模糊查詢行不通的,那就得想別的辦法達到目的,想到Redis有Set這這種存儲結構,因此可以把用戶的所有cookie key都放到一個用戶專屬的Set中,每次用戶登錄成功之后,都把之前Set里的cookie key清除,然后再把***的key放進去,這樣就可以達到同樣的目的了。 

  1. String setKey = "prefix_customer_cookie_list_10920"
  2.        String token="ss2ssssss"
  3.         //取出所有的用戶的cookie key 
  4.         Set<String> list = RedisApi.getSet(setKey); 
  5.        if (list != null && list.size() > 0) { 
  6.             //刪除用戶所有的cookie key 
  7.             RedisApi.removeFromSet(setKey, list.toArray(new String[0])); 
  8.         } 
  9.        //把***的cookie key加入到Set中 
  10.         RedisApi.addSet(setKey, token); 

 

責任編輯:龐桂玉 來源: 數(shù)據(jù)庫開發(fā)
相關推薦

2022-09-04 21:17:03

高可用Linkerd

2011-09-19 10:43:19

Nuget

2020-02-25 15:47:05

ElasticsearLucene地方

2021-12-03 07:27:29

EFCore生產環(huán)境

2015-10-28 16:20:10

短生命周期容器原生云計算

2020-12-25 09:00:00

Kubernetes容器開發(fā)

2015-08-03 09:08:29

2009-06-25 16:45:31

Hibernate

2020-09-14 07:35:40

Redis命令框架

2020-09-14 15:30:23

開發(fā)技能代碼

2019-09-18 20:46:57

容器生產環(huán)境數(shù)據(jù)中心

2023-11-14 17:40:32

2022-05-26 09:00:00

網站抓取Lightrun開發(fā)

2012-02-07 09:56:06

無代理防毒產品

2009-04-24 10:49:57

Oracle性能優(yōu)化錯誤

2011-05-20 10:05:13

Oracle性能優(yōu)化

2010-09-08 15:19:46

生產環(huán)境性能測試風險

2024-08-14 14:20:00

2021-03-10 07:20:42

Redis命令數(shù)據(jù)

2010-10-29 16:41:12

Oracle模糊查詢
點贊
收藏

51CTO技術棧公眾號