偷偷摘套内射激情视频,久久精品99国产国产精,中文字幕无线乱码人妻,中文在线中文a,性爽19p

NoSQL架構實踐(一)以NoSQL為輔

數據庫 其他數據庫 數據庫運維
很多朋友看到NoSQL時總會有困惑,覺得很好,但是卻不知道如何正式用到自己的項目中。下文中筆者帶我們看下怎么樣在我們的系統(tǒng)中使用NoSQL。

經常有朋友遇到困惑,看到NoSQL的介紹,覺得很好,但是卻不知道如何正式用到自己的項目中。很大的原因就是思維固定在MySQL中了,他們問得最多的問題就是用了NoSQL,我如何做關系查詢。那么接下來,我們看下怎么樣在我們的系統(tǒng)中使用NoSQL。

怎么樣把NoSQL引入到我們的系統(tǒng)架構設計中,需要根據我們系統(tǒng)的業(yè)務場景來分析,什么樣類型的數據適合存儲在NoSQL數據庫中,什么樣類型的數據必須使用關系數據庫存儲。明確引入的NoSQL數據庫帶給系統(tǒng)的作用,它能解決什么問題,以及可能帶來的新的問題。下面我們分析幾種常見的NoSQL架構。

(一)NoSQL作為鏡像

    不改變原有的以MySQL作為存儲的架構,使用NoSQL作為輔助鏡像存儲,用NoSQL的優(yōu)勢輔助提升性能。

 

圖 1 -NoSQL為鏡像(代碼完成模式 )

  1. //寫入數據的示例偽代碼   
  2. //data為我們要存儲的數據對象   
  3. data.title=”title”;   
  4. data.name=”name”;   
  5. data.time=”2009-12-01 10:10:01”;   
  6. data.from=”1”;   
  7. id=DB.Insert(data);  
  8. //寫入MySQL數據庫   
  9. NoSQL.Add(id,data);  
  10. //以寫入MySQL產生的自增id為主鍵寫入NoSQL數據庫 

如果有數據一致性要求,可以像如下的方式使用

  1. //寫入數據的示例偽代碼   
  2. //data為我們要存儲的數據對象   
  3. bool status=false; DB.startTransaction();  
  4. //開始事務   
  5. id=DB.Insert(data);  
  6. //寫入MySQL數據庫   
  7. if(id>0){  
  8.      status=NoSQL.Add(id,data);  
  9. //以寫入MySQL產生的自增id為主鍵寫入NoSQL數據庫  
  10. }   
  11. if(id>0 && status==true){  
  12.      DB.commit();  
  13. //提交事務  
  14. }else{  
  15.      DB.rollback();  
  16. //不成功,進行回滾  

上面的代碼看起來可能覺得有點麻煩,但是只需要在DB類或者ORM層做一個統(tǒng)一的封裝,就能實現(xiàn)重用了,其他代碼都不用做任何的修改。

這種架構在原有基于MySQL數據庫的架構上增加了一層輔助的NoSQL存儲,代碼量不大,技術難度小,卻在可擴展性和性能上起到了非常大的作用。只需要程序在寫入MySQL數據庫后,同時寫入到NoSQL數據庫,讓MySQL和NoSQL擁有相同的鏡像數據,在某些可以根據主鍵查詢的地方,使用高效的NoSQL數據庫查詢,這樣就節(jié)省了MySQL的查詢,用NoSQL的高性能來抵擋這些查詢。

 

圖 2 -NoSQL為鏡像(同步模式)

這種不通過程序代碼,而是通過MySQL把數據同步到NoSQL中,這種模式是上面一種的變體,是一種對寫入透明但是具有更高技術難度一種模式。這種模式適用于現(xiàn)有的比較復雜的老系統(tǒng),通過修改代碼不易實現(xiàn),可能引起新的問題。同時也適用于需要把數據同步到多種類型的存儲中。

MySQL到NoSQL同步的實現(xiàn)可以使用MySQL UDF函數,MySQL binlog的解析來實現(xiàn)??梢岳矛F(xiàn)有的開源項目來實現(xiàn),比如:


◆MySQL memcached UDFs:從通過UDF操作Memcached協(xié)議。
◆國內張宴開源的mysql-udf-http:通過UDF操作http協(xié)議。

有了這兩個MySQL UDF函數庫,我們就能通過MySQL透明的處理Memcached或者Http協(xié)議,這樣只要有兼容Memcached或者Http協(xié)議的NoSQL數據庫,那么我們就能通過MySQL去操作以進行同步數據。再結合lib_mysqludf_json,通過UDF和MySQL觸發(fā)器功能的結合,就可以實現(xiàn)數據的自動同步。

(二)MySQL和NoSQL組合

MySQL中只存儲需要查詢的小字段,NoSQL存儲所有數據。

 

圖 3 -MySQL和NoSQL組合

  1. //寫入數據的示例偽代碼   
  2. //data為我們要存儲的數據對象   
  3. data.title=”title”;   
  4. data.name=”name”;   
  5. data.time=”2009-12-01 10:10:01”;  
  6. data.from=”1”;  
  7. bool status=false; DB.startTransaction();  
  8. //開始事務   
  9. id=DB.Insert(“INSERT INTO table (fromVALUES(data.from)”);  
  10. //寫入MySQL數據庫,只寫from需要where查詢的字段   
  11. if(id>0){  
  12.      status=NoSQL.Add(id,data);  
  13. //以寫入MySQL產生的自增id為主鍵寫入NoSQL數據庫   
  14. }   
  15. if(id>0 && status==true){  
  16.      DB.commit();  
  17. //提交事務   
  18. }else{  
  19.      DB.rollback();  
  20. //不成功,進行回滾   

把需要查詢的字段,一般都是數字,時間等類型的小字段存儲于MySQL中,根據查詢建立相應的索引,其他不需要的字段,包括大文本字段都存儲在NoSQL中。在查詢的時候,我們先從MySQL中查詢出數據的主鍵,然后從NoSQL中直接取出對應的數據即可。

這種架構模式把MySQL和NoSQL的作用進行了融合,各司其職,讓MySQL專門負責處理擅長的關系存儲,NoSQL作為數據的存儲。它有以下優(yōu)點:


◆節(jié)省MySQL的IO開銷。由于MySQL只存儲需要查詢的小字段,不再負責存儲大文本字段,這樣就可以節(jié)省MySQL存儲的空間開銷,從而節(jié)省MySQL的磁盤IO。我們曾經通過這種優(yōu)化,把MySQL一個40G的表縮減到幾百M。
◆提高MySQl Query Cache緩存命中率。我們知道query cache緩存失效是表級的,在MySQL表一旦被更新就會失效,經過這種字段的分離,更新的字段如果不是存儲在MySQL中,那么對query cache就沒有任何影響。而NoSQL的Cache往往都是行級別的,只對更新的記錄的緩存失效。
◆提升MySQL主從同步效率。由于MySQL存儲空間的減小,同步的數據記錄也減小了,而部分數據的更新落在NoSQL而不是MySQL,這樣也減少了MySQL數據需要同步的次數。
◆提高MySQL數據備份和恢復的速度。由于MySQL數據庫存儲的數據的減小,很容易看到數據備份和恢復的速度也將極大的提高。
◆比以前更容易擴展。NoSQL天生就容易擴展。經過這種優(yōu)化,MySQL性能也得到提高。

總結

以NoSQL為輔的架構還是以MySQL架構的思想為中心,只是在以前的架構上輔助增加了NoSQL來提高其性能和可擴展性。這種架構實現(xiàn)起來比較容易,卻能取得不錯的效果。如果正想在項目中引入NoSQL,或者你的以MySQL架構的系統(tǒng)目前正出現(xiàn)相關的瓶頸,希望本文可以為你帶來幫助。

 

【編輯推薦】

  1. NoSQL理論研究:內存是新的硬盤,硬盤是新的磁帶
  2. 關于NoSQL數據庫你應該知道的10件事
  3. NoSQL就業(yè)形勢分析:Cassandra和MongoDB***
  4. 用NoSQL來替代MySQL在Digg中的原因
  5. 詳解NoSQL數據庫使用實例

 

責任編輯:艾婧 來源: InfoQ中文站
相關推薦

2011-03-14 15:56:37

NoSQL

2011-03-31 14:02:59

NoSQL緩存架構

2022-08-21 21:28:32

數據庫實踐

2011-05-13 09:46:20

MySQLNoSQL

2011-08-18 14:09:35

NoSQL

2012-02-16 09:20:19

NoSQL

2015-02-04 13:07:39

DTCC

2012-05-15 10:28:29

NoSQL數據庫建模技術

2021-02-03 11:44:15

NoSQL關系數據庫

2016-12-04 16:36:18

NoSQL數據庫大數據

2012-02-01 16:26:04

NoSQLMoreSQL數據庫

2011-10-20 13:37:46

OracleNoSQL數據庫

2011-02-22 08:49:38

NoSQL

2023-07-06 00:41:03

SQLNoSQL數據庫

2015-04-16 15:42:21

關系型數據庫NoSQL

2011-03-24 17:09:08

TrinityNoSQL

2024-02-02 10:51:53

2014-08-01 09:12:52

NoSQL

2011-05-16 09:27:10

MySQLNoSQL

2012-05-15 11:03:22

NoSQL數據建模
點贊
收藏

51CTO技術棧公眾號