偷偷摘套内射激情视频,久久精品99国产国产精,中文字幕无线乱码人妻,中文在线中文a,性爽19p

淺談如何將NoSQL引入現(xiàn)有架構(gòu)系統(tǒng)

數(shù)據(jù)庫 其他數(shù)據(jù)庫
對于NoSQL大家不算陌生,但是如何在我們現(xiàn)有的系統(tǒng)架構(gòu)中該如何引入NoSQL是大家常見的問題。本文將明確引入的NoSQL數(shù)據(jù)庫帶給系統(tǒng)的作用,它能解決什么問題,以及可能帶來的新的問題。

經(jīng)常有朋友遇到困惑,看到NoSQL的介紹,覺得很好,但是卻不知道如何正式用到自己的項(xiàng)目中。很大的原因就是思維固定在MySQL中了,他們問得最多的問題就是用了NoSQL,我如何做關(guān)系查詢。那么接下來,我們看下怎么樣在我們的系統(tǒng)中使用NoSQL。

怎么樣把NoSQL引入到我們的系統(tǒng)架構(gòu)設(shè)計中,需要根據(jù)我們系統(tǒng)的業(yè)務(wù)場景來分析,什么樣類型的數(shù)據(jù)適合存儲在NoSQL數(shù)據(jù)庫中,什么樣類型的數(shù)據(jù)必須使用關(guān)系數(shù)據(jù)庫存儲。明確引入的NoSQL數(shù)據(jù)庫帶給系統(tǒng)的作用,它能解決什么問題,以及可能帶來的新的問題。下面我們分析幾種常見的NoSQL架構(gòu)。

(一)NoSQL作為鏡像

不改變原有的以MySQL作為存儲的架構(gòu),使用NoSQL作為輔助鏡像存儲,用NoSQL的優(yōu)勢輔助提升性能。

圖 1 -NoSQL為鏡像(代碼完成模式 )

  1. //寫入數(shù)據(jù)的示例偽代碼 //data為我們要存儲的數(shù)據(jù)對象 data.title=”title”;   
  2. data.name=”name”;  
  3.  data.time=”2009-12-01 10:10:01”;   
  4. data.from=”1”;   
  5. id=DB.Insert(data);//寫入MySQL數(shù)據(jù)庫   
  6. NoSQL.Add(id,data);//以寫入MySQL產(chǎn)生的自增id為主鍵寫入NoSQL數(shù)據(jù)庫 

如果有數(shù)據(jù)一致性要求,可以像如下的方式使用

  1. //寫入數(shù)據(jù)的示例偽代碼 //data為我們要存儲的數(shù)據(jù)對象 
  2. bool status=false;   
  3. DB.startTransaction();//開始事務(wù)   
  4. id=DB.Insert(data);//寫入MySQL數(shù)據(jù)庫   
  5. if(id>0){       
  6. status=NoSQL.Add(id,data);//以寫入MySQL產(chǎn)生的自增id為主鍵寫入NoSQL數(shù)據(jù)庫 }   
  7. if(id>0 && status==true){       
  8. DB.commit();//提交事務(wù) }else{       
  9. DB.rollback();//不成功,進(jìn)行回滾 } 

上面的代碼看起來可能覺得有點(diǎn)麻煩,但是只需要在DB類或者ORM層做一個統(tǒng)一的封裝,就能實(shí)現(xiàn)重用了,其他代碼都不用做任何的修改。

這種架構(gòu)在原有基于MySQL數(shù)據(jù)庫的架構(gòu)上增加了一層輔助的NoSQL存儲,代碼量不大,技術(shù)難度小,卻在可擴(kuò)展性和性能上起到了非常大的作用。只需要程序在寫入MySQL數(shù)據(jù)庫后,同時寫入到NoSQL數(shù)據(jù)庫,讓MySQL和NoSQL擁有相同的鏡像數(shù)據(jù),在某些可以根據(jù)主鍵查詢的地方,使用高效的NoSQL數(shù)據(jù)庫查詢,這樣就節(jié)省了MySQL的查詢,用NoSQL的高性能來抵擋這些查詢。

圖 2 -NoSQL為鏡像(同步模式)

這種不通過程序代碼,而是通過MySQL把數(shù)據(jù)同步到NoSQL中,這種模式是上面一種的變體,是一種對寫入透明但是具有更高技術(shù)難度一種模式。這種模式適用于現(xiàn)有的比較復(fù)雜的老系統(tǒng),通過修改代碼不易實(shí)現(xiàn),可能引起新的問題。同時也適用于需要把數(shù)據(jù)同步到多種類型的存儲中。

MySQL到NoSQL同步的實(shí)現(xiàn)可以使用MySQL UDF函數(shù),MySQL binlog的解析來實(shí)現(xiàn)??梢岳矛F(xiàn)有的開源項(xiàng)目來實(shí)現(xiàn),比如:

MySQL memcached UDFs:從通過UDF操作Memcached協(xié)議。

國內(nèi)張宴開源的mysql-udf-http:通過UDF操作http協(xié)議。

有了這兩個MySQL UDF函數(shù)庫,我們就能通過MySQL透明的處理Memcached或者Http協(xié)議,這樣只要有兼容Memcached或者Http協(xié)議的NoSQL數(shù)據(jù)庫,那么我們就能通過MySQL去操作以進(jìn)行同步數(shù)據(jù)。再結(jié)合lib_mysqludf_json,通過UDF和MySQL觸發(fā)器功能的結(jié)合,就可以實(shí)現(xiàn)數(shù)據(jù)的自動同步。

(二)MySQL和NoSQL組合

MySQL中只存儲需要查詢的小字段,NoSQL存儲所有數(shù)據(jù)。

圖 3 -MySQL和NoSQL組合

  1. //寫入數(shù)據(jù)的示例偽代碼   
  2. //data為我們要存儲的數(shù)據(jù)對象   
  3. data.title=”title”; data.name=”name”;   
  4. data.time=”2009-12-01 10:10:01”;  
  5. data.from=”1”;  
  6. bool status=false; DB.startTransaction();//開始事務(wù)   
  7. id=DB.Insert(“INSERT INTO table (from
  8. VALUES(data.from)”);//寫入MySQL數(shù)據(jù)庫,只寫from需要where查詢的字段 
  9. if(id>0){       
  10. status=NoSQL.Add(id,data);//以寫入MySQL產(chǎn)生的自增id為主鍵寫入NoSQL數(shù)據(jù)庫 }   
  11. if(id>0 && status==true){       
  12. DB.commit();//提交事務(wù) }else{       
  13. DB.rollback();//不成功,進(jìn)行回滾 } 

把需要查詢的字段,一般都是數(shù)字,時間等類型的小字段存儲于MySQL中,根據(jù)查詢建立相應(yīng)的索引,其他不需要的字段,包括大文本字段都存儲在NoSQL中。在查詢的時候,我們先從MySQL中查詢出數(shù)據(jù)的主鍵,然后從NoSQL中直接取出對應(yīng)的數(shù)據(jù)即可。

這種架構(gòu)模式把MySQL和NoSQL的作用進(jìn)行了融合,各司其職,讓MySQL專門負(fù)責(zé)處理擅長的關(guān)系存儲,NoSQL作為數(shù)據(jù)的存儲。它有以下優(yōu)點(diǎn):

節(jié)省MySQL的IO開銷。由于MySQL只存儲需要查詢的小字段,不再負(fù)責(zé)存儲大文本字段,這樣就可以節(jié)省MySQL存儲的空間開銷,從而節(jié)省MySQL的磁盤IO。我們曾經(jīng)通過這種優(yōu)化,把MySQL一個40G的表縮減到幾百M(fèi)。

提高M(jìn)ySQl Query Cache緩存命中率。我們知道query cache緩存失效是表級的,在MySQL表一旦被更新就會失效,經(jīng)過這種字段的分離,更新的字段如果不是存儲在MySQL中,那么對query cache就沒有任何影響。而NoSQL的Cache往往都是行級別的,只對更新的記錄的緩存失效。

提升MySQL主從同步效率。由于MySQL存儲空間的減小,同步的數(shù)據(jù)記錄也減小了,而部分?jǐn)?shù)據(jù)的更新落在NoSQL而不是MySQL,這樣也減少了MySQL數(shù)據(jù)需要同步的次數(shù)。

提高M(jìn)ySQL數(shù)據(jù)備份和恢復(fù)的速度。由于MySQL數(shù)據(jù)庫存儲的數(shù)據(jù)的減小,很容易看到數(shù)據(jù)備份和恢復(fù)的速度也將極大的提高。

比以前更容易擴(kuò)展。NoSQL天生就容易擴(kuò)展。經(jīng)過這種優(yōu)化,MySQL性能也得到提高。

比如手機(jī)鳳凰網(wǎng)就是這種架構(gòu) http://www.cnblogs.com/sunli/archive/2010/12/20/imcp.html

總結(jié)

以NoSQL為輔的架構(gòu)還是以MySQL架構(gòu)的思想為中心,只是在以前的架構(gòu)上輔助增加了NoSQL來提高其性能和可擴(kuò)展性。這種架構(gòu)實(shí)現(xiàn)起來比較容易,卻能取得不錯的效果。如果正想在項(xiàng)目中引入NoSQL,或者你的以MySQL架構(gòu)的系統(tǒng)目前正出現(xiàn)相關(guān)的瓶頸,希望本文可以為你帶來幫助。

關(guān)于作者

孫立,目前在鳳凰網(wǎng)負(fù)責(zé)底層組的研發(fā)工作。曾就職于搜狐和ku6。多年互聯(lián)網(wǎng)從業(yè)經(jīng)驗(yàn)和程序開發(fā),對分布式搜索引擎的開發(fā),高并發(fā),大數(shù)據(jù)量網(wǎng)站系統(tǒng)架構(gòu)優(yōu)化,高可用性,可伸縮性,分布式系統(tǒng)緩存,數(shù)據(jù)庫分表分庫(sharding)等有豐富的經(jīng)驗(yàn),并且對運(yùn)維監(jiān)控和自動化運(yùn)維控制有經(jīng)驗(yàn)。開源項(xiàng)目phplock,phpbuffer的作者。近期開發(fā)了一個NOSQL數(shù)據(jù)庫存儲INetDB,是NoSQL數(shù)據(jù)庫愛好者。他的新浪微博是:http://t.sina.com.cn/sunli1223

原文鏈接:http://www.cnblogs.com/sunli/archive/2011/02/21/NoSQL_architecture_1.html

【編輯推薦】

  1. NoSQL數(shù)據(jù)庫Apache CouchDB 0.11.0發(fā)布
  2. 關(guān)于NoSQL數(shù)據(jù)庫你應(yīng)該知道的10件事
  3. 細(xì)數(shù)那些運(yùn)行在微軟平臺上的NoSQL數(shù)據(jù)庫
  4. 用NoSQL來替代MySQL在Digg中的原因
  5. 詳解NoSQL數(shù)據(jù)庫使用實(shí)例
責(zé)任編輯:彭凡 來源: 博客園
相關(guān)推薦

2022-05-05 11:39:07

智能技術(shù)智能建筑

2011-05-18 14:51:43

2021-01-28 09:00:00

SQL數(shù)據(jù)庫NoSQL

2009-04-14 09:24:40

OracleXML導(dǎo)出

2009-06-29 17:07:54

EJB部署Jboss

2009-06-15 16:32:00

NetBeans字體設(shè)置

2015-06-23 22:32:59

2011-04-20 16:30:06

UbuntuLiveCD

2022-11-21 07:54:32

安全護(hù)欄應(yīng)用安全程序

2017-07-03 11:00:51

深度學(xué)習(xí)人工智能

2018-02-02 06:03:04

移動運(yùn)營商MEC網(wǎng)絡(luò)邊緣

2021-05-12 08:00:00

深度學(xué)習(xí)人工智能設(shè)備

2024-11-05 09:41:27

2022-11-25 16:27:07

應(yīng)用開發(fā)鴻蒙

2016-08-31 14:16:55

LinuxLVM卷轉(zhuǎn)移

2021-11-24 15:20:04

FreeDOSLinux

2011-09-08 11:22:59

Ubuntu中文系統(tǒng)英文系統(tǒng)

2022-05-19 10:45:36

軟件開發(fā)技術(shù)

2009-08-26 18:05:25

ViewState持久

2011-03-14 14:59:01

NoSQL
點(diǎn)贊
收藏

51CTO技術(shù)棧公眾號