記得還是工作的***年，在中關(guān)村打工的我接到一個(gè)數(shù)百塊540MB硬盤的訂單，前往用戶(當(dāng)時(shí)的某PC廠商)生產(chǎn)線配合加班檢測(cè)硬盤… 近20年過(guò)去了，從40MB到TB級(jí)別，從IDE、SCSI到SATA、SAS，我一直關(guān)注著硬盤領(lǐng)域的技術(shù)發(fā)展。希望這兩篇分享內(nèi)容能夠?qū)Υ蠹矣兴鶐椭?

 

　　玩存儲(chǔ)的朋友都知道，SSD固態(tài)硬盤由于使用閃存做為介質(zhì)，不會(huì)像傳統(tǒng)HDD硬盤那樣出現(xiàn)機(jī)械故障。另一方面，閃存有P/E cycle(編程/擦除周期)的限制，也就是存在著寫壽命，SLC/MLC/TLC的擦寫次數(shù)有著明顯的差別。那么機(jī)械硬盤有沒(méi)有讀寫壽命的問(wèn)題呢?我覺(jué)得可能不是所有人都了解或者關(guān)注過(guò)這個(gè)問(wèn)題。

　　認(rèn)識(shí)不同硬盤之間工作負(fù)載和可靠性的差別，有助于我們選擇更合適的產(chǎn)品。

一款5張碟片的Nearline企業(yè)級(jí)硬盤，目前非充氦的極限密度是6張。后文中我們還會(huì)談到碟片數(shù)量與功耗、工作溫度范圍之間的關(guān)系。

 

　　橫向?qū)Ρ龋哼@么多種硬盤你能辨清嗎?目前硬盤行業(yè)總體營(yíng)收受SSD沖擊開(kāi)始出現(xiàn)一定下滑，但若干年內(nèi)仍將保持可觀的需求，特別是大容量型號(hào)的性價(jià)比優(yōu)勢(shì)。而且這一市場(chǎng)已經(jīng)由于成熟而細(xì)分，以希捷為例，僅3.5寸7200轉(zhuǎn)及以下硬盤就衍生出以下型號(hào)等?！　?/p>

注：以上規(guī)格沒(méi)有全部核對(duì)官方文檔，僅供參考，后面還會(huì)補(bǔ)充一個(gè)我自己整理的表格。其中紅框標(biāo)出的做為重點(diǎn)講解，籃框部分代表有一定疑問(wèn)的參數(shù)。

 

　　上表來(lái)自我?guī)讉€(gè)月前看到的一篇國(guó)外文章，其中總結(jié)的希捷硬盤型號(hào)和規(guī)格比較全。從左到右，Archive是SMR疊瓦式磁記錄的歸檔硬盤;Desktop為普通臺(tái)式機(jī)硬盤;NAS HDD適用于小型文件服務(wù)器/網(wǎng)絡(luò)存儲(chǔ);Video 3.5/2.5 HDD針對(duì)消費(fèi)類DVR視頻應(yīng)用優(yōu)化;Surveillance專門用于視頻監(jiān)控;ENAS(Enterprise NAS)適合硬盤數(shù)較多、高端一些的網(wǎng)絡(luò)存儲(chǔ)設(shè)備;ECAP(Enterprise Capacity，原Constellation ES系列)就是傳統(tǒng)的Nearline硬盤。

　　除此之外，企業(yè)級(jí)硬盤市場(chǎng)的另一家主力廠商WD-HGST也擁有比較多的產(chǎn)品線，其特點(diǎn)是數(shù)據(jù)中心產(chǎn)品以HGST為主，像視頻/流媒體、NAS應(yīng)用這些在傳統(tǒng)WD品牌下多些。本文先用希捷進(jìn)行對(duì)比分析?！　?/p>

上表繼承了前一個(gè)表格中的部分?jǐn)?shù)據(jù)、引用官方`資料，也有經(jīng)過(guò)我計(jì)算得出的。標(biāo)紅色表示該指標(biāo)優(yōu)秀。

 

　　在這個(gè)表里我增加了2個(gè)對(duì)比的產(chǎn)品系列：Constellation CS(云盤)和高轉(zhuǎn)速10K SAS，其中云盤現(xiàn)在官網(wǎng)上看不到，應(yīng)該只針對(duì)互聯(lián)網(wǎng)等大客戶出貨;萬(wàn)轉(zhuǎn)硬盤的規(guī)格用于參照。

　　Constellation CS“云盤”及其衍生出的低轉(zhuǎn)速版本Terascale，其MTBF和AFR都與桌面硬盤接近。這一點(diǎn)正好印證了本文開(kāi)頭案例中提出的疑問(wèn)。

　　如果脫離用戶需求，談任何參數(shù)都沒(méi)有意義，下面先列舉幾個(gè)我遇到的實(shí)際案例。

　　案例1：備份數(shù)據(jù)量與硬盤選型去年的一天，有位互聯(lián)網(wǎng)公司的朋友向我咨詢了一個(gè)問(wèn)題：他們目前服務(wù)器大部分都是戴爾PowerEdge R510和R720xd，現(xiàn)在需要采購(gòu)硬盤用于數(shù)據(jù)備份。每塊硬盤平均每天會(huì)寫入不到1TB的數(shù)據(jù)。這種場(chǎng)景下，每天都會(huì)有大量的數(shù)據(jù)寫入、讀取，對(duì)盤的壽命影響大嗎?

　　由于是企業(yè)級(jí)應(yīng)用，按照365天來(lái)計(jì)算，硬盤的全年的讀寫負(fù)載大約在360TB以內(nèi)，我認(rèn)為原廠配件中的Nearline硬盤就比較合適。那么這一結(jié)論是怎么得出呢?

　　案例2：視頻監(jiān)控存儲(chǔ)可以用“云盤”嗎?

　　某公司接到用戶一個(gè)視頻監(jiān)控存儲(chǔ)的項(xiàng)目，一開(kāi)始按照Nearline SATA企業(yè)級(jí)硬盤計(jì)算了成本，發(fā)現(xiàn)價(jià)格與競(jìng)爭(zhēng)對(duì)手相比不占優(yōu)勢(shì)。由于對(duì)方使用了價(jià)格相對(duì)較低的監(jiān)控專用硬盤，該公司于是考慮是否可以采用也屬于企業(yè)級(jí)但成本更低的“云盤”(即希捷Constellation CS)?

　　暫時(shí)先擱置這個(gè)問(wèn)題，閱讀完本系列文章相信您會(huì)有比較全面的理解，再來(lái)看看看我遇到的另一個(gè)案例。

　　案例3：便宜的代價(jià)——云盤故障率我曾經(jīng)聽(tīng)說(shuō)國(guó)內(nèi)某互聯(lián)網(wǎng)公司使用過(guò)一批“云盤”，但后來(lái)遇到故障率較高。“云盤”的價(jià)格僅比桌面硬盤稍高，在多種細(xì)分的低轉(zhuǎn)速(7200rpm及以下)企業(yè)級(jí)硬盤中具有成本優(yōu)勢(shì)。那么，它的故障率在什么范圍內(nèi)是正常的?

　　企業(yè)級(jí)vs.桌面：性能、可靠性差距

引用自一份來(lái)自Intel的文檔《Enterprise-class versus Desktopclass Hard Drives》，2008年4月

 

　　上圖是一份比較早的對(duì)比資料，不過(guò)這些年來(lái)機(jī)械硬盤技術(shù)發(fā)展不算快，所以仍有一定參考價(jià)值。其中“Enterprise”在這里代指15K高轉(zhuǎn)速企業(yè)級(jí)硬盤;而7200轉(zhuǎn)企業(yè)級(jí)硬盤衍生自“Desktop”，所以性能方面指標(biāo)是接近的。

　　***項(xiàng)，硬盤的延時(shí)和尋道時(shí)間=平均尋道時(shí)間+平均旋轉(zhuǎn)等待，15K由于轉(zhuǎn)速高、磁頭臂移動(dòng)速度快而大幅領(lǐng)先;而這一項(xiàng)又直接影響到后面的“每秒典型I/Os”(無(wú)旋轉(zhuǎn)振動(dòng)IOPS)。當(dāng)然這里15K 硬盤的319不完全是機(jī)械結(jié)構(gòu)的功勞，還有上面命令排隊(duì)(CQ)的效果——左邊由于SCSI/SAS協(xié)議能夠完整支持，而右邊的ATA支持有限在高并發(fā)情況下提升少一些(注：尋道速度較快的7200轉(zhuǎn)Nearline硬盤這一數(shù)值應(yīng)該比77要高)。

　　1振動(dòng)對(duì)硬盤的影響及防范接下來(lái)著是抗旋轉(zhuǎn)振動(dòng)能力。15K硬盤能夠達(dá)到21 rad/sec/sec，這里的Radian應(yīng)該是一種弧度單位，我不是這方面的專家，就不不展開(kāi)討論了。而桌面硬盤該指標(biāo)只有5-12(根據(jù)本文后面列出的數(shù)字，7200轉(zhuǎn)企業(yè)級(jí)硬盤也在這一范圍內(nèi))。

　　正如有位專家所說(shuō)的，如果把硬盤固定在一個(gè)足夠穩(wěn)定的基座上，它就不會(huì)受到自身以及外界產(chǎn)生振動(dòng)的影響，能夠發(fā)揮出***性能和壽命。但真實(shí)環(huán)境往往不是如此，在存儲(chǔ)服務(wù)器/磁盤陣列機(jī)箱中通常會(huì)有多塊硬盤，同時(shí)工作時(shí)難免會(huì)產(chǎn)生共振現(xiàn)象。這里面涉及的因素主要有硬盤的轉(zhuǎn)速、數(shù)量以及箱體結(jié)構(gòu)設(shè)計(jì)。

　　許多朋友應(yīng)該都知道，磁盤陣列的空箱重量往往要比同等尺寸的服務(wù)器大不少，采用較厚的鋼板能夠“吸收”一部分振動(dòng)。盡管不只一家廠商號(hào)稱可以混插不同轉(zhuǎn)速的硬盤，但實(shí)際上都不推薦這樣做。

　　超標(biāo)的振動(dòng)會(huì)影響磁頭定位，導(dǎo)致硬盤性能下降乃至壽命降低?？剐D(zhuǎn)振動(dòng)大致就是伺服電路根據(jù)傳感器信息對(duì)振動(dòng)進(jìn)行相應(yīng)的補(bǔ)償，10K、15K高轉(zhuǎn)速硬盤由于自身產(chǎn)生的振動(dòng)大一些，因此在設(shè)計(jì)上“耐受力”也更強(qiáng)。如上表，在旋轉(zhuǎn)振動(dòng)20 rad/sec/sec的條件下，15K硬盤IOPS只有少量下降;而桌面(7200轉(zhuǎn))硬盤的性能則下降了10倍以上，可見(jiàn)磁頭定位困難的程度。

　　下面一項(xiàng)“雙工模式”， SAS支持全雙工，SATA是半雙工，這就在于SCSI和ATA協(xié)議之間的差別。SAS硬盤提供雙端口可同時(shí)連接到2個(gè)控制器，實(shí)現(xiàn)故障切換。關(guān)于可變扇區(qū)大小，我們?cè)诤笪闹袝?huì)有討論。

　　2可靠性前提條件和NL硬盤的由來(lái)再來(lái)看看可靠性。當(dāng)年的高轉(zhuǎn)速企業(yè)級(jí)硬盤的MTBF(平均無(wú)故障時(shí)間)為120萬(wàn)小時(shí)左右，現(xiàn)在由于工藝進(jìn)一步成熟，設(shè)計(jì)/制造標(biāo)準(zhǔn)普遍已達(dá)到200萬(wàn)小時(shí)。而桌面硬盤還停留在70萬(wàn)小時(shí)左右，沒(méi)有動(dòng)力也不需要為此而增加成本。

　　這里容易被忽視的還有MTBF的先決條件。高轉(zhuǎn)速企業(yè)級(jí)硬盤是在45℃的環(huán)境溫度下，7x24小時(shí)100%工作負(fù)載;而桌面硬盤則是25℃環(huán)境，5x8小時(shí)10-20%工作負(fù)載。　　

上圖截自《Seagate Enterprise Capacity 3.5 HDD v5 Serial ATA Product Manual》

 

　　同樣為7200轉(zhuǎn)速，但定位企業(yè)級(jí)應(yīng)用的Nearline(近線)硬盤比桌面硬盤的可靠性要強(qiáng)不少。首先是MTBF和AFR(平均故障率)，目前Nearline盤大都能達(dá)到140-200萬(wàn)小時(shí)MTBF，并且這個(gè)數(shù)字是在40℃、7x24小時(shí)全年連續(xù)開(kāi)機(jī)條件下得出。

　　注：我們會(huì)在后文中介紹MTBF與AFR的換算關(guān)系。

這張照片來(lái)自2004年我做服務(wù)器測(cè)試工作時(shí)，制作的MaxLine Plus II近線硬盤技術(shù)規(guī)格書，7200轉(zhuǎn)ATA接口250GB在當(dāng)年算大容量了，10年間硬盤的存儲(chǔ)密度提升了近20倍。當(dāng)時(shí)100萬(wàn)小時(shí)的MTBF已經(jīng)明顯高于桌面硬盤(同期大約60萬(wàn)小時(shí))。照片效果不夠好請(qǐng)大家包涵：)

 

　　記得***家推出Nearline硬盤的，是Maxtor(邁拓)的MaxLine系列。當(dāng)時(shí)根據(jù)經(jīng)驗(yàn)提出近線硬盤建議不超過(guò)20%工作負(fù)載的說(shuō)法，超過(guò)這一水平故障率會(huì)超標(biāo)。經(jīng)過(guò)十幾年的發(fā)展，硬盤廠商們經(jīng)過(guò)大量分析統(tǒng)計(jì)工作，認(rèn)為讀寫數(shù)據(jù)量是個(gè)更合適，并且容易量化的指標(biāo)。根據(jù)本文開(kāi)頭那兩個(gè)表格，目前業(yè)界統(tǒng)一遵從Nearline硬盤工作負(fù)載為550TB/年，如果明顯超出則故障率會(huì)上升。

　　小知識(shí)：硬盤讀寫負(fù)載與SSD擦寫壽命關(guān)于這一點(diǎn)，除了硬盤是個(gè)建議值而SSD存在“硬指標(biāo)”之外，一方面SSD只是擦寫次數(shù)有限而不限制讀，硬盤則不分讀寫都要考慮;另一方面，SSD壽命源自每個(gè)閃存單元的特點(diǎn)，在其它條件同等情況下其可寫入數(shù)據(jù)量與容量成正比;而硬盤卻不是容量越大這方面就越好，因?yàn)榇蓬^的老化與它讀寫數(shù)據(jù)量的相關(guān)性更強(qiáng)。

　　當(dāng)然，10K/15K高轉(zhuǎn)速硬盤在質(zhì)保期內(nèi)沒(méi)有這些限制，所以說(shuō)它們的等級(jí)不同，單盤容量、單位容量的價(jià)格也有著顯著差距。

　　3環(huán)境規(guī)格——溫濕度范圍

上圖引用自《HGST Hard Disk Drive Specification - Ultrastar 7K6000》

 

　　這里引用一份HGST硬盤資料中的環(huán)境規(guī)格。其中有兩個(gè)類似梯形(右邊不是直線)嵌套在一起，大的范圍是硬盤的非操作溫濕度范圍，而里面的小塊區(qū)域則是工作溫濕度?？梢钥闯鲈?-31℃之間可以支持90%相對(duì)濕度，而到60℃時(shí)只能支持到10%的濕度了。

　　只有少數(shù)的低轉(zhuǎn)速(10K以下)企業(yè)級(jí)硬盤帶有濕度傳感器，本文中包括歸檔、ENAS和Enterprise Capacity三個(gè)針對(duì)數(shù)據(jù)中心的系列。

　　4MTBF不是虛標(biāo)：換算出年均故障率可用性一項(xiàng)，除了Video 3.5是AFR數(shù)值之外，其它列出的都是MTBF。利用MTBF來(lái)計(jì)算AFR的公式如下：

　　年平均故障率AFR=1 / (MTBF / 365 / 24)

　　MTBF看上去很高，前面表格中最長(zhǎng)的200萬(wàn)小時(shí)(8TB型號(hào)，目前希捷6TB及以下Nearline硬盤為140萬(wàn)小時(shí))折合228年，最短的75萬(wàn)小時(shí)也有85年，其實(shí)它們的設(shè)計(jì)壽命都沒(méi)有那么長(zhǎng)(通常為8-10年)，從溫徹斯特硬盤發(fā)明到現(xiàn)在也沒(méi)有這么多年。這些可靠性不是針對(duì)單一硬盤，而是根據(jù)質(zhì)保期內(nèi)大量樣本計(jì)算和統(tǒng)計(jì)出來(lái)的。記得十多年前，我當(dāng)時(shí)就職的公司有一位孫老師，她主持的10萬(wàn)小時(shí)PC MTBF測(cè)試就是拿若干套設(shè)備集中進(jìn)行的。根據(jù)上面公式，Enterprise Capacity的AFR計(jì)算得出0.44%，也就是說(shuō)100塊盤每年平均損壞0.44塊，如果10,000塊盤就是44塊。

　　讀寫負(fù)載、使用率和支持盤位數(shù)量，桌面硬盤都是***，表格中除此之外都支持7x24連續(xù)開(kāi)機(jī)，并且桌面硬盤官方只建議部署1-2塊。也就是說(shuō)它沒(méi)有抗旋轉(zhuǎn)振動(dòng)方面的優(yōu)化，如果您實(shí)際使用3塊盤以上做RAID，可能會(huì)遇到性能降低、壽命下降的問(wèn)題。

　　Enterprise Capacity(ES)的年讀寫負(fù)載在這里***為550TB，ENAS為300TB，余下4款都是180TB——也比桌面硬盤的55TB高不少。或許這些數(shù)字還不夠直觀，后面我們還會(huì)用它們簡(jiǎn)單計(jì)算出平均每天、每秒的讀寫負(fù)載。

　　至于一個(gè)機(jī)箱中支持的硬盤數(shù)量，與另外兩項(xiàng)規(guī)格——旋轉(zhuǎn)振動(dòng)傳感器和抗旋轉(zhuǎn)振動(dòng)容忍度直接相關(guān)。比如沒(méi)有RAFF Sensor的桌面、NAS和Video 3.5硬盤支持的系統(tǒng)規(guī)模都較小;監(jiān)控和歸檔硬盤具備RAFF Sensor且抗振指標(biāo)為5 rad/sec/sec，根據(jù)***資料都能支持8塊以上的配置;不過(guò)它們?cè)诟哒駝?dòng)環(huán)境下的性能表現(xiàn)可能不如12.5 rad/sec/sec的ENAS和Enterprise Capacity。后文中我還會(huì)列出更多的引證資料。

　　關(guān)于硬盤轉(zhuǎn)速，兩款7200轉(zhuǎn)/分鐘的性能相對(duì)較好;希捷目前主流的桌面硬盤應(yīng)該都是7200轉(zhuǎn)，早期低轉(zhuǎn)速的Barracuda LP應(yīng)該已經(jīng)退出市場(chǎng);Video 3.5由原來(lái)的Pipeline HD發(fā)展而來(lái)，一直是5900轉(zhuǎn);監(jiān)控盤由7200轉(zhuǎn)的SV35發(fā)展而來(lái)，不過(guò)現(xiàn)在4TB及以下應(yīng)該都降到5900轉(zhuǎn)，5-8TB型號(hào)為7200轉(zhuǎn)。