亞馬遜徹底去掉 Oracle 數(shù)據(jù)庫:遷移完成
2019 年 10 月 15 日,AWS 的首席布道者 Jeff Barr 在官方博客發(fā)布標題為《遷移完成–亞馬遜的消費者業(yè)務部關閉最后的 Oracle 數(shù)據(jù)庫》的文章,以下內容由云頭條編譯發(fā)布?! ?/p>
在亞馬遜工作的 17 年間,我發(fā)現(xiàn)工程團隊的同事們永遠不滿足于良好的現(xiàn)狀。他們會定期評估每個內部系統(tǒng),盡可能地提高系統(tǒng)的可擴展性,高效性,高性能和安全性。一旦發(fā)現(xiàn)改進的途徑,他們將竭盡畢生所學,徹底革新現(xiàn)有的架構和實現(xiàn)方法(implementation),有時甚至打散現(xiàn)有系統(tǒng);必要時,從頭再來。
我此刻向您介紹的內部數(shù)據(jù)庫遷移工作就是上述觀點的例證,這項工作經(jīng)過幾年的努力剛剛結束。多年來,我們意識到一個問題,即我們花太多時間管理和擴展數(shù)千個陳舊的 Oracle 數(shù)據(jù)庫。公司的數(shù)據(jù)庫管理員(DBA)未將精力聚焦在高價值的差異化工作,而是在事務速率不斷攀升、存儲數(shù)據(jù)總量節(jié)節(jié)增長的情況下,疲于保持系統(tǒng)的流暢運轉。他們的大量時間都用于處理復雜且效率低下的硬件配置、許可證管理和許多其他本可以由現(xiàn)代化的托管數(shù)據(jù)庫服務來處理的問題。
亞馬遜消費者業(yè)務部門的 100 多個團隊參與這項遷移工作,包括 Alexa,Amazon Prime,Amazon Prime Video,Amazon Fresh,Kindle,Amazon Music,Audible,Shopbop,Twitch 和 Zappos 等直面客戶的團隊,以及 AdTech,Amazon Fulfillment Technology,消費者付款,客戶退貨,Catalog Systems,交付體驗,數(shù)字設備,外部付款,財務,InfoSec,市場, 訂購和零售系統(tǒng).
遷移完成
我高興地宣布,數(shù)據(jù)庫遷移工作現(xiàn)已完成。亞馬遜的消費者業(yè)務部門剛剛關閉了最后一些 Oracle 數(shù)據(jù)庫(某些第三方應用程序已與 Oracle 緊密綁定,因此尚未遷移)。
我們將存儲在近7,500 個 Oracle 數(shù)據(jù)庫中的 75 PB 內部數(shù)據(jù)遷移到多項 AWS 數(shù)據(jù)庫服務,包括 Amazon DynamoDB,Amazon Aurora,Amazon RelationalDatabase Service(RDS)和 Amazon Redshift。遷移過程無需停機,覆蓋面廣泛,涵蓋我們全部的專有系統(tǒng),如復雜采購,目錄管理,訂單執(zhí)行,會計和視頻流工作負載。我們仔細分析了成本和性能,并得出如下的結論:
- 降低成本:基于我們的應用規(guī)模以及所享受的折扣率,我們將數(shù)據(jù)庫成本降低了 60% 以上。從 Oracle 切換到 AWS 可使周期客戶報告的成本節(jié)省 90%。
- 提升性能:面向消費者的應用程序延遲降低 40%。
- 管理費用:切換到托管服務可將數(shù)據(jù)庫管理支出減少 70%。
數(shù)據(jù)遷移使內部團隊自由選擇最契合其需求的專用 AWS 數(shù)據(jù)庫服務,使他們更好地控制預算和成本模型。低延遲服務已遷移到 DynamoDB 和其他高度可擴展的非關系型數(shù)據(jù)庫,例如 Amazon ElastiCache。具有數(shù)據(jù)高度一致性要求的事務型關系工作負載已移至 Aurora 和 RDS;分析型工作負載已遷移到我們的云數(shù)據(jù)倉庫 Redshift。
我們見證了 Oracle 數(shù)據(jù)庫的最終關閉,并進行了簡短的慶祝:
DBA 職業(yè)道路正如我之前所提到的,DBA 們曾經(jīng)花費大量時間管理和擴展陳舊的 Oracle 數(shù)據(jù)庫。遷移后,DBA 解放了雙手,他們更專注于執(zhí)行性能監(jiān)視和查詢優(yōu)化,所有這些都是為了提供更好的客戶體驗。
作為遷移工作的一項任務,我們努力為 Oracle 的 DBA 創(chuàng)造新的職業(yè)道路,培訓他們成為數(shù)據(jù)庫遷移專家和顧問,培訓內容包括 AWS 數(shù)據(jù)庫技術,云架構,云安全性,OpEx 式成本管理。他們現(xiàn)在以顧問身份與內部和外部客戶一起工作,如此一來,他們有機會在大規(guī)模遷移關鍵任務數(shù)據(jù)庫的項目中共享第一手經(jīng)驗。 遷移案例下面列舉幾個遷移案例:
- 廣告——遷移后,該團隊在 RDS 的支持下,在數(shù)分鐘內將數(shù)據(jù)庫機隊規(guī)模(及其吞吐量)增加一倍,以適應高峰流量,而這種擴展工作通常需要耗時數(shù)月。
- 買方欺詐——在 Amazon Aurora 的支持下,該團隊在短短一小時的停機時間內遷移 40 TB 的數(shù)據(jù),并以一半的成本實現(xiàn)了相同,甚至更好的性能。
- 財務分類帳——該團隊遷移了 120 TB 的數(shù)據(jù),將延遲減少了 40%,將成本和費用支出均降低 70%,這一切都得益于 DynamoDB 的支持。
- 錢包——該團隊將 100 多億條記錄遷移到 DynamoDB,將延遲減少 50%,并將運營成本降低 90%。






