分布式MongoDB集群高可用性的研究和性能優(yōu)化.pdf

1、隨著網(wǎng)絡(luò)技術(shù)飛速的發(fā)展，數(shù)據(jù)量以及訪問流量都在迅速攀升，互聯(lián)網(wǎng)的數(shù)據(jù)量已經(jīng)從過去的MB、GB變?yōu)榱爽F(xiàn)在的TB級別。各種應(yīng)用以及網(wǎng)站的規(guī)模十分龐大，并發(fā)量高，同時(shí)動態(tài)資源十分豐富，數(shù)據(jù)格式復(fù)雜且不規(guī)律。數(shù)據(jù)庫中表的設(shè)計(jì)變得較為復(fù)雜，數(shù)據(jù)庫的關(guān)聯(lián)查詢也在不斷的增加，面對這些功能以及性能上的需求，傳統(tǒng)數(shù)據(jù)庫在某些場景下顯得捉襟見肘。
　　MongoDB采用的是Nosql的設(shè)計(jì)模式，文檔模式自由。對于大數(shù)據(jù)量、高并發(fā)、弱一致性的互聯(lián)網(wǎng)應(yīng)用

2、，MongoDB可以應(yīng)對自如。在數(shù)據(jù)量攀升的情況下，其可以實(shí)現(xiàn)快速方便的擴(kuò)展，性能方面也十分優(yōu)異。內(nèi)置的水平擴(kuò)展機(jī)制提供了從百萬到十億級別的數(shù)據(jù)量處理能力，完全可以滿足Web2.0和移動互聯(lián)網(wǎng)的數(shù)據(jù)存儲需求，開箱即用的特性也大大降低了中小型網(wǎng)站的運(yùn)維成本。
　　鑒于以上背景以及應(yīng)用需求，本文使用了Docker（容器虛擬化技術(shù)）虛擬化的方案，基于MongoDB的優(yōu)秀特性，設(shè)計(jì)一個(gè)高可用的分布式集群系統(tǒng)，實(shí)現(xiàn)了高可用、高性能的數(shù)據(jù)方案

3、，解決了銀行日志信息存儲成本高，關(guān)系復(fù)雜以及數(shù)據(jù)孤島等問題，并且通過相關(guān)的功能和性能測試，達(dá)到了應(yīng)用的標(biāo)準(zhǔn)。具體實(shí)現(xiàn)過程中，采用Docker對其中的分布式節(jié)點(diǎn)進(jìn)行構(gòu)建，節(jié)點(diǎn)構(gòu)建完成后利用路由節(jié)點(diǎn)，將不同功能的節(jié)點(diǎn)進(jìn)行部署。最終形成一個(gè)高可用、擴(kuò)展性強(qiáng)的分布式數(shù)據(jù)庫集群，同時(shí)對項(xiàng)目中的數(shù)據(jù)進(jìn)行分析，根據(jù)業(yè)務(wù)的需求設(shè)計(jì)適用于該集群的數(shù)據(jù)存儲方案。
　　在數(shù)據(jù)庫的應(yīng)用中，優(yōu)化向來都是研究重點(diǎn)所在。以上述數(shù)據(jù)方案為基礎(chǔ)，本文通過對源碼的深