搜索引擎用戶數(shù)據(jù)管理系統(tǒng).pdf

1、隨著時間的推移和用戶量的增長，“搜搜”搜索引擎產(chǎn)生的數(shù)據(jù)總量和數(shù)據(jù)種類都急劇增加，這些數(shù)據(jù)是提高搜索質(zhì)量的重要依據(jù)和挖掘用戶需求的關(guān)鍵樣本。然而，龐大的數(shù)據(jù)卻沒有很好的統(tǒng)一管理平臺，每種數(shù)據(jù)都是由專門的人員自行管理，給工作效率帶來的極大的影響。因此，本人的工作任務(wù)就是給公司開發(fā)一套統(tǒng)一的數(shù)據(jù)管理平臺，方便數(shù)據(jù)的管理，節(jié)省溝通時間，提高工作效率。
　　本文設(shè)計和實現(xiàn)了一個支持大規(guī)模數(shù)據(jù)的管理系統(tǒng)，并且實現(xiàn)了負載均衡機制以及分布式內(nèi)存

2、緩存架構(gòu)。本人主要工作內(nèi)容如下:
　　(1)結(jié)合項目背景，對系統(tǒng)的功能性需求和非功能需求分別進行詳細需求分析，并對每個系統(tǒng)模塊繪制詳細的用例。
　　(2)設(shè)計了系統(tǒng)總體架構(gòu)，其中包括內(nèi)存緩存的數(shù)據(jù)流程設(shè)計。設(shè)計了系統(tǒng)的數(shù)據(jù)概念模型和數(shù)據(jù)邏輯模型。詳細設(shè)計并實現(xiàn)了五大功能模塊。
　　(3)實現(xiàn)了分布式的內(nèi)存緩存架構(gòu)，創(chuàng)新性的設(shè)計并實現(xiàn)了緩存數(shù)據(jù)的主動過期機制，使得系統(tǒng)同時具備高性能和高數(shù)據(jù)實時性。設(shè)計并實現(xiàn)了緩存及數(shù)據(jù)庫