ETL在期貨CRM數(shù)據(jù)中心中的應用研究.pdf

1、近幾年隨著期貨行業(yè)的不斷發(fā)展,期貨業(yè)對IT技術的依賴程度越來越高,柜臺交易系統(tǒng)、清算系統(tǒng)、資產(chǎn)管理系統(tǒng)、辦公自動化系統(tǒng)、財務系統(tǒng)都相繼建成,但目前應用仍以業(yè)務運行為主,各個系統(tǒng)間信息缺乏有效的共享手段,形成了大量的“信息孤島”,缺乏強大的業(yè)務支持、管理控制、業(yè)務分析和決策支持功能。期貨公司為了謀求更大的發(fā)展,都在積極變革思維,從外部的擴張轉向到內(nèi)部的管理,從以“業(yè)務為導向”轉向到以“客戶為中心”,從“傭金價格競爭”轉向到“服務質(zhì)量競爭”

2、,期貨公司要在激烈的市場競爭中脫穎而出,必須重視公司的核心價值。對于期貨公司來說,客戶是真正的價值所在,客戶關系管理(CRM)作為一種提升客戶滿意度、提高客戶忠誠度、深層次開發(fā)客戶價值的有效應用受到國內(nèi)期貨公司越來越多的重視。建設以數(shù)據(jù)中心為基礎的CRM系統(tǒng)成為當務之急。
　　 對于CRM系統(tǒng)而言,最重要的是全面豐富準確的客戶數(shù)據(jù),為了滿足CRM的各種應用,建立統(tǒng)一的客戶視圖,建設分析型企業(yè)級數(shù)據(jù)中心是基礎。在數(shù)據(jù)中心建設過程中

3、ETL(Extract、Transform and Load,數(shù)據(jù)抽取、轉換和加載)和數(shù)據(jù)庫是最關鍵的兩個環(huán)節(jié),利用ETL將異構數(shù)據(jù)源中的業(yè)務數(shù)據(jù)經(jīng)過抽取、清洗和轉換、加載到數(shù)據(jù)中心,為CRM的應用提供高質(zhì)量的數(shù)據(jù)。
　　 本文以期貨CRM項目為依托,詳細闡述了期貨CRM數(shù)據(jù)中心規(guī)劃與設計,ORACLERAC數(shù)據(jù)庫規(guī)劃,ETL設計與應用,對ETL的設計與應用研究是本文研究的重點。本文主要工作成果如下:
　　 1)ETL相

4、關理論的研究,包括數(shù)據(jù)倉庫、ODS、ETL技術等。
　　 研究了構建數(shù)據(jù)中心相關的數(shù)據(jù)倉庫、ODS和ETL技術,主要包括數(shù)據(jù)倉庫體系結構,ODS體系結構,ETL中的數(shù)據(jù)抽取、轉換、加載、元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量保證和實時ETL等相關技術。
　　 2)期貨CRM系統(tǒng)數(shù)據(jù)中心規(guī)劃與設計。
　　 根據(jù)期貨CRM的系統(tǒng)需求,規(guī)劃和設計了數(shù)據(jù)中心,對ETL的采集流程、數(shù)據(jù)抽取模式、數(shù)據(jù)清洗轉換方式和并發(fā)處理方式進行了規(guī)劃,對O

5、RACLERAC數(shù)據(jù)庫系統(tǒng)、存儲系統(tǒng)進行了規(guī)劃和設計。
　　 3)ETL在期貨數(shù)據(jù)中心中的應用。
　　 根據(jù)期貨數(shù)據(jù)中心的需求和特點以及ETL的相關技術,本文設計了一個具有并發(fā)和分布式處理能力、支持多種數(shù)據(jù)源、支持多種數(shù)據(jù)抽取方式和轉換方式符合期貨數(shù)據(jù)中心建設要求的ETL過程,并將該ETL過程應用到期貨CRM數(shù)據(jù)中心,該ETL具有較好的擴展性,在支持多種異構數(shù)據(jù)源、并行和負載均衡、異常處理和質(zhì)量保證等方面都具有一定的創(chuàng)新