大數據處理綜合處理服務平臺的設計與實現

1、大數據處理綜合處理服務平臺的設計與實現（廣州城市職業(yè)學院廣東廣州510405）摘要：在信息技術高速發(fā)展的今天，金融業(yè)面臨的競爭日趨激烈，信息的高度共享和數據的安全可靠是系統(tǒng)建設中優(yōu)先考慮的問題。大數據綜合處理服務平臺支持靈活構建面向數據倉庫、實現批量作業(yè)的原子化、參數化、操作簡單化、流程可控化，并提供靈活、可自定義的程序接口，具有良好的可擴展性。該服務平臺以SOA為基礎，采用云計算的體系架構，整合多種ETL技術和不同的ETL工具，具有統(tǒng)

2、一、高效、可拓展性。該系統(tǒng)整合金融機構的客戶、合約、交易、財務、產品等主要業(yè)務數據，提供客戶視圖、客戶關系管理、營銷管理、財務分析、質量監(jiān)控、風險預警、業(yè)務流程等功能模塊。該研究與設計打破跨國廠商在金融軟件方面的壟斷地位，促進傳統(tǒng)優(yōu)勢企業(yè)走新型信息化道路，充分實現了“資源共享、低投入、低消耗、低排放和高效率”，值得大力發(fā)展和推廣。關鍵詞：面向金融，大數據，綜合處理服務平臺。一、研究的意義目前，全球IT行業(yè)討論最多的兩個議題，一個是大數據

3、分析“BigData”，一個是云計算“CloudComputing”。成本和贏得競爭優(yōu)勢的一大選擇。面向金融領域的海量數據綜合處理服務平臺融合了分布式云計算技術、SOA技術、ETL技術、作業(yè)調度技術，以SOA為基礎，采用云計算的體系架構，整合多種ETL技術和不同的ETL工具，為金融行業(yè)建立統(tǒng)一、高效、可拓展的面向金融領域的海量數據綜合處理服務平臺。該平臺支持靈活構建面向數據倉庫、數據集市、數據集文件進行海量數據的處理、加工和交換，實現批

4、量作業(yè)的原子化、參數化、操作簡單化、流程可控化，并提供靈活、可自定義的程序接口，具有良好的可擴展性，是一個基礎服務框架的產品平臺。該系統(tǒng)整合金融機構的客戶、合約、交易、財務、產品等主要業(yè)務數據，提供客戶視圖、客戶關系管理、營銷管理、財務分析、質量監(jiān)控、風險預警、業(yè)務流程等功能模塊。系統(tǒng)支持構筑面向運營的服務平臺，可以按功能點或數據量來向使用方收費，使用方按格式要求提供數據，然后點擊相關功能模塊得到目標結果。隨著全球各行業(yè)對數據整合應用需