面向大規(guī)模雷電信息的數據庫存儲與管理.pdf

1、隨著雷電探測站點的增多以及長期對雷電信息的監(jiān)測，中心站實時定位系統數據庫遇到了新的挑戰(zhàn)。雷電數據是進行計算和研究的重要依據，面對突發(fā)性強的大規(guī)模數據，如果沒有高效快速的存取方法將破壞整體后期數據處理的實時性。本文從數據的加載存儲、數據庫管理組織以及數據備份和恢復等方面來進行研究，保證數據的實時性和有效性，主要內容如下：
　　第一，實現了數據庫的高效實用存儲設計。針對海量雷電信息處理的需求，通過分析數據庫高速加載工具SQL*LOAD

2、ER，提出了自動定時批量并行數據加載的方法。首先對數據進行解析，然后實現多級并行加載。整個應用程序在VC平臺開發(fā)完成，在數據庫服務器端自動定時值班。
　　第二，制定了基于分區(qū)的實時數據與歷史數據的分離存儲策略。當數據對定位計算系統可用后，為減少查詢分析中的數據量和實現數據的高效管理，根據數據的?；钇趯崟r數據和歷史數據分離，并按照不同的時間粒度進行分區(qū)操作。
　　第三，實現了對數據庫性能調整和優(yōu)化。本文首先對數據庫系統隨著數

3、據量增大所面臨的問題進行了總結，并使用性能監(jiān)測工具分析數據庫運行狀態(tài)。以此為基礎，進行了綜合查找分析，主要在SQL語句、磁盤I/O、數據庫參數配置和分區(qū)轉換等方面提出了優(yōu)化方法和策略。
　　第四，完成了數據庫的備份和恢復設計。通過對數據庫備份與恢復方法的研究以及RMAN的工作機制深入分析，提出了雷電數據庫在線多級備份策略。根據不同的時間頻率和時間點，對不同的數據對象進行自動、增量備份。該方法可以有效的減少數據備份時間，降低備份操作