海量離散點數(shù)據(jù)快速檢索系統(tǒng)設計與實現(xiàn).pdf

1、本文針對海量離散數(shù)據(jù)的特點，借鑒分布式數(shù)據(jù)庫、并行運算、網(wǎng)格計算及多線程的思想，提出了一套海量離散數(shù)據(jù)快速檢索方法。 結合全國自然重砂系統(tǒng)研制，針對分散存放在全國各省的自然重砂數(shù)據(jù)庫，數(shù)據(jù)海量、離散、分布無規(guī)律、受計算機配置、網(wǎng)絡速度等硬件因素影響的情況下，應用分布式數(shù)據(jù)庫及并行運算理念，采用區(qū)域分片及多線程隊列方法對某個多邊形區(qū)域內的離散數(shù)據(jù)進行檢索與處理。主要取得了以下成果和結論： (1)合理的數(shù)據(jù)庫設計可以在服務器

2、上縮小查詢開銷。數(shù)據(jù)庫設計的優(yōu)化主要表現(xiàn)在物理設計上以優(yōu)化I/O操作、優(yōu)化索引設計可以大大提高查詢速度。 (2)利用MSSQLServer2000查詢優(yōu)化器等工具優(yōu)化SQL語句的執(zhí)行性能。文中還提到優(yōu)化SQL語句執(zhí)行的其它技巧。 (3)采用分片技術可以縮小用戶等待時間，提高響應速度。分片包括兩個部分：數(shù)據(jù)庫分片和查詢分片。數(shù)據(jù)庫分片可以在物理上優(yōu)化查詢開銷。查詢分片可以利用并行運算思想和網(wǎng)格運算思想執(zhí)行分散查詢以縮短系統(tǒng)

3、響應時間。 (4)采用多線程技術可以達到請求方與響應方的CPU負載平衡。請求方與響應方為一對多的關系。多線程可以同時請求多臺服務器查詢，并采用線程同步機制使請求方與響應方消息一致。 (5)網(wǎng)絡帶寬等硬件因素也是影響查詢速度的一個方面。根據(jù)現(xiàn)有的網(wǎng)絡狀態(tài)，運用一些工具軟件及花銷較小的代價改造現(xiàn)有網(wǎng)絡環(huán)境，以提高數(shù)據(jù)傳輸性能。 根據(jù)以上幾個方面，結合實際情況，開發(fā)了全國自然重砂數(shù)據(jù)庫系統(tǒng)，在數(shù)據(jù)查詢和數(shù)據(jù)處理方面取得