基于多策略的流數(shù)據(jù)查詢優(yōu)化方法研究.pdf

1、隨著信息技術(shù)的發(fā)展，物聯(lián)網(wǎng)越來越多的應(yīng)用到像智能交通、智能家居、智能醫(yī)療等的智能應(yīng)用行業(yè)中，以傳感設(shè)備為基礎(chǔ)的各類流式數(shù)據(jù)的實(shí)時(shí)接收和處理成為物聯(lián)網(wǎng)智能應(yīng)用的關(guān)鍵。
　　在智能交通應(yīng)用中，實(shí)時(shí)采集的交通信息要進(jìn)行有效的存儲(chǔ)，為交通信息服務(wù)、交通計(jì)算、交通管理等提供數(shù)據(jù)支持。面對(duì)大規(guī)模的、快速、實(shí)時(shí)、連續(xù)不間斷到達(dá)的流數(shù)據(jù)，如何實(shí)現(xiàn)大規(guī)模流式數(shù)據(jù)的存儲(chǔ)以及提供高效的數(shù)據(jù)查詢方法成為智能交通應(yīng)用中不可避免的問題。針對(duì)這一問題，提出一種

2、適用于物聯(lián)網(wǎng)數(shù)據(jù)管理的結(jié)構(gòu)化數(shù)據(jù)查詢優(yōu)化方法，在保障流數(shù)據(jù)存儲(chǔ)的同時(shí)提供高效的數(shù)據(jù)查詢能力。該方法采用數(shù)據(jù)庫集群技術(shù)搭建主從數(shù)據(jù)庫環(huán)境;采用數(shù)據(jù)分區(qū)技術(shù)創(chuàng)建分區(qū)表用于數(shù)據(jù)存儲(chǔ)，實(shí)時(shí)接收的流數(shù)據(jù)連續(xù)不斷的寫入主數(shù)據(jù)庫;采用主從延遲復(fù)制策略通過定時(shí)增量復(fù)制技術(shù)將數(shù)據(jù)異步復(fù)制到從數(shù)據(jù)庫集群，為大規(guī)模歷史數(shù)據(jù)的查詢提供數(shù)據(jù)支持;采用數(shù)據(jù)緩存技術(shù)應(yīng)對(duì)重復(fù)查詢時(shí)的性能需求。該方法采用的數(shù)據(jù)庫集群技術(shù)在應(yīng)對(duì)數(shù)據(jù)并發(fā)訪問的同時(shí)減少數(shù)據(jù)查詢對(duì)數(shù)據(jù)寫入的性