海量數(shù)據(jù)的高效近似近鄰查詢研究.pdf

1、隨著大數(shù)據(jù)時(shí)代的到來(lái)，人們往往很難在規(guī)定時(shí)間內(nèi)，利用常規(guī)方法對(duì)海量數(shù)據(jù)的內(nèi)容進(jìn)行管理、分析和處理。但是數(shù)據(jù)規(guī)模越大，其潛在的價(jià)值也就越大。因此，如何在大數(shù)據(jù)中快速、有效地檢索到相似的目標(biāo)數(shù)據(jù)成為目前計(jì)算機(jī)界研究的一個(gè)熱點(diǎn)問(wèn)題。
　　近年來(lái)，學(xué)者們提出近似最近鄰檢索方法，通過(guò)數(shù)據(jù)索引來(lái)加快目標(biāo)數(shù)據(jù)的在線檢索速度。局部敏感哈希(Locality Sensitive Hashing)與隨機(jī)網(wǎng)格(Random Grids)是目前研究此問(wèn)題

2、的兩種有效方法，但研究中發(fā)現(xiàn)，這兩種方法都存在一定的問(wèn)題。局部敏感哈希算法為了保證準(zhǔn)確度，需要建立多張索引表，所以空間復(fù)雜度較高;隨機(jī)網(wǎng)格方法則需要?jiǎng)?chuàng)建很多的副本，從而耗費(fèi)更多的外存空間。
　　為了解決近似近鄰算法中精確度不高和占用空間過(guò)多的問(wèn)題，本文結(jié)合局部敏感哈希與隨機(jī)網(wǎng)格算法的優(yōu)點(diǎn)，提出一種新的方法—基于網(wǎng)格的局部敏感哈希算法。本文算法吸取隨機(jī)網(wǎng)格中劃分網(wǎng)格的思想，對(duì)數(shù)據(jù)進(jìn)行網(wǎng)格劃分，這樣會(huì)盡可能保留原始數(shù)據(jù)的空間近鄰結(jié)構(gòu)。