基于HDFS的創(chuàng)新知識存儲及分發(fā)架構的研究與設計.pdf

1、創(chuàng)新知識的運用受到了越來越多的關注。其中突出存在的一個問題是解決創(chuàng)新知識社會共享和敏感知識私有的矛盾。只有創(chuàng)新知識的全社會共享才能最大限度發(fā)揮創(chuàng)新知識的再利用價值，然而各個團體或者組織所擁有的知識都具有鮮明的特色并且總會存在一些不適合于共享的私有知識。同時在資源和性能等條件的約束下，這些團體也面臨著無法完全接觸共享知識全集的問題。因此有必要設計一種分布式創(chuàng)新管理共享架構，完成創(chuàng)新知識的收集、加工、存儲及分發(fā)等任務，促進創(chuàng)新知識的社會共享

2、。面對海量的創(chuàng)新知識，當前傳統(tǒng)的存儲結構難以滿足性能上的需求。而Hadoop的分布式文件系統(tǒng)HDFS憑借著高性能、高容錯性等優(yōu)勢等已成為業(yè)界研究云計算與云存儲的標準模型。但是其在海量小文件存儲和主節(jié)點單點故障等問題上依然存在著不足，難以直接提供高效可靠的存儲服務。
　　本文在創(chuàng)新知識云平臺上設計并實現(xiàn)了一種分布式的彈性計算架構模型。模型在建立創(chuàng)新知識云平臺和創(chuàng)新基地之間的分布式關系的基礎上，設計實現(xiàn)了創(chuàng)新知識的收集和分發(fā)等管理流程

3、，給出了知識分發(fā)階段從共享知識全集中篩選出知識需求的形式化規(guī)約及相關實現(xiàn)。在創(chuàng)新知識存儲方面，通過引入包文件及分布式索引服務，改進了HDFS小文件存儲的效率問題；引入備份集群的概念優(yōu)化命名空間備份及故障恢復服務以及引入了內存數(shù)據(jù)緩存系統(tǒng)，進一步提升存儲速度，實現(xiàn)了可用性更強、資源利用率更高的HDFS高可用架構。
　　創(chuàng)新知識云平臺為創(chuàng)新知識提供了一條靈活的傳播通路。通過理論推導和相關實驗結論可以看出，該模型結構解決了知識共享的與私