大數(shù)據(jù)技術(shù)及應(yīng)用教學(xué)大綱

1、《大數(shù)據(jù)技術(shù)及應(yīng)用》教學(xué)大綱《大數(shù)據(jù)技術(shù)及應(yīng)用》課程教學(xué)大綱 《大數(shù)據(jù)技術(shù)及應(yīng)用》課程教學(xué)大綱一、課程基本信息 一、課程基本信息課程名稱課程代碼大數(shù)據(jù)技術(shù)及應(yīng)用（英文名稱） Big data technology and Application課程類別 選修課程學(xué)分 3 課程性 質(zhì) 專業(yè)課程課程學(xué)時 其中：理論 30 學(xué)時，實驗 24 學(xué)時 開課學(xué)期考核方式 考試+課程論文 開課單位先修課程 C 語言程序設(shè)計； Java 程序設(shè)計；數(shù)據(jù)

2、結(jié)構(gòu)； Linux 操作系統(tǒng)；后續(xù)課程 軟件設(shè)計綜合實訓(xùn)；專業(yè)實習(xí)；畢業(yè)設(shè)計；數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)、人工智能、模式識別與人工智能；信息適用專業(yè) 技術(shù)-職業(yè)技術(shù)教育方向二、課程的性質(zhì)、目的和任務(wù) 二、課程的性質(zhì)、目的和任務(wù)《大數(shù)據(jù)技術(shù)及應(yīng)用》是計算機相關(guān)專業(yè)大學(xué)本科生及研究生選修的一門專業(yè)課程，通過本課程學(xué)習(xí)，使學(xué)生能較系統(tǒng)地掌握大數(shù)據(jù)的基本知識、原理和方法，初步具備大數(shù)據(jù)的應(yīng)用、開發(fā)的能力，為從事大數(shù)據(jù)分析、建模、可視化奠定基礎(chǔ)。 目的

3、是讓學(xué)生了解并掌握四個領(lǐng)域即大數(shù)據(jù)系統(tǒng)的起源及系統(tǒng)特征；大數(shù)據(jù)系統(tǒng)的架構(gòu)設(shè)計及功能目標設(shè)計；大數(shù)據(jù)系統(tǒng)程序開發(fā)；企業(yè)大數(shù)據(jù)案例分析的內(nèi)容， 同時利用真機實驗環(huán)節(jié)以及大數(shù)據(jù)實訓(xùn)一體機來提升學(xué)生對大數(shù)據(jù)開發(fā)的實踐能力；本課程重點讓學(xué)生掌握三個方面的內(nèi)容：（1）基礎(chǔ)篇：主要包括 HDFS 使用操作、 MapReduce 開發(fā)；、 HBase 數(shù)據(jù)庫的開發(fā)；（2）核心篇： YARN 架構(gòu)、 Spark 集群計算、 Spark 機器學(xué)習(xí)、 Hiv

4、e 數(shù)據(jù)倉庫開發(fā)；（3）應(yīng)用篇：醫(yī)藥大數(shù)據(jù)案例分析。三、課程教學(xué)目標 三、課程教學(xué)目標（一）總體目標1 / 12 12《大數(shù)據(jù)技術(shù)及應(yīng)用》教學(xué)大綱第四節(jié)大數(shù)據(jù)的應(yīng)用知識要點：電商、醫(yī)療、教育、金融、農(nóng)業(yè)、旅游、氣象大數(shù)據(jù)的應(yīng)用。第五節(jié)大數(shù)據(jù)的處理流程知識要點：大數(shù)據(jù)處理流程的 4 個階段——數(shù)據(jù)采集、數(shù)據(jù)處理與集成、數(shù)據(jù)分析和數(shù)據(jù)解釋。第六節(jié)大數(shù)據(jù)成為人工智能產(chǎn)業(yè)的燃料知識要點：人工智能與大數(shù)據(jù)的關(guān)系。第七節(jié)大數(shù)據(jù)技術(shù)的發(fā)展前景知識要點

5、：大數(shù)據(jù)技術(shù)不斷發(fā)展，出現(xiàn)更多的應(yīng)用項目。（四）教學(xué)重點與難點1．教學(xué)重點：大數(shù)據(jù)的基本概念。2．教學(xué)難點：大數(shù)據(jù)分析處理的流程。第二章 第二章 大數(shù)據(jù)集群系統(tǒng)基礎(chǔ) 大數(shù)據(jù)集群系統(tǒng)基礎(chǔ)（一）教學(xué)目的能分析大數(shù)據(jù)集群，闡明其基本原理；在虛擬化計算機系統(tǒng)中安裝CentOS 7 操作系統(tǒng)，通過 SecureCRT/Xshell 訪問 CentOS 7 操作系統(tǒng)，以三臺節(jié)點機搭建大數(shù)據(jù)集群環(huán)境。（二）教學(xué)要求1.掌握虛擬機軟件 VMware W

6、orkstation 10 及以上和終端仿真程序SecureCRT/Xshell 的下載、安裝和使用方法；2.掌握 VMware Workstation 10 中安裝 CentOS 7 的方法；3.理解大數(shù)據(jù)集群相關(guān)組成和技術(shù)，部署大數(shù)據(jù)集群。（三）教學(xué)內(nèi)容第一節(jié)大數(shù)據(jù)集群系統(tǒng)概述知識要點：集群概念、分類、目的。第二節(jié) Linux 操作系統(tǒng)知識要點： Linux 概念、 特點、 基本使用操作。第三節(jié)虛擬化技術(shù)知識要點：虛擬化技術(shù)概念、原

7、理、常用軟件、優(yōu)缺點。第四節(jié) CentOS 大數(shù)據(jù)集群系統(tǒng)的組成知識要點： CentOS 概念、 CentOS集群系統(tǒng)拓撲圖。第五節(jié)大數(shù)據(jù)集群技術(shù)的架構(gòu)知識要點：大數(shù)據(jù)集群的構(gòu)架組成——硬件資源層、 OS 層、基礎(chǔ)設(shè)施管理層、文件系統(tǒng)層、資源管理和大數(shù)據(jù)集群層、大數(shù)據(jù)應(yīng)用層。第六節(jié)操作實踐： 大數(shù)據(jù)集群的部署知識要點： 集群規(guī)劃、網(wǎng)絡(luò)配置、安全配置、時間同步、 SSH 登錄。（四）教學(xué)重點與難點1．教學(xué)重點： VMwareWorksta