大數(shù)據(jù)技術(shù)及應(yīng)用教學(xué)大綱

1、《大數(shù)據(jù)技術(shù)及應(yīng)用》教學(xué)大綱《大數(shù)據(jù)技術(shù)及應(yīng)用》課程教學(xué)大綱 《大數(shù)據(jù)技術(shù)及應(yīng)用》課程教學(xué)大綱一、課程基本信息 一、課程基本信息課程名稱課程代碼大數(shù)據(jù)技術(shù)及應(yīng)用（英文名稱） Big data technology and Application課程類別 選修課程學(xué)分 3 課程性 質(zhì) 專業(yè)課程課程學(xué)時(shí) 其中：理論 30 學(xué)時(shí)，實(shí)驗(yàn) 24 學(xué)時(shí) 開課學(xué)期考核方式 考試+課程論文 開課單位先修課程 C 語言程序設(shè)計(jì)； Java 程序設(shè)計(jì)；數(shù)據(jù)

2、結(jié)構(gòu)； Linux 操作系統(tǒng)；后續(xù)課程 軟件設(shè)計(jì)綜合實(shí)訓(xùn)；專業(yè)實(shí)習(xí)；畢業(yè)設(shè)計(jì)；數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)、人工智能、模式識(shí)別與人工智能；信息適用專業(yè) 技術(shù)-職業(yè)技術(shù)教育方向二、課程的性質(zhì)、目的和任務(wù) 二、課程的性質(zhì)、目的和任務(wù)《大數(shù)據(jù)技術(shù)及應(yīng)用》是計(jì)算機(jī)相關(guān)專業(yè)大學(xué)本科生及研究生選修的一門專業(yè)課程，通過本課程學(xué)習(xí)，使學(xué)生能較系統(tǒng)地掌握大數(shù)據(jù)的基本知識(shí)、原理和方法，初步具備大數(shù)據(jù)的應(yīng)用、開發(fā)的能力，為從事大數(shù)據(jù)分析、建模、可視化奠定基礎(chǔ)。 目的

3、是讓學(xué)生了解并掌握四個(gè)領(lǐng)域即大數(shù)據(jù)系統(tǒng)的起源及系統(tǒng)特征；大數(shù)據(jù)系統(tǒng)的架構(gòu)設(shè)計(jì)及功能目標(biāo)設(shè)計(jì)；大數(shù)據(jù)系統(tǒng)程序開發(fā)；企業(yè)大數(shù)據(jù)案例分析的內(nèi)容， 同時(shí)利用真機(jī)實(shí)驗(yàn)環(huán)節(jié)以及大數(shù)據(jù)實(shí)訓(xùn)一體機(jī)來提升學(xué)生對(duì)大數(shù)據(jù)開發(fā)的實(shí)踐能力；本課程重點(diǎn)讓學(xué)生掌握三個(gè)方面的內(nèi)容：（1）基礎(chǔ)篇：主要包括 HDFS 使用操作、 MapReduce 開發(fā)；、 HBase 數(shù)據(jù)庫的開發(fā)；（2）核心篇： YARN 架構(gòu)、 Spark 集群計(jì)算、 Spark 機(jī)器學(xué)習(xí)、 Hiv

4、e 數(shù)據(jù)倉(cāng)庫開發(fā)；（3）應(yīng)用篇：醫(yī)藥大數(shù)據(jù)案例分析。三、課程教學(xué)目標(biāo) 三、課程教學(xué)目標(biāo)（一）總體目標(biāo)1 / 12 12《大數(shù)據(jù)技術(shù)及應(yīng)用》教學(xué)大綱第四節(jié)大數(shù)據(jù)的應(yīng)用知識(shí)要點(diǎn)：電商、醫(yī)療、教育、金融、農(nóng)業(yè)、旅游、氣象大數(shù)據(jù)的應(yīng)用。第五節(jié)大數(shù)據(jù)的處理流程知識(shí)要點(diǎn)：大數(shù)據(jù)處理流程的 4 個(gè)階段——數(shù)據(jù)采集、數(shù)據(jù)處理與集成、數(shù)據(jù)分析和數(shù)據(jù)解釋。第六節(jié)大數(shù)據(jù)成為人工智能產(chǎn)業(yè)的燃料知識(shí)要點(diǎn)：人工智能與大數(shù)據(jù)的關(guān)系。第七節(jié)大數(shù)據(jù)技術(shù)的發(fā)展前景知識(shí)要點(diǎn)

5、：大數(shù)據(jù)技術(shù)不斷發(fā)展，出現(xiàn)更多的應(yīng)用項(xiàng)目。（四）教學(xué)重點(diǎn)與難點(diǎn)1．教學(xué)重點(diǎn)：大數(shù)據(jù)的基本概念。2．教學(xué)難點(diǎn)：大數(shù)據(jù)分析處理的流程。第二章 第二章 大數(shù)據(jù)集群系統(tǒng)基礎(chǔ) 大數(shù)據(jù)集群系統(tǒng)基礎(chǔ)（一）教學(xué)目的能分析大數(shù)據(jù)集群，闡明其基本原理；在虛擬化計(jì)算機(jī)系統(tǒng)中安裝CentOS 7 操作系統(tǒng)，通過 SecureCRT/Xshell 訪問 CentOS 7 操作系統(tǒng)，以三臺(tái)節(jié)點(diǎn)機(jī)搭建大數(shù)據(jù)集群環(huán)境。（二）教學(xué)要求1.掌握虛擬機(jī)軟件 VMware W

6、orkstation 10 及以上和終端仿真程序SecureCRT/Xshell 的下載、安裝和使用方法；2.掌握 VMware Workstation 10 中安裝 CentOS 7 的方法；3.理解大數(shù)據(jù)集群相關(guān)組成和技術(shù)，部署大數(shù)據(jù)集群。（三）教學(xué)內(nèi)容第一節(jié)大數(shù)據(jù)集群系統(tǒng)概述知識(shí)要點(diǎn)：集群概念、分類、目的。第二節(jié) Linux 操作系統(tǒng)知識(shí)要點(diǎn)： Linux 概念、 特點(diǎn)、 基本使用操作。第三節(jié)虛擬化技術(shù)知識(shí)要點(diǎn)：虛擬化技術(shù)概念、原

7、理、常用軟件、優(yōu)缺點(diǎn)。第四節(jié) CentOS 大數(shù)據(jù)集群系統(tǒng)的組成知識(shí)要點(diǎn)： CentOS 概念、 CentOS集群系統(tǒng)拓?fù)鋱D。第五節(jié)大數(shù)據(jù)集群技術(shù)的架構(gòu)知識(shí)要點(diǎn)：大數(shù)據(jù)集群的構(gòu)架組成——硬件資源層、 OS 層、基礎(chǔ)設(shè)施管理層、文件系統(tǒng)層、資源管理和大數(shù)據(jù)集群層、大數(shù)據(jù)應(yīng)用層。第六節(jié)操作實(shí)踐： 大數(shù)據(jù)集群的部署知識(shí)要點(diǎn)： 集群規(guī)劃、網(wǎng)絡(luò)配置、安全配置、時(shí)間同步、 SSH 登錄。（四）教學(xué)重點(diǎn)與難點(diǎn)1．教學(xué)重點(diǎn)： VMwareWorksta