大數(shù)據(jù)管理與應(yīng)用專業(yè)、數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)專業(yè)雖然屬于不同學(xué)科，但是基礎(chǔ)通識(shí)課和核心課部分課程是類似的，一個(gè)培養(yǎng)經(jīng)濟(jì)、管理思維大數(shù)據(jù)人才，一個(gè)是培養(yǎng)大數(shù)據(jù)挖掘、大數(shù)據(jù)算法技術(shù)類人才。
大數(shù)據(jù)管理與應(yīng)用專業(yè)、數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)專業(yè)《通識(shí)公共基礎(chǔ)課》：

• 《社會(huì)主義理論與實(shí)踐》
• 《大學(xué)英語(yǔ)》《專業(yè)英語(yǔ)》
• 《毛概鄧倫馬克思主義》
• 《高等數(shù)學(xué)》
• 《線性代數(shù)》
• 《微積分》
• 《概率論與數(shù)理統(tǒng)計(jì)》

數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)專業(yè)《技術(shù)基礎(chǔ)課》：

• 《計(jì)算機(jī)數(shù)據(jù)通信技術(shù)》：網(wǎng)絡(luò)七層模型、靜態(tài)路由、動(dòng)態(tài)路由協(xié)議OSPF、NAT、ACL、VRRP、DHCP等網(wǎng)絡(luò)通信技術(shù)；
• 《數(shù)據(jù)庫(kù)原理與應(yīng)用》?
• 《計(jì)算機(jī)操作系統(tǒng)-Linux常用運(yùn)維基礎(chǔ)》：Linux基本操作、Linux上服務(wù)器搭建與運(yùn)維等；
• 《云計(jì)算技術(shù)》：云計(jì)算基礎(chǔ)、計(jì)算虛擬化、存儲(chǔ)虛擬化、大數(shù)據(jù)分布式存儲(chǔ)技術(shù)、云服務(wù)模式IaaS/PaaS/SaaS部署與運(yùn)維等；
• 《大數(shù)據(jù)存儲(chǔ)技術(shù)》《大數(shù)據(jù)導(dǎo)論》

數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)專業(yè)【核心課程】（建議考華為（HCIE大數(shù)據(jù)挖掘技術(shù)專家）認(rèn)證）：

• 《數(shù)據(jù)科學(xué)原理與系統(tǒng)架構(gòu)》含：Hadoop、Spark、NoSQL、R語(yǔ)言介紹
• 《大數(shù)據(jù)程序設(shè)計(jì)-Python編程語(yǔ)言設(shè)計(jì)》
• 《Hadoop大數(shù)據(jù)集群存儲(chǔ)處理技術(shù)》
• 《大數(shù)據(jù)算法基礎(chǔ)與數(shù)理統(tǒng)計(jì)》
• 《Python大數(shù)據(jù)挖掘分析與處理》含：大數(shù)據(jù)采集、網(wǎng)絡(luò)爬蟲等
• 《大數(shù)據(jù)建模與機(jī)器學(xué)習(xí)算法》
• 《大數(shù)據(jù)預(yù)處理與大數(shù)據(jù)可視化》
• 《機(jī)器學(xué)習(xí)與大數(shù)據(jù)挖掘分析案例實(shí)訓(xùn)》
• 《文本挖掘分析》或《數(shù)據(jù)分析白皮書》（選修）
• 《自然語(yǔ)言處理》（選修）

大數(shù)據(jù)管理與應(yīng)用專業(yè)【商業(yè)管理通識(shí)課程】包括：

• 《微觀經(jīng)濟(jì)學(xué)》
• 《宏觀經(jīng)濟(jì)學(xué)》
• 《計(jì)量經(jīng)濟(jì)學(xué)》
• 《管理經(jīng)濟(jì)學(xué)》
• 《市場(chǎng)營(yíng)銷》
• 《管理統(tǒng)計(jì)學(xué)》
• 《運(yùn)籌學(xué)》或《數(shù)據(jù)模型與決策》
• 《戰(zhàn)略管理》或《商業(yè)管理決策》

大數(shù)據(jù)管理與應(yīng)用專業(yè)【核心課程】（非985或非211大學(xué)建議大四考華為（HCIE大數(shù)據(jù)分析與管理專家）認(rèn)證）：

• 《信息管理系統(tǒng)》
• 《大數(shù)據(jù)導(dǎo)論》或《數(shù)據(jù)科學(xué)原理》
• 《大數(shù)據(jù)程序設(shè)計(jì)-Python編程》（注意：未來(lái)掌握1門編程語(yǔ)言將是智能時(shí)代的1把工具，就像你要學(xué)會(huì)開(kāi)車一樣）
• 《搜索引擎商業(yè)分析》《文本挖掘商務(wù)數(shù)據(jù)分析》
• 《商務(wù)智能大數(shù)據(jù)與統(tǒng)計(jì)機(jī)器學(xué)習(xí)》（難度比大數(shù)據(jù)技術(shù)專業(yè)要低）
• 《大數(shù)據(jù)可視化應(yīng)用》
• 《金融數(shù)據(jù)管理應(yīng)用》
• 《大數(shù)據(jù)管理與治理》

大數(shù)據(jù)挖掘工程師、機(jī)器學(xué)習(xí)算法工程師崗位要求：

• 1、具有責(zé)任心，有較強(qiáng)的鉆研學(xué)習(xí)能力，較好的溝通能力、團(tuán)隊(duì)合作，有超過(guò)3年大數(shù)據(jù)分析、挖掘、算法經(jīng)驗(yàn)；
• 2、有大數(shù)據(jù)處理實(shí)戰(zhàn)經(jīng)驗(yàn)，熟悉整個(gè)大數(shù)據(jù)的完整處理流程，包括數(shù)據(jù)的采集、清洗、預(yù)處理、存儲(chǔ)、分析挖掘和數(shù)據(jù)可視化；
• 3、掌握ETL相關(guān)經(jīng)驗(yàn)，有數(shù)據(jù)庫(kù)建模經(jīng)驗(yàn)，靈活運(yùn)用SQL實(shí)現(xiàn)數(shù)據(jù)ETL加工處理；
• 4、熟悉數(shù)據(jù)倉(cāng)庫(kù)建設(shè)相關(guān)的技術(shù)棧，例如：Hive，Hadoop、Spark，F(xiàn)lume，Kafka等多項(xiàng)大數(shù)據(jù)處理技術(shù)；
• 5、掌握Python、R、SAS、SPSS等數(shù)據(jù)挖掘技術(shù)及算法應(yīng)用實(shí)踐，如：LS線性回歸、LS邏輯回歸、SVM支持向量機(jī)、決策樹、聚類、Apriori、FP-Growth、PrefixSpan、神經(jīng)網(wǎng)絡(luò)等算法；
• 6、理解大數(shù)據(jù)處理（流計(jì)算、分布式計(jì)算、分布式文件系統(tǒng)、分布式存儲(chǔ)）等相關(guān)技術(shù)和實(shí)現(xiàn)方法。

廣西已開(kāi)設(shè)《數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)》專業(yè)院校（廣西區(qū)內(nèi)高校教師的人工智能、大數(shù)據(jù)師資目前還比較差，而且大學(xué)課程偏基礎(chǔ)，建議還是通過(guò)外面培訓(xùn)學(xué)習(xí)大數(shù)據(jù)挖掘、大數(shù)據(jù)管理課程）：

• 桂林電子科技大學(xué)-數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)、大數(shù)據(jù)管理與應(yīng)用
• 廣西科技大學(xué)-數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)
• 桂林理工大學(xué)-數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)
• 廣西財(cái)經(jīng)學(xué)院-數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)
• 廣西師范大學(xué)-數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)
• 廣西師范大學(xué)漓江學(xué)院-數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)
• 南寧師范大學(xué)-數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)
• 玉林師范學(xué)院-數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)
• 桂林航天工業(yè)學(xué)院-數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)
• 桂林旅游學(xué)院-數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)
• 南寧學(xué)院-數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)
• 賀州學(xué)院-數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)
• 梧州學(xué)院-數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)
• 河池學(xué)院-數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)
• 百色學(xué)院-數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)
• 廣西科技師范學(xué)院-數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)
• 廣西警察學(xué)院-數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)
• 南寧師范大學(xué)師園學(xué)院-數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)

以下985高校或211大學(xué)已開(kāi)設(shè)《數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)》專業(yè)（不一一列舉）：

• 清華大學(xué)
• 北京大學(xué)（第一批）
• 中國(guó)人民大學(xué)
• 中國(guó)科學(xué)技術(shù)大學(xué)
• 南京大學(xué)
• 復(fù)旦大學(xué)
• 上海交通大學(xué)
• 西安交通大學(xué)
• 浙江大學(xué)
• 哈爾濱工業(yè)大學(xué)
• 南開(kāi)大學(xué)
• 天津大學(xué)
• 東南大學(xué)
• 華中科技大學(xué)
• 武漢大學(xué)
• 廈門大學(xué)
• 山東大學(xué)
• 湖南大學(xué)
• 中國(guó)海洋大學(xué)
• 中南大學(xué)（第一批）
• 吉林大學(xué)
• 北京理工大學(xué)
• 大連理工大學(xué)
• 北京航空航天大學(xué)
• 重慶大學(xué)
• 電子科技大學(xué)
• 四川大學(xué)
• 華南理工大學(xué)
• 中山大學(xué)
• 蘭州大學(xué)
• 東北大學(xué)
• 西北工業(yè)大學(xué)
• 同濟(jì)大學(xué)
• 北京師范大學(xué)
• 中國(guó)農(nóng)業(yè)大學(xué)
• 國(guó)防科技大學(xué)
• 中央民族大學(xué)
• 華東師范大學(xué)
• 西北農(nóng)林科技大學(xué)
• 對(duì)外經(jīng)濟(jì)貿(mào)易大學(xué)211（第一批）

數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)專業(yè)（簡(jiǎn)稱大數(shù)據(jù)專業(yè)）的，目前開(kāi)設(shè)數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)專業(yè)的高校不低于400所，而大數(shù)據(jù)管理與應(yīng)用專業(yè)的高校已經(jīng)有30所以上。
?
就算有一些高校已經(jīng)開(kāi)設(shè)了大數(shù)據(jù)專業(yè)，但是目前能講《數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)專業(yè)》課程的師資能力有限，Hadoop、NoSQL、Python、Spark編程、機(jī)器學(xué)習(xí)、數(shù)據(jù)挖掘與分析等新技術(shù)知識(shí)，對(duì)于很多教授老師根本就沒(méi)有學(xué)習(xí)過(guò)、沒(méi)有實(shí)踐過(guò)和沒(méi)有應(yīng)用過(guò)，所以要能講好還是有局限性的，之前給我們單位做大數(shù)據(jù)培訓(xùn)的蒙老師講得不錯(cuò)“數(shù)據(jù)和信息，本身只是一種量級(jí)現(xiàn)象，大數(shù)據(jù)分析的價(jià)值就在于發(fā)現(xiàn)表象之下的關(guān)聯(lián)和本質(zhì)，并以此幫助人們做出更加正確的選擇或幫助企業(yè)做出商業(yè)決策。”

大學(xué)專業(yè)只是讓你知道某個(gè)知識(shí)是個(gè)什么概念、模式、應(yīng)用場(chǎng)景， 靠大學(xué)里專業(yè)的課程應(yīng)付工作很困難（一些校企合作課程還是比較容易適應(yīng)工作場(chǎng)景的），和跨專業(yè)的人比起來(lái)，唯一的優(yōu)勢(shì)就是知道這是什么，需要的是在工作中或者業(yè)余時(shí)間繼續(xù)努力的程度，多關(guān)注一些大型科技公司對(duì)這些知識(shí)的應(yīng)用或認(rèn)證，不一定是技術(shù)本身，還包括技術(shù)以外的東西。

大數(shù)據(jù)一般學(xué)習(xí)以下核心內(nèi)容：一般處理T+1數(shù)據(jù)（T：可能是1天、一周、一個(gè)月、一年）

? ? a、Hadoop ：一般不選用最新版本，踩坑難解決
? ? ? ? （common、HDES、MapReduce、YARN）
? ? ? ? 環(huán)境搭建、處理數(shù)據(jù)的思想
? ? b、Hive：大數(shù)據(jù)的數(shù)據(jù)倉(cāng)庫(kù)
? ? ? ? 通過(guò)寫SQL對(duì)數(shù)據(jù)進(jìn)行操作，類似于MySQL數(shù)據(jù)庫(kù)的sql
? ? c、HBase：基于HDFS的NOSQL數(shù)據(jù)庫(kù)
? ? ? ? 面向列存儲(chǔ)
? ? d、協(xié)作框架：
? ? ? ? sqoop（橋梁：HDFS《==》RDBMS）
? ? ? ? flume：搜集日志文件中的信息
? ? e、調(diào)度框架
? ? ? ? anzkaban
? ? ? ? 了解：crotab（Linux自帶）
? ? ? ? zeus（Alibaba）
? ? ? ? Oozie（cloudera）
? ? f、前沿框架擴(kuò)展：
? ? ? ? ? ? kylin、impala、ElasticSearch（ES）

大數(shù)據(jù)實(shí)時(shí)分析

? ? 以spark框架為主
? ? Scala：OOP（面向?qū)ο蟪绦蛟O(shè)計(jì)）+FP（函數(shù)是程序設(shè)計(jì)）
? ? sparkCore：類比MapReduce
? ? sparkSQL：類比hive
? ? sparkStreaming：實(shí)時(shí)數(shù)據(jù)處理
? ? kafka：消息隊(duì)列
? ? 前沿框架擴(kuò)展：flink
? ? ? ? 阿里巴巴：blink

大數(shù)據(jù)挖掘機(jī)器學(xué)習(xí)方向：

spark MLlib：機(jī)器學(xué)習(xí)庫(kù)
pyspark編程：Python和spark的結(jié)合
大數(shù)據(jù)推薦系統(tǒng)
大數(shù)據(jù)挖掘算法
python數(shù)據(jù)分析
python機(jī)器學(xué)習(xí)

人工智能對(duì)從業(yè)人員的素質(zhì)要求很高，數(shù)學(xué)水平和編程水平是兩個(gè)必須逾越的坎，目前市面上很多工作都是碩士起步。如果你真心想要在這行有大發(fā)展，良好的基礎(chǔ)是必須的，以下是人工智能專業(yè)課程：

（1）計(jì)算機(jī)科學(xué)知識(shí)：數(shù)據(jù)結(jié)構(gòu)和算法、Linux操作系統(tǒng)、計(jì)算機(jī)組成原理、計(jì)算機(jī)網(wǎng)絡(luò)通信技術(shù)、云計(jì)算基礎(chǔ)、數(shù)據(jù)庫(kù)等；（大一大二課程）
（2）基礎(chǔ)數(shù)學(xué)：高等數(shù)學(xué)、微積分、線性代數(shù)、概率論、運(yùn)籌學(xué)、凸優(yōu)化等；（大一大二課程）
（3）至少一門編程語(yǔ)言：Python、C++或Java等（大三課程）
（4）人工智能知識(shí)：Tensorflow、機(jī)器學(xué)習(xí)、深度學(xué)習(xí)框架PyTorch、機(jī)器學(xué)習(xí)框架Sk-learn、神經(jīng)網(wǎng)絡(luò)等；（大四或研究生課程）

但是，由于目前很多傻瓜化的工具出現(xiàn)，在大部分的業(yè)務(wù)場(chǎng)景下只需要一些很簡(jiǎn)單的代碼就可以搞定。

華為大數(shù)據(jù)挖掘認(rèn)證覆蓋《數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)專業(yè)》核心課程，華為大數(shù)據(jù)分析與管理專家覆蓋《大數(shù)據(jù)管理與應(yīng)用》核心課程。
?
華為HCIE大數(shù)據(jù)挖掘?qū)＜?、華為HCIE大數(shù)據(jù)分析與管理專家認(rèn)證需要經(jīng)過(guò)華為公司三個(gè)面試官的輪番面試、追問(wèn)，所以不僅考場(chǎng)一個(gè)考生的知識(shí)，還有表達(dá)，以及一些項(xiàng)目相關(guān)實(shí)踐經(jīng)驗(yàn)（目前全國(guó)HCIE大數(shù)據(jù)挖掘認(rèn)證、大數(shù)據(jù)分析與管理專家認(rèn)證人數(shù)不到100人）。

華為HCNA-Bigdata大數(shù)據(jù)認(rèn)證考試大綱：
第01章 大數(shù)據(jù)行業(yè)與技術(shù)趨勢(shì)
1.大數(shù)據(jù)時(shí)代
2.大數(shù)據(jù)的應(yīng)用領(lǐng)域
3.大數(shù)據(jù)時(shí)代的機(jī)遇和挑戰(zhàn)
4.華為大數(shù)據(jù)解決方案
第02章 HDFS分布式文件系統(tǒng)技術(shù)
1.HDFS概述及應(yīng)用場(chǎng)景
2.HDFS在FusionInsight HD產(chǎn)品的位置
3.HDFS系統(tǒng)架構(gòu)
4.關(guān)鍵特性介紹
第03章 MapReduce分布式離線批處理和Yarn資源協(xié)調(diào)
1.MapReduce和Yarn基本介紹
2.MapReduce和Yarn功能與架構(gòu)
3.Yarn的資源管理和任務(wù)調(diào)度
4.增強(qiáng)特性
第04章 Spark2x基于內(nèi)存的分布式計(jì)算
1.Spark概述
2.Spark原理與架構(gòu)
3.Spark在FusionInsight HD中的集成情況
第05章 HBase分布式NoSQL數(shù)據(jù)庫(kù)
1.HBase 基本介紹
2.HBase 功能與架構(gòu)
3.HBase 關(guān)鍵流程
4.HBase 華為增強(qiáng)特性
第06章 Hive分布式數(shù)據(jù)倉(cāng)庫(kù)
1.Hive概述
2.Hive功能與架構(gòu)
3.Hive基本操作
第07章 Streaming分布式流計(jì)算引擎
1.Streaming簡(jiǎn)介
2.系統(tǒng)架構(gòu)
3.關(guān)鍵特性介紹
4.StreamCQL介紹
第08章 Flink流計(jì)算處理和批處理平臺(tái)
1.Flink概述
2.Flink原理與技術(shù)架構(gòu)
3.Flink在FusionInsight HD中的集成情況
第09章 Loader數(shù)據(jù)轉(zhuǎn)換
1.Loader簡(jiǎn)介
2.Loader作業(yè)管理
第10章 Flume海量日志聚合
1.Flume簡(jiǎn)介及架構(gòu)
2.Flume關(guān)鍵特性介紹
3.Flume應(yīng)用舉例
第11章 Kafka分布式消息訂閱系統(tǒng)
1.Kafka簡(jiǎn)介
2.Kafka架構(gòu)與功能
3.Kafka關(guān)鍵流程
第12章 ZooKeeper集群分布式協(xié)調(diào)服務(wù)
1.ZooKeeper簡(jiǎn)介
2.ZooKeeper在FusionInsight HD產(chǎn)品的位置
3.系統(tǒng)架構(gòu)
4.關(guān)鍵特性介紹
5.與組件的關(guān)系
第13章 FusionInsight HD 解決方案介紹
1.FusionInsight HD 企業(yè)版概述
2.FusionInsight HD 特性介紹
3.FusionInsight HD 成功案例