太原電腦it培訓學校
咨詢熱線 400-001-5729
課程詳情 學校簡介 學校地址 申請試聽
關鍵詞：太原云計算培訓學校怎么樣
云計算spark內(nèi)存計算培訓班
1
課程內(nèi)容
| 階段：spark內(nèi)存計算 | |
| Python課程 | Python語言的部分大家在學習后可以完全掌握Python的精髓，并通過這部分的學習給大家打好一個基礎，在其他計算框架中多語言的使用上都會涉及到Python這門流行的語言。同時課程里會通過機器學習的案例讓大家學習Python的同時去更好的理解機器學習。 |
|
1) 介紹Python以及特點
2) Python的安裝
3) Python基本操作（注釋、邏輯、字符串使用等）
4) Python數(shù)據(jù)結(jié)構(gòu)（元組、列表、字典）
5) 使用Python進行批量重命名小例子
6) Python常見內(nèi)建函數(shù)
7) 更多Python函數(shù)及使用常見技巧
8) 異常
9) Python函數(shù)的參數(shù)講解
10) Python模塊的導入
11) Python中的類與繼承
12) 網(wǎng)絡爬蟲案例
13) 數(shù)據(jù)庫連接，以及pip安裝模塊
14) Mongodb基礎入門
15) 講解如何連接mongodb
16) Python的機器學習案例
|
|
| Scala課程 | 在此部分內(nèi)，將更注重scala的各種語言規(guī)則與簡單直接的應用，而不在于其是如何具體實現(xiàn)，通過學習本課程能具備初步的Scala語言實際編程能力。本部分課程也可以視為大家下面學習Spark課程的鋪墊，供大家掃盲熟悉Scala，提前進行熱身運動。 |
|
1) scala解釋器、變量、常用數(shù)據(jù)類型等
2) scala的條件表達式、輸入輸出、循環(huán)等控制結(jié)構(gòu)
3) scala的函數(shù)、默認參數(shù)、變長參數(shù)等
4) scala的數(shù)組、變長數(shù)組、多維數(shù)組等
5) scala的映射、元組等操作
6) scala的類，包括bean屬性、輔助構(gòu)造器、主構(gòu)造器等
7) scala的對象、單例對象、伴生對象、擴展類、apply方法等
8) scala的包、引入、繼承等概念
9) scala的特質(zhì)
10) scala的操作符
11) scala的高階函數(shù)
12) scala的集合
13) scala數(shù)據(jù)庫連接
|
|
|
Spark 大數(shù)據(jù)處理 |
本部分內(nèi)容全面涵蓋了Spark生態(tài)系統(tǒng)的概述及其編程模型，深入內(nèi)核的研究，Spark on Yarn,Spark Streaming流式計算原理與實踐，Spark SQL,Spark的多語言編程以及SparkR的原理和運行。不僅面向項目開發(fā)人員，甚至對于研究Spark的學員，此部分都是非常有學習指引意義的課程。 |
|
1) Spark介紹
2) Spark應用場景
3) Spark和Hadoop MR、Storm的比較和優(yōu)勢
4) RDD
5) Transformation
6) Action
7) Spark計算PageRank
8) Lineage
9) Spark模型簡介
10) Spark緩存策略和容錯處理
11) 寬依賴與窄依賴
12) Spark配置講解
13) Spark集群搭建
14) 集群搭建常見問題解決
15) Spark原理核心組件和常用RDD
16) 數(shù)據(jù)本地性
17) 任務調(diào)度
18) DAGScheduler
19) TaskScheduler
20) Spark源碼解讀
21) 性能調(diào)優(yōu)
22) Spark和Hadoop2.x整合：Spark on Yarn原理
|
|
|
Spark Streaming 實時計算 |
|
|
1) Spark Streaming：數(shù)據(jù)源和DStream
2) 無狀態(tài)transformation與有狀態(tài)transformation
3) Streaming Window的操作
4) sparksql 編程實戰(zhàn)
5) spark的多語言操作
6) spark新版本的新特性
|
|
|
Spark MLlib 機器學習 |
前面課程大家已經(jīng)掌握代機器學習工具R，而后又學習了第二代機器學習工具Mahout，這里大家將會學習第三代機器學習工具MLlib，大家不僅將會了解MLlib的組件及其調(diào)用，而且會通過Spark的項目深入了解MLlib的現(xiàn)實使用。通過此部分大家也可以看出課程不僅著眼于現(xiàn)在，更是著眼于大家的未來在行業(yè)中的發(fā)展。 |
|
1) 介紹 a) Spark MLlib組件介紹 b) 基本數(shù)據(jù)類型 2) 回歸算法 c) 廣義線性模型 d) 邏輯回歸 3) 分類算法 e) 樸素貝葉斯 f) 決策樹 g) 隨機森林 4) 第四章 推薦系統(tǒng) 5) 第五章 聚類 h) Kmeans i) Sparse kmeans j) Kmeans++ k) Kmeans II l) Streaming kmeans m) Gaussian Mixture Model |
|
|
Spark GraphX 圖計算 |
|
|
a) 二分圖
b) 概述
c) 構(gòu)造圖
d) 屬性圖
e) PageRank
|
|
| 項目實戰(zhàn) | 智慧城市大數(shù)據(jù)分析項目 城市中每時每刻都會產(chǎn)生海量數(shù)據(jù)，應用數(shù)據(jù)挖掘、機器學習和可視化技術(shù)，分析出的數(shù)據(jù)可以改進城市規(guī)劃，緩解交通擁堵，抓捕罪犯。項目會使用真實的數(shù)據(jù)。 涉及到所學知識如下： |
|
項目技術(shù)架構(gòu)體系：
a) 實時流處理 Kafka，Spark Streaming
b) 分布式運算 Hadoop，Spark
c) 數(shù)據(jù)庫 Hbase，Redis
d) 機器學習 Spark Mllib
e) 前臺web展示數(shù)據(jù) Struts2，echart
|
|
| 手機軟件推薦系統(tǒng)項目 使用數(shù)據(jù)來自某互聯(lián)網(wǎng)平臺手機助手，項目目標通過機器學習所學知識挖掘平臺手機用戶喜好，給用戶準確推薦手機軟件，類似360手機助手、華為手機助手、百度手機助手推薦功能。 | |
|
項目技術(shù)架構(gòu)體系：
a) 分布式平臺 Hadoop，Spark
b) 數(shù)據(jù)清洗 Hive
c) 數(shù)據(jù)分析 R RStudio
d) 推薦服務 Dubbox
e) 規(guī)則過濾 Drools
f) 機器學習 MLlib
|
|
| 網(wǎng)絡流量異常檢測項目 項目目標通過機器學習所學知識檢測出異常，包括檢測欺詐，網(wǎng)絡攻擊，服務器傳感器故障燈（本項目用戶現(xiàn)在熱門的電商網(wǎng)站的流量分析檢測，比如京東，天貓，淘寶等）。項目功能應用于各大互聯(lián)網(wǎng)平臺中，各大互聯(lián)網(wǎng)平臺均需要網(wǎng)絡安全予以重視和預防以及檢測。 | |
|
項目技術(shù)架構(gòu)體系： a) 數(shù)據(jù)存儲 Hadoop
b) 數(shù)據(jù)準備 Spark
c) 數(shù)據(jù)分析 R RStudio
d) 機器學習 MLlib
e) 數(shù)據(jù)評價及調(diào)參
|
|
太原電腦it培訓學校
尚學堂教育中心成立，現(xiàn)旗下業(yè)務覆蓋：JAVA開發(fā)技術(shù)培訓、高級架構(gòu)師培訓、大數(shù)據(jù)云計算培訓、人工智能python培訓、H5前端開發(fā)培訓、項目開發(fā)業(yè)務、團隊激勵、在線教育集群業(yè)務。
事業(yè)部遍布北京、上海、廣州、長沙、成都、太原、鄭州、哈爾濱、深圳、武漢等十多個城市。
尚學堂12大精英團隊，覆蓋IT行業(yè)十大領域，實戰(zhàn)團隊240人，服務學員累計超過10萬人，就業(yè)合作企業(yè)數(shù)量500+。
尚學堂優(yōu)勢
12大精英團隊+各類實戰(zhàn)項目，真正實現(xiàn)1+1>10的目標效果。幫助學員迅速成長，持久騰飛，成就學員“高富帥”人生；幫助企業(yè)技術(shù)和團隊成長，成就百年中華名企；
公司愿景
成為提供全品類、線上和線下綜合教育服務的中心，為教育插上“實戰(zhàn)化和高效率”的翅膀，解決教育不公平和低效率問題。
公司使命
立志解決教育不公平和低效率問題，幫助千千萬萬被傳統(tǒng)教育方式耽誤的人，傳授實用、前沿的知識，成就學員個人理想，為愛你的人和你愛的人創(chuàng)造美好的生活。
學校名稱：太原電腦it培訓學校
固定電話：400-001-5729
授課地址：太原市小店區(qū) 預約參觀
