曙海教育集團
全國報名免費熱線:4008699035 微信:shuhaipeixun
或15921673576(微信同號) QQ:1299983702
首頁 課程表 在線聊 報名 講師 品牌 QQ聊 活動 就業(yè)
 
Spark大數(shù)據(jù)處理及機器學(xué)習(xí)課程

 
   班級規(guī)模及環(huán)境--熱線:4008699035 手機:15921673576( 微信同號)
       每期人數(shù)限3到5人。
   上課時間和地點
上課地點:【上海】:同濟大學(xué)(滬西)/新城金郡商務(wù)樓(11號線白銀路站) 【深圳分部】:電影大廈(地鐵一號線大劇院站)/深圳大學(xué)成教院 【北京分部】:北京中山學(xué)院/福鑫大樓 【南京分部】:金港大廈(和燕路) 【武漢分部】:佳源大廈(高新二路) 【成都分部】:領(lǐng)館區(qū)1號(中和大道) 【沈陽分部】:沈陽理工大學(xué)/六宅臻品 【鄭州分部】:鄭州大學(xué)/錦華大廈 【石家莊分部】:河北科技大學(xué)/瑞景大廈 【廣州分部】:廣糧大廈 【西安分部】:協(xié)同大廈
最近開課時間(周末班/連續(xù)班/晚班):2020年3月16日
   實驗設(shè)備
     ☆資深工程師授課
        
        ☆注重質(zhì)量 ☆邊講邊練

        ☆合格學(xué)員免費推薦工作
        ★實驗設(shè)備請點擊這兒查看★
   質(zhì)量保障

        1、培訓(xùn)過程中,如有部分內(nèi)容理解不透或消化不好,可免費在以后培訓(xùn)班中重聽;
        2、培訓(xùn)結(jié)束后,授課老師留給學(xué)員聯(lián)系方式,保障培訓(xùn)效果,免費提供課后技術(shù)支持。
        3、培訓(xùn)合格學(xué)員可享受免費推薦就業(yè)機會。

課程大綱
 
第1章課程簡介
1-1課程簡介
第2章Docker知識快速入門
2-1什么是Docker技術(shù)
2-2為什么要使用Docker
2-3Docker中的基本概念
2-4Docker安裝
2-5Docker獲取鏡像
2-6Docker創(chuàng)建鏡像(1)
2-7Docker創(chuàng)建鏡像(2)
2-8Docker本地導(dǎo)入鏡像
2-9Docker保存、載入、刪除鏡像
2-10Docker容器的創(chuàng)建啟動和停止
2-11Docker命令進入容器后臺
2-12Docker命令導(dǎo)入導(dǎo)出和刪除容器
2-13Docker公有倉庫Docker Hub
2-14Docker私有倉庫的創(chuàng)建
2-15Docker中的數(shù)據(jù)卷
2-16Docker制作數(shù)據(jù)卷容器
2-17Docker數(shù)據(jù)卷容器實現(xiàn)備份恢復(fù)及遷移
2-18Docker容器綁定外部端口和IP
2-19Docker容器互聯(lián)
2-20Docker一個完整的例子
2-21Dockerfile基本結(jié)構(gòu)講解
2-22Dockerfile中常見指令講解
第3章Docker搭建Spark學(xué)習(xí)環(huán)境,一鍵部署So easy!
3-1Spark課程前言
3-2Spark基礎(chǔ)核心概念講解
3-3鏡像制作方案和集群網(wǎng)絡(luò)規(guī)劃及子網(wǎng)配置和SSH無密鑰登錄規(guī)
3-4Hadoop、HDFS、Yarn配置文件詳解
3-5Spark及Hive配置文件詳解
3-6Dockerfile制作Hadoop/Spark/Hive鏡
3-7啟動5個容器并啟動Hadoop、Spark、Hive
第4章PySpark基礎(chǔ)及運行原理快速入門,細(xì)致詳盡!
4-1pyspark模塊介紹
4-2SparkContext編程入口及Accumulator
4-3addFile方法和SparkFiles的get方法
4-4binaryFiles讀取二進制文件
4-5Broadcast廣播變量和setLogLevel日志級別
4-6文件的讀取和保存及runJob方法和parallelize
4-7union方法和statusTracker方法講解
4-8aggregate和aggregateByKey的異同
4-9collectAsMap和fold方法的理解及正確使用
4-10foreach和foreachPartitions原理
4-11histogram和lookup方法的使用詳解
4-12reduce、sampleStdev等方法的使用詳解
4-13sequenceFile序列文件的保存和讀取
4-14takeSample、treeAggregate方法使用
4-15coalesce、repartition方法使用技巧
4-16cogroup、combineByKey、reduceByK
4-17foldByKey、groupBy、groupWith幾個方
4-18集合操作intersection、subtract、unio
4-19join、fullOuterJoin等RDD關(guān)聯(lián)操作
4-20glom、mapPartitions、mapValues等方
4-21pipe、randomSplit、sampleByKey、s
4-22sortBy、sortByKey、values、zip、zi
4-23StorageLevel中常見的存儲級別
4-24SparkConf對象詳解
4-25廣播變量深入講解
4-26Accumulator累加器詳解
4-27StatusTracker Spark作業(yè)運行狀態(tài)監(jiān)控
第5章pyspark之SparkSQL入門到精通
5-1pyspark之SparkSQL模塊介紹
5-2SparkSession編程入口
5-3掌握創(chuàng)建DataFrame的8種方式
5-4range和udf用戶自定義函數(shù)講解
5-5agg聚合方法及數(shù)據(jù)緩存方法cache的講解
5-6colRegex及corr計算皮爾森相關(guān)系數(shù)
5-7crossJoin笛卡爾積和cube多維數(shù)據(jù)立方體
5-8explain、dropna及filter和where算子詳
5-9groupBy、intersect、join方法詳解
5-10rollup、replace和randomSplit方法講解
5-11summary統(tǒng)計方法及toPandas轉(zhuǎn)換為Pandas對
5-12GroupedData 對象
5-13DataFrame中的Column對象(上)
5-14DataFrame中的Columns對象(下)
5-15Catalog對象詳解
5-16Row對象詳解
5-17DataFrameNaFunctions空數(shù)據(jù)處理方法集合
5-18DataFrameStatFunctions統(tǒng)計模塊詳解
5-19DataFrameReader讀取外部數(shù)據(jù)生成DF
5-20DataFrameWriter將DF數(shù)據(jù)寫入外部存儲
5-21types 類型詳解
5-22functions 函數(shù)模塊詳解
第6章PySpark 機器學(xué)習(xí)模塊
6-1本地密集、稀疏向量和LabeledPoint向量
6-2本地矩陣和四種分布式矩陣
6-3Statistics基本的統(tǒng)計方法
6-4假設(shè)檢驗、隨機數(shù)據(jù)的生成和核密度估計
6-5Piplines構(gòu)建機器學(xué)習(xí)工作流
6-6TF-IDF詞頻你文檔數(shù)和Word2vec詞向量表示
6-7CountVectorizer和Tokenizer和正則特征
6-8PCA主成分分析、多項式核函數(shù)擴展特征空間、數(shù)據(jù)正則化、特征
6-9分桶器、向量組合器、SQL轉(zhuǎn)換器及元素放縮器
6-10特征個數(shù)過濾器、缺失值處理器、類別編碼器、向量類別判斷器
6-11邏輯回歸算法、原理、公式推導(dǎo)及二分類和多分類實踐
6-12完全理解L1,L2正則化及其作用
6-13決策樹算法原理、隨機深林、梯度提升樹代碼實踐
6-14多層感知機分類算法
6-15SVM支持向量機分類算法
6-16OneVsRest多分類算法
6-17Naive Bayes 樸素貝葉斯分類器
6-18Linear Regression線性回歸
6-19GLMs廣義線性模型
6-20回歸樹
6-21K-Means聚類算法
6-22二分K均值算法
6-23GMM高斯混合模型0
6-24基于ALS交替最小二乘法的協(xié)同過濾推薦算法電影推薦實踐
6-25FP-Growth頻繁項集推薦算法
6-26超參數(shù)網(wǎng)格搜索

 

 
  備案號:備案號:滬ICP備08026168號-1 .(2024年07月24日)....................
友情鏈接:Cadence培訓(xùn) ICEPAK培訓(xùn) EMC培訓(xùn) 電磁兼容培訓(xùn) sas容培訓(xùn) 羅克韋爾PLC培訓(xùn) 歐姆龍PLC培訓(xùn) PLC培訓(xùn) 三菱PLC培訓(xùn) 西門子PLC培訓(xùn) dcs培訓(xùn) 橫河dcs培訓(xùn) 艾默生培訓(xùn) robot CAD培訓(xùn) eplan培訓(xùn) dcs培訓(xùn) 電路板設(shè)計培訓(xùn) 浙大dcs培訓(xùn) PCB設(shè)計培訓(xùn) adams培訓(xùn) fluent培訓(xùn)系列課程 培訓(xùn)機構(gòu)課程短期培訓(xùn)系列課程培訓(xùn)機構(gòu) 長期課程列表實踐課程高級課程學(xué)校培訓(xùn)機構(gòu)周末班培訓(xùn) 南京 NS3培訓(xùn) OpenGL培訓(xùn) FPGA培訓(xùn) PCIE培訓(xùn) MTK培訓(xùn) Cortex訓(xùn) Arduino培訓(xùn) 單片機培訓(xùn) EMC培訓(xùn) 信號完整性培訓(xùn) 電源設(shè)計培訓(xùn) 電機控制培訓(xùn) LabVIEW培訓(xùn) OPENCV培訓(xùn) 集成電路培訓(xùn) UVM驗證培訓(xùn) VxWorks培訓(xùn) CST培訓(xùn) PLC培訓(xùn) Python培訓(xùn) ANSYS培訓(xùn) VB語言培訓(xùn) HFSS培訓(xùn) SAS培訓(xùn) Ansys培訓(xùn) 短期培訓(xùn)系列課程培訓(xùn)機構(gòu) 長期課程列表實踐課程高級課程學(xué)校培訓(xùn)機構(gòu)周末班 端海 教育 企業(yè) 學(xué)院 培訓(xùn)課程 系列班 長期課程列表實踐課程高級課程學(xué)校培訓(xùn)機構(gòu)周末班 短期培訓(xùn)系列課程培訓(xùn)機構(gòu) 端海教育企業(yè)學(xué)院培訓(xùn)課程 系列班
主站蜘蛛池模板: 青青青国产色视频在线观看国产亚洲欧洲国产综合| 色婷婷综合久久久久中文字幕| 91精品婷婷国产综合久久| 亚洲综合日韩精品欧美综合区| 久久综合给合久久国产免费| 欧美日韩国产码高清综合人成| 激情综合色综合啪啪开心| 久久久综合香蕉尹人综合网| 五月综合激情婷婷六月色窝| 国产精品日韩欧美久久综合| 久久本道久久综合伊人| 青青综合在线| 欧美日韩国产综合视频在线看| 亚洲欧美日韩综合一区| 国产精品国产欧美综合一区| 婷婷五月六月激情综合色中文字幕| 久久综合久久久| 久久青青草原综合伊人| 狠狠色丁香婷综合久久| 狠狠色综合网站久久久久久久高清| 亚洲图片综合区| 天天操天天干天天综合网| 国产亚洲欧洲Aⅴ综合一区| 亚洲精品欧美综合| 亚洲精品综合久久| 色综合久久久久久久久五月| 久久综合九色综合欧美就去吻| 欧美亚洲综合另类成人| 亚洲成a人v欧美综合天堂| 欧美日韩国产综合一区二区三区| 国产成人综合久久综合| 欧美日韩国产码高清综合人成| AV色综合久久天堂AV色综合在| 欧美亚洲综合另类| 五月天激激婷婷大综合丁香| 亚洲狠狠爱综合影院婷婷| 成人久久综合网| 色综合综合色综合色综合| 天天做天天爱天天综合网| 亚洲国产一成久久精品国产成人综合| 亚洲综合成人网|