健行科技大學
健行科技大學推廣教育中心,EXTENSION EDUCATION CENTER, UCH
專業技能/證照/公職/培訓中心
Spark⼤數據分析架構實作
IB04 Spark⼤數據分析架構實作
上課日期  111/09/24 - 111/11/19
上課時段  09:00-16:00(六)
課程時數  48 小時
授課老師  何偉全

適合對象

✔完全沒有學過程式。
✔有程式語⾔基礎但是沒有學過Python。
✔想進入⼤數據領域者。
✔想成為資料⼯程師。

報名資格

✔熟悉Windows作業系統
✔具備程式設計邏輯概念

課程介紹

Spark的運算框架流程與記憶體優化技術引進,使得巨量資料的運算開發更有效率,處理的量級與時間大幅縮短。此外,大量根植於Spark的生態圈在開源社群蓬勃發展,範圍涵蓋了結構化資料處理、機器學習、圖形開發,而且,Spark降低了維護不同工具的管理負擔。優良的開源專案亦會被整合入Spark核心專案,使Spark在大數據分析上成為強而有力的工具。

課程將帶領學員學習:
1.學習Python程式語⾔。
2.進入資料⼯程的世界。
3.學習使⽤Spark來做資料清洗。
4.學習資料串流處理。

授課老師

何偉全
專業Android課程師資
●建碁股份有限公司 技術主任 ●美商英特維數位科技 資深軟體工程師
●美商和寶科技 資深軟體工程師 ●ZiiLABS 資深應用工程師 ●台灣科技大學 兼任助理教授級專家 ●創樂遊戲股份有限公司 技術長 ●健行科技大學 課程講師 ●新音科技股份有限公司 軟體總監

教學成果/個人作品

教學方法

1.完整的學習開發環境建置。
2.從無到有的程式範例。
3.⼤量的程式練習。
4.實務案例練習。

課程費用

原價 18000元 特價 12240 元(含教材費及材料費)
適用優惠辦法  瞭解優惠辦法

教材材料

教師自編講義

證書說明

本課程結業後發予「結業證明」,不授予學位證明書。

課程諮詢

 涂先生
 03-4581196 分機 3777(假日請轉接 3771-3772)

學習心得

陳OO
因工作上會用到資料庫與Excel,所以來參加課程提升工作技能,想利用VBA將資料從資料庫抓出,並在excel上處理過濾與分析得出想要的資訊。
Python程式語⾔基礎: 1. 開發環境 2. 資料型態與變數 3. 運算元與運算⼦ 4. 條件控制
09/24(六)
09:00-16:00,6 hr
何偉全
Python基礎: 1. 條件控制 2. 迴圈、迭代與特殊寫法 3. 內建函式與⾃訂函式
10/01(六)
09:00-16:00,6 hr
何偉全
雙十連假,停課一次
10/08(六)
推廣教育中心
Python進階: 1. Lambda 2. 模組管理 3. 類別與物件
10/15(六)
09:00-16:00,6 hr
何偉全
進入Spark世界: 1. Spark環境安裝 2. RDD基本概念 3. Spark分散式架構說明 4. 執⾏Spark應⽤程式
10/22(六)
09:00-16:00,6 hr
何偉全
Spark Dataframe操作基礎: 1. 建立DataFrame 2. 輸出經過Spark處理的資料 3. DataFrame基本操作: collect/withColumn/Where/limit 4. DataFrame與DataSet
10/29(六)
09:00-16:00,6 hr
何偉全
Spark資料操作: 1. 載入資料到DataFrame: CSV、JSON、Parquet資料格式介紹 2. SQL語法介紹 3. Spark SQL操作
11/05(六)
09:00-16:00,6 hr
何偉全
Spark Dataframe操作: 1. Grouping操作 2. Joining操作 3. Aggregation操作
11/12(六)
09:00-16:00,6 hr
何偉全
Spark整合Kafka資料串流: 1. Spark Streaming概念 2. 串流應⽤實作 3. Kafka介紹與安裝 4. 實作Spark與Kafka整合
11/19(六)
09:00-16:00,6 hr
何偉全
以上師資與課程內容時間場地等相關資訊,本中心保留因應實際情況調整權利,詳情請來電洽詢!

健行科技大學 推廣教育中心

報名