重新查詢　｜　回學校首頁

1101學期 課程基本資料/Course Information
系所 / 年級
資工系  3年級
課號 / 班別
EE300016 / A
學分數
 3學分
選 / 必修
 選修
科目中文名稱
 大數據資料處理
科目英文名稱
 Big Data Information Processing
主要授課老師
 王經篤
開課期間
 一學年之上學期
人數上限
 48 人
已選人數
 40 人
課程種類
 一般課
課程類別
 系定
學程
 專業學程(人工智慧學程)
全英授課
 否

起始週 / 結束週 / 上課地點 / 上課時間

第1週 / 第18週 / I627 / 星期1第4節
第1週 / 第18週 / I627 / 星期1第5節
第1週 / 第18週 / I627 / 星期1第6節

請各位同學遵守智慧財產權觀念；請勿非法影印。
Please observe Intellectual Property Rights (IPR), not to make illegal copies.

教學綱要/syllabus

第一部分/Part I(※依課程委員會審議之內容決議填入)
一、教學目標所要達成之能力培養項目:
[依據課程委員會審議通過之課程與基本素養/核心能力關聯表填寫]
Item 基本素養/核心能力 Core Literacy/Core Competencies 相關性 Relevance
高度相關 中度相關
1 具備電腦基礎理論與實作能力

.

.
2 具備邏輯分析與程式設計能力

.

.
3 擁有使用資訊技術來分析解決相關問題之能力 tick

.
4 具備至少一項專業學程之知識及技術能力 tick

.
5 具備團隊協調合作之能力

.

 tick
6 具備人文通識與專業倫理認知之能力

.

.
7 具備學習資訊工程相關新知和因應領域發展趨勢之能力

.

.

SDGs Item SDGs目標
SDGs goal		 SDGs描述
SDGs description
無相關項目
No related items
二、教學目標
(Objective)
 1.認知面：[使學生理解、應用、分析、綜合、比較、推論、評估本課程之理論與概念]：
     瞭解大數據應用
2.技能面[使學生能獲得運用與實做本課程理論與概念之技巧]：
     解決大數據計算問題的方式
3.情意面[能引發學生對本課程之興趣，激發學生學習動機，增加觸類旁通與自主學習]：
     動手處理大數據資料的專題經驗,激發學生未來對於大數據處理與應用的發展
三、符合教學目標之課程內容設計
 (Notes for MOOCs: jdwang) Hadoop MapReduce Programming with Java (Single Node in MS-Window) [2] Windoop Download, Installation and Test(pdf解說) Download: (Hadoop 2.7.1) windoop_2.7.1_with_HBase_jre8_x64_zh_TW.7z (感謝 Windoop 林奇暻 先生提供) [2-1-1]:Windoop Download [2-1-2]:Windoop Install [2-1-3]:Windoop Start.bat NameNode HDFS Web http://localhost:50070/ Resource Manager Web http://localhost:8088 [2-1-4]:Windoop Program Testing : PresentElection WordCount Examples WordCount_jdwang_2016_10_12.zip 匯入外部 jar 1. "\windoop\hadoop\share\hadoop\common\*.jar 2. "\windoop\hadoop\share\hadoop\common\lib\*.jar 3. "\windoop\hadoop\share\hadoop\hdfs\*.jar 4. "\windoop\hadoop\share\hadoop\mapreduce\*.jar 5. "\windoop\hadoop\share\hadoop\yarn\*.jar 修改"WordCount_jdwang.java" 參數："input output_學號" 環境： HADOOP_HOME=>${eclipse_home}\..\hadoop PATH=> %PATH%;${eclipse_home}\..\hadoop\bin
四、先修科目
(Pre Course)
   程式設計

第二部分/Part II
一、多元教學方法
(Teaching Method)
 由學生自訂學習目標與抱負水準  案例或故事討論  講述
 學生課後書面報告  小組討論  學生上台報告  腦力激盪
 學生實作  角色演練  習題練習  影片欣賞與討論
 採訪  e化教學  審議式民主  觀察與資料收集
 一分鐘回饋  磨課師課程  翻轉教學  其他
 企業參訪  與課程有關之實務學習  見習  實習
 協同教學  服務學習課程  其他系課程委員會核定之實務學習項目  以「技能導向」的教學設計
 以「病人為中心」的教學設計  問題導向教學法  設計導向教學法  專題導向教學法
 總結性教學法  導入USR計畫成果  一分鐘環保  同步和非同步設計
 整體課程鷹架設計  問題導向設計  主題或個案討論  數位説故事
 引導學生有效學習策略（如，WSQ, WPAQ, SQ3R）  群體決策（線上投票）  同儕合作專題學習  同儕回饋
 同儕亙評  同儕出題  同儕師徒制（高分和低分一組）  同儕透過網路協作共同完成作業或專題
 小組報告  小組競賽  課堂中每段落實施簡易小測驗  學生訂正學習策略
 學生學習行為增強措施  課堂末回饋（學生回饋學習心得和疑問）  學生線上學習歷程分析  線上搶答
二、多元教學方法與教育目標的連結
您所勾選之教學方法與何種基本素養/核心能力有關? 345
1.講述
2.學生課後書面報告
3.學生上台報告
4.學生實作
三、參考書目 (Reference)
[符合教學目標之參考書目]
中文參考書目 Python+Spark 2.0+Hadoop 機器學習與大數據分析實戰,林大貴,出版商: 博碩,出版日期： 2016-10-03,語言: 繁體中文,ISBN: 9864341537,ISBN-13: 9789864341535
部落格　http://pythonsparkhadoop.blogspot.tw ,



英文參考書目 Python+Spark 2.0+Hadoop 　http://pythonsparkhadoop.blogspot.tw ,
四、教學進度
(Syllabi)
[符合教學目標之教學進度]
 教學進度與何種基本素養/核心能力有關?
日期
(Date)		 授課內容
(Course Contents)		 授課教師
(Teacher)		 核心能力 授課方式
(Teaching methods)
345
2021/9/13 課程簡介
Introduction		 王經篤     
2021/9/20 Windoop 安裝 + 範例程式 Present Election
Windoop Install + Present Election		 王經篤     
2021/9/27 Windoop 範例程式 Wordcount
Windoop Example program Wordcount		 王經篤     
2021/10/4 Windoop HDFS
Windoop HDFS 		王經篤     
2021/10/11 TDCS(Traffic Data Collection System) + GoogleMap
TDCS(Traffic Data Collection System) + GoogleMap		 王經篤     
2021/10/18 TDCS 資料+自動下載
Web Robot for TDCS Data download		 王經篤     
2021/10/25 TDCS資料擷取 via Hadoop MapReduce
TDCS Information extraction via Hadoop MapReduce		 王經篤     
2021/11/1 期中專題(30%):專題:『交通部高速公路閘道資料』資訊擷取
Middle project (30%): TDCS information extraction		 王經篤 自主學習
Self-learning
2021/11/8 (書面報告)期中專題(30%):專題:『交通部高速公路閘道資料』資訊擷取
The report of middle project (30%): TDCS information extraction		 王經篤 自主學習
Self-learning
2021/11/15 Windoop Cluster setup (叢集設定) and WordCount (1)
Windoop Cluster setup and WordCount (1)		 王經篤     
2021/11/22 Windoop Cluster setup and WordCount (2)
Windoop Cluster setup and WordCount (2) 		王經篤     
2021/11/29 TDCS MRP Data + Google Map TDCS MRP (Maximal Repeat Patterns) using Windoop Cluster
TDCS MRP Data + Google Map TDCS MRP (Maximal Repeat Patterns) using Windoop Cluster 		王經篤     
2021/12/6 AWS EMR (Elastic Map Reduce) setup + WordCount
AWS EMR (Elastic Map Reduce) setup + WordCount		 王經篤     
2021/12/13 TDCS MRP Statistics using AWS EMR
TDCS MRP Statistics using AWS EMR		 王經篤     
2021/12/20 TDCS MRP Statistics Analysis using Python (1)
TDCS MRP Statistics Analysis using Python (1)		 王經篤     
2021/12/27 TDCS MRP Statistics Analysis using Python (2
TDCS MRP Statistics Analysis using Python (2		 王經篤     
2022/1/3 期末專題: AWS Educate + Applications 如何利用雲端平台(AWS Educate) 處理大數據資料分析,
Final Project Presentation: Information retrieval from TDCS MRP data		 王經篤     
2022/1/10 (書面報告)期末專題: AWS Educate + Applications 如何利用雲端平台(AWS Educate) 處理大數據資料分析,
Final Project Report: Information retrieval from TDCS MRP data		 王經篤     
五、多元評量方法
(Evaluation)
[所勾選評量方法之評分加總為100分]
評量方式 分數 評量方式 分數
 實作測驗  15  期中筆試   0
 隨堂筆試測驗   0  期末筆試   0
 小組作業   0  期中報告  30
 服務日誌   0  期末報告  40
 口試   0  專題報告   0
 個人上台報告   0  實作作品與反思   0
 小組上台報告   0  前後測比較進步與成長   0
 出席狀況  5  課堂參與與表現  10
 心得與反思報告   0  其他   0
六、多元評量方法與教育目標的連結
您所勾選之評量方法與何種基本素養/核心能力有關? 345
1.實作測驗
2.期中報告
3.期末報告
4.出席狀況
5.課堂參與與表現
七、講義位址(http://)
 http://dns2.asia.edu.tw/~jdwang/TeachingCourses/BigDataInformationProcessing/110_1_BigDataInformationProcessing.html