大数据数据分析处理:以国道高速公路车流数据分析运用为例(2023夏季班)
教师: 王經篤
2023/05/01~2023/12/31
9时数/9周次 (报名结束)

概要

本课程利用「高快速公路整体路网交通管理系统」与「高速公路电子收费系统」所提供的开源数据(Traffic Data Collection System, TDCS),作为大数据分析处理的数据源。
另一方面,亚洲大学与亚马逊 (Amazon)于西元2021 年开始已有签订AWS Academy program 学术学程合作协定,故亚洲大学可以在本课程中,提供注册(电子邮件)修课学生AWS Academy Learner Lab云端服务平台之实做环境,以便操作国道车流大数据处理与分析。
本课程将会在前期教导学员们如何透过亚马逊的Amazon Web Services(AWS)来下载、保存和分析国道高速公路车流数据,后期课程则教导学员们如何使用可视化工具来解读国道高速公路车流数据和其分析结果。
学生可以借由这些在AWS云端的实作,获得处理大数据分析经验,未来有机会可以更近一步进修取得AWS 国际证照,增加就业机会。

#数据分析

课程目标

  • 大數據的資料儲存與管理。
  • 國道高速公路電子匝道車流分析。
  • AWS雲端應用服務之大數據分析處理實務操作經驗。

授课教师

王經篤 老師

教師簡介

亞洲大學資訊工程系副教授,目前研究以『從巨量標籤化序列資料中,抽取最大重複序列』之相關應用為主,如:(1)生物資訊-跨物種全基因體DNA序列比對(2)交通大數據:國道電子匝道與台中市公車搭乘人數之分析。因為序列比對研究上大量計算需求,故投入學習如何使用雲端計算平台,目前已經通過AWS Certified Solutions Architect – Associate(SAA)助理級架構師之認證考試。

课程进度表

单元 1:数据介绍与工具介绍

单元 2:数据下载-如何大量自动下载交通数据-网络爬虫

单元 3:数据可视化-高速公路计费匝道位置

单元 4:数据保存与备份-AWS S3 (Simple Storage Service)

单元 5:关连式数据库 数据导入-AWS Relational Database (RDS)

单元 6:数据可视化-AWS QuickSight

单元 7:非关连式数据库 数据导入- AWS DynamoDB

单元 8:大数据数据分析 云端数据仓库-AWS RedShift

单元 9:期末专题展示

评分标准

作業:佔總成績  20 %

o(上傳YouTube 影片URL) 3~5 分鐘)

oGoogleMap 標示:你想要觀察國道高速公路『特定路段』的『交流道』(Interchanges)與『電子收費匝道』(Gantries)

期中考:佔總成績 30 %

o(YouTube 影片URL) 510 分鐘)

o1) 選擇你有興趣交通資料與說明格式 (2) 匯入台灣國道收費電子匝道,並於GoogleMap上標示 你有興趣的匝道位置與路段,說明原因。 (3) 檢查完成特定時段資料下載 (4)上傳『國道高速公路交通資料』雲端儲存-AWS S3

期末考:佔總成績  50%

o(YouTube 影片URL) 510 分鐘)

o交通部臺灣區國道高速公路局「交通資料庫-大數據雲端資料分析

o(1) 資料匯入 AWS RDS (2) 特定匝道-不同車種-週期性車流統計 (3) 雲端資料視覺化-利用統計分析,說明你觀察到的車流是否有規則或發現例外(異常)

通过标准


课程及格标准:60分满分:100分

先修科目或先备能力

o計算機概論

oProgramming Language: 如:Python

oDatabase: SQL

其它

本課程證書費用:250元

如何申請電子版證書?

1.點選右上方的「小白人」。

2.點選「證書下載」。


3.畫面即會轉到申請證書系統中,請點選「我要申請證書」。

4.點選「我要搜尋」開始申請證書。


5.ewant平台僅提供電子版證書,確認繳費成功後,請點選「我已申請的證書」,再點選「我要搜尋」下載您申請的證書電子檔。

詳細證書下載流程說明請點這裡