ETC 資料的大數據應用與分析
講者: 賈斯汀 / ContentParty 時段:15:10~15:50 地點:3F – 第一會議室 講題: ETC 資料的大數據應用與分析 |
摘要:
介紹如何將 ETC 的資料引入 Hadoop eco-system 存放,ElasticSearch 做
real-time 的呈現,並分析 ETC 的資料後提供特定路段的行車時間預測。
介紹的重點:
1. 整體系統規劃介紹。
2. 如何做好資料的 ETL
3. 資料如何利用 hadoop 與 ElasticSearch 分工,做資料(預測)運算與呈現。
講者簡介:
曾在某電信 Big data 部門擔任萬事皆想 coding 的 Engineer,對 Hadoop
Eco-system 與 Spark 特別關注,最常用是 ElasticSearch XDD