varOne – An Open Source Monitor for Apache Spark
講者: Stana 何永安 / 亦思科技 時段:15:10~15:50 地點:3F – 第二會議室 講題: varOne – An Open Source Monitor for Apache Spark |
摘要:
varOne 是亦思科技開源的 Spark 監控工具,能夠持續地收集 Spark 任務上的所
有日誌資訊(包含 Event Log 以及 Metrics),並以多維度的方式呈現這些日誌
資訊。varOne 讓開發者或維運人員能夠在同一個畫面分享這些 Spark 日誌資訊外,
也讓監控 Spark 任務的過程變得更加容易且更有效率
講者簡介:
5年以上軟體產品研發經驗,現任亦思科技系統架構師,負責公司軟體架構設計研發與
顧問服務,近年來多關注於軟體架構設計整合以及 Hadoop 上相關開源的技術,包含
Hadoop、HBase、Spark、Solr等。
- 用 Jupyter Notebook hold 住一個上線 Spark Machine Learning 專案實戰
- 消費者網路行為與偏好