[關於我]

二月 25th, 2010

東寫寫、西逛逛、喜歡學習新技術,提升解決問題的能力

Graduated from medical related field, did data mining for e-commerce,

learn big data solution, my goal is creating the power to be a problem solver!

Try to do something good for humanity and for fun!

Leave a comment if you have any question!

Mac|Lightroom安裝註冊 系統不相容怎麼辦

四月 15th, 2018

弄了半天,mac os想安裝修圖大師Lightroom,一直不得其門而入

Adobe因為已經全面升級為Cloud,所以一切都得透過網路上雲端來解決

網路一堆免費破解到底是什麼回事

我的筆電連免費試用七天都無法成功安裝

究竟該怎辦

Read the rest of this entry »

工商|臺灣資料工程協會第二季技術工作坊

四月 15th, 2018

臺灣資料工程協會第二季技術工作坊來了!

時間:2018-05-12 (六) 10:00~16:00

地點:請關注資料工程協會官網

主題

  • Randy Huang – 17 直播 (17 Media) Data Team Lead
  • 郭二文 (二哥) – Druid + Superset (資料的快速通道) – 緯創資通
  • 某神秘嘉賓 (被同事推坑中) – 痞客邦 – ElasticSearch 相關

想近距離與各位資工大神接觸,只有在台灣資料工程協會

意者報名Talk,請寄信 <jazz.wang@dataengineering.tw>

[Spark] 那些年我們一起追的Apache Spark 002

三月 13th, 2018

前情提要:[Spark] 那些年我們一起追的Apache Spark 001

上一篇講到Spark語言APIs在選擇的時候需要多留意版本相容

接著要聊「Spark的特色優勢」

Read the rest of this entry »

[Spark] 那些年我們一起追的Apache Spark 001

三月 7th, 2018

筆記今天在ithome的演講「那些年我們一起追的Apache Spark

演講內容分成三部分:Spark前世今生、Spark與Big Data、Spark初心者大哉問

Spark在2018年2月28日升級成2.3.0版

Spark從2009年誕生、2014年資料排序大賽中打敗Hadoop大哥,躍升為熱門新技術

至今在台灣仍有一席之地,究竟過去這幾年發生什麼事

對於Spark初學者、有意導入Spark到專案的工程師,又該留意什麼眉角呢?

Read the rest of this entry »

Spark|Apache Spark 2.3.0正式發佈

三月 5th, 2018

Spark 2.3就在228當天正式發佈!

新版本新增DataSource以及更新Structured Streaming

其中也包括pyspark效能的提升。

Read the rest of this entry »


total of 2380428 visits