作者:
Wush978 (拒看低質媒體)
2015-07-22 22:38:44dplyr 這個套件除了可以對R 的data.frame做處理之外,
也可以對SQL-like Data Source做資料ETL。
所以我是非常推薦版友把時間投資在這類套件之上。
這裡分享我一個實務經驗與玩具專案:
https://github.com/wush978/dplyrSparkSQL
我利用這個套件串接Apache Spark這個高效能資料處理平台,
只要利用和dplyr完全一樣的語法,
可以輕鬆在一分鐘內處理億筆資料的整理。
我認為這類的介面會越來越多,因為不算難擴充(我自己花一個週末就寫了一個)
所以花時間投資dplyr ,未來的潛力是滿高的。