作者pk790127 (<>)
看板R_Language
標題[問題] SprkR rJava 安裝
時間Sat Jul 23 23:23:42 2016
ctrl + y 可以刪除一整行，請將不需要的內容刪除
文章分類提示:
- 問題: 我想使用R裡面的SparkR這個套件,不論是windos或是linux系統
[問題類型]:
實驗室想要使用Hadoop或是Spark平行式的運算方式提升計算功能,主要研究Spark的方式
已查詢過有SparkR的套件,但是怎麼都裝不起來,不論是linux 或是 windos
[軟體熟悉度]:
請把以下不需要的部份刪除
入門(寫過其他程式，只是對語法不熟悉)
[問題敘述]:
請簡略描述你所要做的事情，或是這個程式的目的
linux: 已將R 與 Rstudio scala spark 灌好,碰到
'devtools’&"rJava" is not available (for R version 3.2.2)這種類似的問題
導致後面無法進行 (參考對岸或是外國教學網站)
Windos: 主要是參考:
https://www.youtube.com/watch?v=oG0HZogxEUc
這個網站的教學,但是到了install_github後面將SparkR套件載下來就出錯了!
還是我漏裝了一些東西呢?
想請問有人有使用過sparkR這個套件 或是有更詳細的安裝教學網站(原文也可以)
能提供我參考嗎 謝謝
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 140.116.86.109
※ 文章網址: https://webptt.com/m.aspx?n=bbs/R_Language/M.1469287424.A.FC6.html
1F：→ celestialgod: 直接下載spark的pre-build然後把.libPath指到 07/24 17:59
2F：→ celestialgod: spark-bin/R/lib就可以正常library(SparkR)了 07/24 17:59
3F：→ celestialgod: github上面那個已經是之前的SparkR版本 07/24 18:00
5F：→ celestialgod: 不過windows上還要去下載winutils才行跑 07/24 18:03
6F：→ celestialgod: linux的話 我還沒試過(攤手 07/24 18:03
7F：→ pk790127: 其實celes大的網址我也有找到..剛剛試的時候原來是資料 07/24 19:35
8F：→ pk790127: 夾 多弄了第二層,現在sparkR已經安裝好了 謝謝 07/24 19:36
9F：→ pk790127: 可是想請問 winutils 載下來要放在哪? 這是hadoop吧? 07/24 19:36
10F：→ pk790127: 是他的分散式資料系統嗎? (HDFS) 謝謝 07/24 19:37
11F：→ celestialgod: PATH中設定HADOOP_HOME，然後指向winutils的位置 11/24 23:16