R_Language 板


LINE

- 討論: 當你自己已經有答案,但是也想聽聽版友意見時 [問題類型]: 效能諮詢(我想讓R 跑更快) [軟體熟悉度]: 使用者(已經有用R 做過不少作品) [問題敘述]: 各位 R 領域專業的大大們好 , 小弟最近想開始用R的平行計算功能 已經拜讀過 Wush大的平行計算筆記 , 也照一些原文網站內容用Terminal 安裝好 OpenMP 跟 用R 處理好 Rmpi了 , 也成功repeat 一些平行 的小範例 不過我我要做的運算主要會用到一些 Machine Learning的套件,但 我在試跑時會遇到一些問題像是 , 開始跑之後表示沒有該套件的方 法,我後來是在裡面直接做 套件 require處理 , 但還是會有一些載 入資料,還有相關引數的問題 想詢問各位是否知道什麼資源可以學R的平行的一些訊息 , 因為我的 運算只有特定段落有需要平行 , 所以我希望能熟悉 R 的平行,像是我 要把工作分給 Slave 時, 讓他們可以完全接收原本 R kernel已載入 的一些資訊,並把套件跟需求物件正確的傳給所有 Slave 另外如果有詳細 R 怎麼做資源分配的資訊也麻煩各位指點了 , 因為 目前這幾個parallel 的範例我都還沒看到資源分配相關的資訊 , 有點 疑惑 以上主要是針對 CPU 平行問的 , 手邊也有GPU Cluster , 如果有人 有推薦的GPU 在 R 的應用 , 也感激不盡 , 不過對CUDA還不熟 ,所以 先不打算用CPU的部分 另外想問一下有沒有人知道 OpenMP 還有 Rmpi得設置要怎麼只建置 在特定User下面 , 由於手邊的Cluster 有部分沒有 Root , 所以在 管理員有空前我可能得自己處理 , 以前裝package是用只建置在User 底下的方式 , 但mpi 還有 Rmpi有部分步驟要用command line裝,我 安裝時一直被擋掉說我權限不足 [你的答案]: 有想到幾種載入方式還在試 , 但相對還不是我想要的型式 , 覺得另外 自己加入載入段落不見得是好的 , 想了解要怎麼用 R 正確且有效率的 做這件事 另外小弟現在是先用筆電做小資料集的小規模計算測試 , 等大致熟練 才會搬到cluter上面 小弟是平行菜鳥 , 還請大家多多指教 [關鍵字]: R 平行運算 Master Slave / Head Node Cluster Parallel Computing by CPU --



※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 111.240.197.83
※ 文章網址: https://webptt.com/m.aspx?n=bbs/R_Language/M.1462078782.A.D91.html ※ 編輯: JackBaska (111.240.197.83), 05/01/2016 13:21:00 ※ 編輯: JackBaska (111.240.197.83), 05/01/2016 13:22:12
1F:推 cywhale: I just read Matt Dowle's blog about parallel fwrite 05/01 18:21
2F:→ cywhale: He recommended a book by Matloff http://goo.gl/7h85zz 05/01 18:23
3F:→ JackBaska: Thanks 05/01 20:04
※ 編輯: JackBaska (118.160.169.133), 05/01/2016 20:04:29
4F:→ clickhere: OpenMP和OpenMPI是不同的東西.... 05/02 00:15
5F:→ clickhere: OpenMPI和Rmpi都不需要permission.安裝在user下即可. 05/02 00:16
6F:→ clickhere: 不需要root 05/02 00:17
7F:→ JackBaska: 我直接裝library是會跳non-zero status ,然後參考原文 05/02 08:11
8F:→ JackBaska: 網站的做法是先用command line安裝完OpenMP,然後CMD 05/02 08:11
9F:→ JackBaska: Rmpi後再回到R裡面安裝library才成功,然而前面command 05/02 08:12
10F:→ JackBaska: line的動作我在cluster好像沒有權限,然後試另一個方法 05/02 08:13
11F:→ JackBaska: 都遇到版本問題,cluster的R是3.1.x,我還在找怎麼避開 05/02 08:13
12F:→ JackBaska: permission做更新還有以上建置 05/02 08:14







like.gif 您可能會有興趣的文章
icon.png[問題/行為] 貓晚上進房間會不會有憋尿問題
icon.pngRe: [閒聊] 選了錯誤的女孩成為魔法少女 XDDDDDDDDDD
icon.png[正妹] 瑞典 一張
icon.png[心得] EMS高領長版毛衣.墨小樓MC1002
icon.png[分享] 丹龍隔熱紙GE55+33+22
icon.png[問題] 清洗洗衣機
icon.png[尋物] 窗台下的空間
icon.png[閒聊] 双極の女神1 木魔爵
icon.png[售車] 新竹 1997 march 1297cc 白色 四門
icon.png[討論] 能從照片感受到攝影者心情嗎
icon.png[狂賀] 賀賀賀賀 賀!島村卯月!總選舉NO.1
icon.png[難過] 羨慕白皮膚的女生
icon.png閱讀文章
icon.png[黑特]
icon.png[問題] SBK S1安裝於安全帽位置
icon.png[分享] 舊woo100絕版開箱!!
icon.pngRe: [無言] 關於小包衛生紙
icon.png[開箱] E5-2683V3 RX480Strix 快睿C1 簡單測試
icon.png[心得] 蒼の海賊龍 地獄 執行者16PT
icon.png[售車] 1999年Virage iO 1.8EXi
icon.png[心得] 挑戰33 LV10 獅子座pt solo
icon.png[閒聊] 手把手教你不被桶之新手主購教學
icon.png[分享] Civic Type R 量產版官方照無預警流出
icon.png[售車] Golf 4 2.0 銀色 自排
icon.png[出售] Graco提籃汽座(有底座)2000元誠可議
icon.png[問題] 請問補牙材質掉了還能再補嗎?(台中半年內
icon.png[問題] 44th 單曲 生寫竟然都給重複的啊啊!
icon.png[心得] 華南紅卡/icash 核卡
icon.png[問題] 拔牙矯正這樣正常嗎
icon.png[贈送] 老莫高業 初業 102年版
icon.png[情報] 三大行動支付 本季掀戰火
icon.png[寶寶] 博客來Amos水蠟筆5/1特價五折
icon.pngRe: [心得] 新鮮人一些面試分享
icon.png[心得] 蒼の海賊龍 地獄 麒麟25PT
icon.pngRe: [閒聊] (君の名は。雷慎入) 君名二創漫畫翻譯
icon.pngRe: [閒聊] OGN中場影片:失蹤人口局 (英文字幕)
icon.png[問題] 台灣大哥大4G訊號差
icon.png[出售] [全國]全新千尋侘草LED燈, 水草

請輸入看板名稱,例如:BuyTogether站內搜尋

TOP