作者paranoia5201 (社會黑暗、行路難)
看板R_Language
標題[問題] R載入檔案是否有最大限制
時間Wed Mar 13 09:21:54 2019
我有一個約28MB的檔案,每次載入R之後就會等很久,但是每次都在等待超久之後,就直接終止,關閉程式。
無論是用csv格式或txt都是如此。
想問:是否因為檔案太大,所以R無法負荷?
而這種或更大的檔案,是否就要用分散式資料庫才能存取?
還請指導,感謝。
-----
Sent from JPTT on my Sony G3226.
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 61.216.102.143
※ 文章網址: https://webptt.com/m.aspx?n=bbs/R_Language/M.1552440116.A.2BF.html
1F:→ celestialgod: 28MB而已,不太可能碰到限制,很早之前,R的data.fr 03/13 09:44
2F:→ celestialgod: ame列數就可以支援超過2^31-1,28MB不可能超過那麼 03/13 09:44
3F:→ celestialgod: 多列 03/13 09:44
4F:→ celestialgod: 超過10GB可能才需要.... 03/13 09:45
5F:→ celestialgod: 建議附上R版本 用過什麼方法讀過的資訊 03/13 09:46
6F:→ Luluemiko: 28MB並不大 03/13 10:10
7F:推 KuChanTung: 善用data.table 03/13 12:23
8F:→ dodo4218: 不大... 03/13 15:45
9F:→ mosenay: fread 03/13 20:04
10F:→ paranoia5201: 後來發現是檔案內容有格式問題,所以經修正後已經ok 03/13 23:35
11F:→ paranoia5201: 。不過奇怪的是,console並沒有跳出錯誤訊息,而讓 03/13 23:35
12F:→ paranoia5201: 我癡癡地等,所以才會讓人以為是檔案過大而無法負荷 03/13 23:35
13F:→ paranoia5201: 。 03/13 23:35