[問題] R載入檔案是否有最大限制

看板R_Language作者 (社會黑暗、行路難)時間6年前 (2019/03/13 09:21), 編輯推噓1(1012)
留言13則, 6人參與, 6年前最新討論串1/1
我有一個約28MB的檔案,每次載入R之後就會等很久,但是每次都在等待超久之後,就直接終止,關閉程式。 無論是用csv格式或txt都是如此。 想問:是否因為檔案太大,所以R無法負荷? 而這種或更大的檔案,是否就要用分散式資料庫才能存取? 還請指導,感謝。 ----- Sent from JPTT on my Sony G3226. -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 61.216.102.143 ※ 文章網址: https://www.ptt.cc/bbs/R_Language/M.1552440116.A.2BF.html

03/13 09:44, 6年前 , 1F
28MB而已,不太可能碰到限制,很早之前,R的data.fr
03/13 09:44, 1F

03/13 09:44, 6年前 , 2F
ame列數就可以支援超過2^31-1,28MB不可能超過那麼
03/13 09:44, 2F

03/13 09:44, 6年前 , 3F
多列
03/13 09:44, 3F

03/13 09:45, 6年前 , 4F
超過10GB可能才需要....
03/13 09:45, 4F

03/13 09:46, 6年前 , 5F
建議附上R版本 用過什麼方法讀過的資訊
03/13 09:46, 5F

03/13 10:10, 6年前 , 6F
28MB並不大
03/13 10:10, 6F

03/13 12:23, 6年前 , 7F
善用data.table
03/13 12:23, 7F

03/13 15:45, 6年前 , 8F
不大...
03/13 15:45, 8F

03/13 20:04, 6年前 , 9F
fread
03/13 20:04, 9F

03/13 23:35, 6年前 , 10F
後來發現是檔案內容有格式問題,所以經修正後已經ok
03/13 23:35, 10F

03/13 23:35, 6年前 , 11F
。不過奇怪的是,console並沒有跳出錯誤訊息,而讓
03/13 23:35, 11F

03/13 23:35, 6年前 , 12F
我癡癡地等,所以才會讓人以為是檔案過大而無法負荷
03/13 23:35, 12F

03/13 23:35, 6年前 , 13F
03/13 23:35, 13F
文章代碼(AID): #1SY5iqA_ (R_Language)
文章代碼(AID): #1SY5iqA_ (R_Language)