如何用R读取8G大的txt文件？

guo.bailing

16174

收藏 2015-09-02

悬赏 30 个论坛币未解决

如题。

我有一个8G大小的数据集，其中变量个数13个，列与列之间用逗号分隔，需要读入到R中进行分析研究，但是常规的方法都读不了，求教高手帮忙解决，谢谢？

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

全部回复

万人往LVR

2015-9-2 09:05:31

8G的话一般电脑内存都不够的，如果能分批处理，可以直接用read.table
read.table有两个参数可以用，skip跳过几行，nrows最大提取的行数。这样可以分批处理1:10000,10000:20000行

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

soccy

2015-9-2 10:16:15

ff package

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

liu7788414

2015-9-2 11:11:37

8G不算啥，关键你的内存够多吗？我用32G的内存，500G固态硬盘，64位R，data.table包，毫无压力。

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

Tony_Liu

2015-9-2 15:19:37

R直接调用内存，这点与SAS不同，所以硬盘多大是没用的，关键看内存

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

ryoeng

2015-9-2 19:23:22

ff 程序包 (Final Fantasy?) 呵呵～

提示: 作者被禁止或删除内容自动屏蔽

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

点击查看更多内容…

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

ff 程序包 (Final Fantasy?) 呵呵～

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

分享

扫码加好友，拉您进群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群