全部版块 我的主页
论坛 数据科学与人工智能 数据分析与数据科学 R语言论坛
8909 8
2015-01-21
我有大概10+G的网上多个CSV想不保存到本地直接导入R做成数据框,但我理解的R都是把数据保存到内存中,所以我想使用ff包把数据存到硬盘上
网上找不到关于ff包的使用方法,所以想在这里请教各位大牛,如何把数据框保存到硬盘,然后往该数据框添加新的数据
能用R的基本功能及其他包来正常分析保存到硬盘上的ff数据吗?

二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

全部回复
2015-1-21 22:57:01
还是读入到sqlite或者mysql里面,然后从R调用比较好。
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2015-1-21 23:11:33
soccy 发表于 2015-1-21 22:57
还是读入到sqlite或者mysql里面,然后从R调用比较好。
导入到mysql,R来调用,R能处理10G+的数据吗?
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2015-1-22 00:03:04
放到数据库里就不用一下在把所有数据都load进内存,从而间接克服R的缺点。
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2015-1-22 00:27:05
soccy 发表于 2015-1-22 00:03
放到数据库里就不用一下在把所有数据都load进内存,从而间接克服R的缺点。
一下分析的数据大小可能会超过内存大小,请问这种情况怎么处理呢
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2015-1-22 01:03:43
这样只好加内存了。
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

点击查看更多内容…
相关推荐
栏目导航
热门文章
推荐文章

说点什么

分享

扫码加好友,拉您进群
各岗位、行业、专业交流群