全部版块 我的主页
论坛 数据科学与人工智能 数据分析与数据科学 R语言论坛
2797 6
2017-02-14
现在在分析客户数据,有个excel表,*。cvs格式,在R中读入的话那么RStudio运行内存应该多大?

笔记本只有4G内存,64位,运行不动   求教高人。

想悬赏,不知道坛子里怎么设置
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

全部回复
2017-2-14 20:56:54
推荐一个包{data.table},里面的fread函数可以极速读取超大文件,btw我的RStudio读取一个156MB大小的txt文件(超大矩阵,4915*4915个值)实际占用了120M左右的内存,我的电脑是8G内存;
关于如何读取,如果溢出的话,可以考虑分行来读取,然后做好断开位置的备注:
引自:http://blog.163.com/zhoulili1987619@126/blog/static/35308201201401611194834/
con <- file("e:/data.txt", "r")
line=readLines(con,n=1)
while( length(line) != 0 ) {
     print(line)
     line=readLines(con,n=1)
}
close(con)
ps: readLines是base包的函数
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2017-2-15 12:59:53
10万行这点小数据,内存暂用一点点而已
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2017-2-15 21:26:13
kkwei 发表于 2017-2-15 12:59
10万行这点小数据,内存暂用一点点而已
那我的笔记本怎么运行好慢啊??????
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2017-2-15 21:26:43
kkwei 发表于 2017-2-15 12:59
10万行这点小数据,内存暂用一点点而已
那我的笔记本怎么运行好慢啊??????
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2017-2-15 21:27:16
wuyi0614 发表于 2017-2-14 20:56
推荐一个包{data.table},里面的fread函数可以极速读取超大文件,btw我的RStudio读取一个156MB大小的 ...
多谢你提供的信息,我看看你所说的包函数!
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

点击查看更多内容…
相关推荐
栏目导航
热门文章
推荐文章

说点什么

分享

扫码加好友,拉您进群
各岗位、行业、专业交流群