关于内存的问题 - 经管之家

› 论坛 › 数据科学与人工智能 › 数据分析与数据科学 › R语言论坛

关于内存的问题

35485

16

收藏 2015-04-25

运行R程序会出现以下提示：
Error: cannot allocate vector of size 762.9 Mb
In addition: Warning messages:
1: Reached total allocation of 1535Mb: see help(memory.size)
请问如何解决？
谢谢！

二维码

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

全部回复

2015-4-25 20:16:22

cannot allocate vector就是典型的数据太大读不了
方法有三
一、升级硬件
二、改进算法
三、修改操作系统分配给R的内存上限, memory.size(T)查看已分配内存 memory.size(F)查看已使用内存 memory.limit()查看内存上限 memory.limit(2000)可以设置上限为2000MB 前提是你有改它的权限

二维码

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

2015-4-26 21:59:41

katymeala 发表于 2015-4-25 20:16
cannot allocate vector就是典型的数据太大读不了
方法有三
一、升级硬件

你好，感谢你的解答，以下是我使用这几个函数的结果：
> memory.limit()
[1] 1535
> memory.size(T)
[1] 16.38
> memory.size(F)
[1] 14.52
> memory.limit(2000)
[1] 2000
既然我的系统可以分配给R1535M的内存，为什么762.9M的向量却没法处理呢，我使用了上限2000分配还是不行，不知道是否有什么好办法。

二维码

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

2015-4-26 22:12:35

我把内存上限设置成4G，似乎系统也显示成功了：
memory.limit()
[1] 4000
> memory.size(T)
[1] 1212.12
> memory.size(F)
[1] 1140.41
但实际上已分配的是1212.12，已经使用了1140.41，因此剩下的不足以处理762.9的向量，所以你提到了修改权限的问题，实际上R并没有得到4000的内存，请问如何获取修改权限呢？请指示？

二维码

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

2015-4-26 22:33:10

4G内存太少了，加内存吧。8G起步，16G还好。用数据库更好

二维码

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

2015-4-26 23:19:13

harlon1976 发表于 2015-4-26 22:12
我把内存上限设置成4G，似乎系统也显示成功了：
memory.limit()
[1] 4000

memory.limit(2000)可以分配成功，如果执行了这个命令，还是内存不足，那就是系统答应了你分配2000的请求，但是它拿不出那么多可分配的，是硬件问题，不是指令问题
建议改进算法,比如利用内置循环函数而不是手动循环，把所有dataframe换成matrix等等

二维码

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

点击查看更多内容…

2015-4-27 08:10:00

谢谢两位好心人的指导，其实数据已经是放在矩阵中了，看来要加内存了！

二维码

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

2015-4-27 08:17:48

我刚才在64位机上运行了，可以解决了，再次谢谢两位！

二维码

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

2015-11-3 09:57:01

有讨论很好

二维码

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

2016-9-8 20:40:17

楼主你的数据是多少行的，多少个属性。我的csv数据不到3万行，23个属性，在32和64位的软件中都读不进去。数据文件只有不到6M，怎么读到R语言里面提示无法分配6.2G的矢量。。

二维码

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

2017-3-20 13:05:27

> memory.limit()
[1] 3907
> memory.size(F)
[1] 67.07
> memory.size(T)
[1] 90.19

我这个是什么鬼，怎么会只有这么小

二维码

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

2017-3-20 13:08:40

wwqiao 发表于 2016-9-8 20:40
楼主你的数据是多少行的，多少个属性。我的csv数据不到3万行，23个属性，在32和64位的软件中都读不进去。数 ...

> memory.limit()
[1] 3907
> memory.size(F)
[1] 67.07
> memory.size(T)
[1] 90.19

我的这样的，有个30M的，12万行的数据读出来了，4个属性。64位机

二维码

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

2017-3-20 14:24:49

harlon1976 发表于 2015-4-27 08:10
谢谢两位好心人的指导，其实数据已经是放在矩阵中了，看来要加内存了！

R 什么都好,就是吃内存. 稍微复杂的运算,16G内存起

二维码

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

2019-10-26 11:45:44

wwqiao 发表于 2016-9-8 20:40
楼主你的数据是多少行的，多少个属性。我的csv数据不到3万行，23个属性，在32和64位的软件中都读不进去。数 ...

请问解决了吗

二维码

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

2022-3-3 22:44:01

yuyuhoney 发表于 2019-10-26 11:45
请问解决了吗

请问解决了吗

二维码

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

2022-3-3 22:45:15

yuyuhoney 发表于 2019-10-26 11:45
请问解决了吗

请问你后来解决了吗

二维码

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

卡卡拉跳大神

2022-11-10 11:45:03

katymeala 发表于 2015-4-25 20:16
cannot allocate vector就是典型的数据太大读不了
方法有三
一、升级硬件

您好，现在显示memory.limit()' is no longer supported ，请问应该如何再来增大内存呢？感谢~

二维码

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

相关推荐

栏目导航

热门文章

推荐文章

扫码加好友，拉您进群

各岗位、行业、专业交流群