如何run这么大的数据

2276

收藏 2011-02-09

各位好，我现在的数据大约有188万条观测，我现在想gen大约470个dummy，但是stata总说out of mem，我现在已经把mem设定到1g, 所有变量可以drop的都已经drop了，能compress的都compress了，请问还有什么办法可以让stata干这件事情呢？
多谢！

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

全部回复

情迷仲夏夜

2011-2-9 05:50:09

建议你最好先取30-50%的样本去运行model，我曾经运行过900万个观测值和10几个变量用SAS执行了420小时，你就可想而知了！compress在执行程序过程中不一定有用，只有在存储时才会起作用！另外如果可能，那就是增加memory到4GB，甚至或8GB。算统计，舍不得增加内存，那就不可能运行如此大的数据库！要想增加速度，就需要4核心甚至8核心系统。

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

amber625

2011-2-9 07:06:11

尽量少用for 循环,这个会很浪费时间

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

xujh03

2011-2-9 10:16:15

我的电脑4G内存，win7，但是为什么stata依然不让我设置1G以上的内存呢？

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

dxystata

2011-2-9 15:22:36

用R或SAS

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

扫码加我 拉你入群

分享

扫码加好友，拉您进群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群

扫码加我拉你入群