jettkaos 发表于 2009-6-20 00:08
SAS的DATA步基本就是按记录处理的，所以理论上多大的数据都能处理。    但是这还需要看具体的算法，某些算法需要整体处理或存储临时数据的话，还是得修改算法。

whitefire2001 发表于 2009-6-21 09:16
说实话，我对SAS不了解，不过真的有必要吗？ 随机数据，内存的访问速度比硬盘快1000倍以上；批量数据，内存快10倍以上。

而1000万个变量能有多大？ 双精度才64bit，8byte。 1000万 x  8 = 80 x 1000,000 = 80 M

fincomputing 发表于 2009-6-21 20:01
我觉得，考虑使用Matlab，R等替代软件，SAS处理大数据量可不是强项，呵呵～～

raymonica 发表于 2009-6-19 21:44
我也比较头疼这个问题。 有时候需要花上几天把数据分成几个块。 把CLOB 字段转成csv， 再传入SAS. 太麻烦了。我正在申请直接把ORACLE 的数据库连上 SAS。 这样就不需要转来转去的。不知道那位高人有这方面的经验可以分享。

邓贵大 发表于 2009-6-26 10:25
我觉得唯有像楼主那样的人材才可以处理无限大~~的数据！

marloneusa 发表于 2009-6-19 22:17
我记得前几天有位高人贴了个招聘的帖子，关于如何同时处理1000万个变量的问题。我想他至少有这方面的经验，因为我觉得把数据读入内存肯定不是办法。望赐教。