全部版块 我的主页
论坛 计量经济学与统计论坛 五区 计量经济学与统计软件 经管代码库
6570 13
2014-07-07
我经常会处理一些比较大的表格,一般有2~3个G,大约上百万或千万条观测,十个左右的变量


在我用到的不多的几个过程步中,对于处理上述的大表格来说,比较费时的有以下几个:
1. proc sql(尤其是连接条件比较复杂的情况)
2. proc transpose
3. proc timeseries
...

我最近从网上搜和自己总结了几个能够加速上述过程,或者用变通的手段达到相同结果的方法。

先发一个快速转置,可用于替代proc transpose的宏吧


不是我做的,网上找的,经测试速度很快,和proc transpose参数设置相同,结果也相同。

方法是用data步来代替proc transpose,data步的效率很令人惊奇,也可以看出proc transpose本身应该有很大的改进空间,可惜SAS是封闭的,大牛也无能为力。


transpose.txt
大小:(7.83 KB)

只需: 1 个论坛币  马上下载








二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

全部回复
2014-7-8 09:30:05
谢谢。
最近找了DataStream的数据,都是xls的格式,而且都是横排的,必须转置。因为这个头疼呢。
再次感谢!
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2014-7-10 13:28:20
这个貌似挺有意思的,看一下。
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2014-7-11 09:57:40
听过Arthur 的讲课。一个年过花甲的老人。现在也做人才招聘,时不时广而告知几个sas职位。听众大多都有些sas 基础。但是他的slide 还是针对扫盲的。我有过10次悔恨,然后就不再去了。上一次花了¥3500。在课堂上睡了三天。最后有了感悟:为什么搞sas的不是语言表达有丈矮,就是english有口音?
京剧
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2014-7-11 10:22:26
jingju11 发表于 2014-7-11 09:57
听过Arthur 的讲课。一个年过花甲的老人。现在也做人才招聘,时不时广而告知几个sas职位。听众大多都有些sa ...
嗯,京剧你要换输入法了

另外这文章的第二作者
Xia Ke Shan, Chinese Financial Electrical Company, Beijing, China
查不到这个公司是何方神圣
京剧兄有了解吗?

二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2014-7-11 10:38:05
I saw a lot his postings. 基本上言简意赅。没有运气尖刀他。
京剧
http://cn.linkedin.com/pub/xia-keshan/44/896/4a2
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

点击查看更多内容…
相关推荐
栏目导航
热门文章
推荐文章

说点什么

分享

扫码加好友,拉您进群
各岗位、行业、专业交流群